Парсер для C #

Question 1

Какие парсеры доступны для разбора кода C #?

Я ищу синтаксический анализатор C #, который можно использовать в C # и предоставить мне доступ к информации о строках и файлах о каждом артефакте анализируемого кода.

Question 2

Работает над исходным кодом:

CSParser : с C # 1.0 до 2.0, открытый исходный код
Metaspec C # Parser : с C # 1.0 до 3.0, коммерческий продукт (около 5000 $)
# признать! : С C # 1.0 до 3.0, коммерческий продукт (около 900 евро) (ответ SharpRecognize )
SharpDevelop Parser (ответ Аксельссона )
NRefactory : с C # 1.0 до 4.0 (+ async), открытый исходный код, парсер, используемый в SharpDevelop. Включает семантический анализ.
C # Parser и CodeDOM : полный синтаксический анализатор C # 4.0, уже поддерживающий асинхронную функцию C # 5.0. Коммерческий продукт (от 49 до 299 долларов) (ответ Кена Беккета )
Microsoft Roslyn CTP : компилятор как услуга.

Работы по сборке:

System.Reflection
Общая инфраструктура компилятора Microsoft : с C # 1.0 до 3.0, Microsoft Public License. Используется Fxcop и Spec #
Mono.Cecil : с C # 1.0 до 3.0, открытый исходный код

Проблема с "синтаксическим анализом" сборки заключается в том, что у нас меньше информации о строке и файле (информация основана на файле .pdb, а Pdb содержит информацию о строках только для методов)

Я лично рекомендую Mono.Cecil и NRefactory .

Question 3

Mono (с открытым исходным кодом) включает компилятор C # (и, конечно, парсер)

Question 4

Если вы собираетесь компилировать C # v3.5 в сборки .net:

var cp = new Microsoft.CSharp.CSharpCodeProvider(new Dictionary<string, string>() { { "CompilerVersion", "v3.5" } });

http://msdn.microsoft.com/en-us/library/microsoft.csharp.csharpcodeprovider.aspx

Question 5

Если вы знакомы с ANTLR, вы можете использовать грамматику Antlr C # .

Question 6

Я реализовал именно то, о чем вы просите (AST Parsing of C # code), в проекте OWASP O2 Platform с использованием SharpDevelop AST API.

Чтобы упростить использование, я написал быстрый API, который предоставляет ряд ключевых элементов исходного кода (с использованием операторов, типов, методов, свойств, полей, комментариев) и может переписать исходный код C # на C # и в VBNET. .

Вы можете увидеть этот API в действии в этом файле сценария O2 XRule: ascx_View_SourceCode_AST.cs.o2 .

Например, вот как вы обрабатываете текст исходного кода C # и заполняете несколько TreeView и TextBox:

    public void updateView(string sourceCode)
    {   
        var ast = new Ast_CSharp(sourceCode);
        ast_TreeView.show_Ast(ast);
        types_TreeView.show_List(ast.astDetails.Types, "Text");
        usingDeclarations_TreeView.show_List(ast.astDetails.UsingDeclarations,"Text");
        methods_TreeView.show_List(ast.astDetails.Methods,"Text");
        fields_TreeView.show_List(ast.astDetails.Fields,"Text");
        properties_TreeView.show_List(ast.astDetails.Properties,"Text");
        comments_TreeView.show_List(ast.astDetails.Comments,"Text");

        rewritenCSharpCode_SourceCodeEditor.setDocumentContents(ast.astDetails.CSharpCode, ".cs");
        rewritenVBNet_SourceCodeEditor.setDocumentContents(ast.astDetails.VBNetCode, ".vb");                                
    }

Пример на ascx_View_SourceCode_AST.cs.o2 также показывает, как вы можете затем использовать информацию, собранную из AST, чтобы выбрать в исходном коде тип, метод, комментарий и т. Д.

Для справки, вот написанный код API (обратите внимание, что это мой первый проход при использовании парсера SharpDevelop C # AST, и я все еще не понимаю, как он работает):

Question 7

Недавно мы выпустили парсер C #, который обрабатывает все функции C # 4.0 плюс новую функцию async: C # Parser и CodeDOM.

Эта библиотека генерирует семантическую объектную модель, которая сохраняет комментарии и информацию о форматировании и может быть изменена и сохранена. Он также поддерживает использование запросов LINQ для анализа исходного кода.

Question 8

http://www.codeplex.com/csparser

Question 9

SharpDevelop , IDE с открытым исходным кодом, поставляется с анализатором кода на основе посетителей, который работает очень хорошо. Его можно использовать независимо от IDE.

Question 10

Рассмотрите возможность использования отражения на встроенном двоичном файле вместо непосредственного анализа кода C #. API отражения действительно прост в использовании и, возможно, вы сможете получить всю необходимую информацию?

Question 11

Взгляните на Gold Parser . Он имеет очень интуитивно понятный интерфейс, который позволяет вам в интерактивном режиме тестировать грамматику и генерировать код C #. С ним доступно множество примеров, и это совершенно бесплатно.

Question 12

Может быть, вы могли бы попробовать Irony на сайте irony.codeplex.com.

Это очень быстро, и грамматика C # уже существует.

Сама грамматика написана прямо на C # в стиле BNF (достигается с некоторыми перегрузками операторов)

Самое лучшее в этом то, что «грамматика» производит AST напрямую.

Question 13

Вам обязательно стоит попробовать Roslyn, поскольку MS только что открыла (или скоро откроет) код с лицензией Apache 2 здесь . Вы также можете проверить способ синтаксического анализа этой информации с помощью этого кода с GitHub .

Question 14

То , что набирает обороты и очень подходит для работы в Nemerle

Вы можете увидеть, как это может решить эту проблему, в этих видеороликах от NDC:

Question 15

Не на C #, но полный синтаксический анализатор C # 2/3/4, который строит полные AST, доступен с нашим DMS Software Reengineering Toolkit .

DMS предоставляет обширную инфраструктуру для синтаксического анализа, построения дерева, построения таблиц символов и анализа потоков, преобразования источника в источник и регенерации исходного кода из (модифицированных) AST. (Он также поддерживает многие другие языки, помимо C #.)

ИЗМЕНИТЬ (сентябрь) 2013 г .: этот ответ в последнее время не обновлялся. DMS давно работает с C # 5.0

Question 16

GPPG может быть полезен , если вы хотите написать свой собственный парсер (что забавно).