Будь-який гідний парсер PHP, написаний на PHP? [зачинено]

Я роблю багато роботи, маніпулюючи та аналізуючи PHP-код. Зазвичай для цього я просто використовую маркер . Для більшості програм цього достатньо. Але іноді розбір за допомогою лексера просто недостатньо надійний (очевидно).

Таким чином, я шукаю якийсь парсер PHP, написаний на PHP. Я знайшов hnw / PhpParser та kumatch / stagehand-php-parser . Обидва вони створюються шляхом автоматизованого перетворення zend_language_parser.y у файл .y з PHP замість C (а потім компілюється в синтаксичний аналізатор LALR (1)). Але з цим автоматичним перетворенням просто неможливо працювати.

Отже, чи існує якийсь гідний парсер PHP, написаний на PHP? (Мені потрібен один для PHP 5.2 і один для 5.3. Але лише один із них також буде гарною відправною точкою.)

Після того, як тут не було знайдено повноцінного та стабільного парсера, я вирішив написати його сам. Ось результат:

PHP-парсер : PHP-аналізатор, написаний на PHP

Проект підтримує синтаксичний аналіз коду, написаного для будь-якої версії PHP між PHP 5.2 та PHP 7.1.

Окрім самого синтаксичного аналізатора, бібліотека містить деякі супутні компоненти:

• Компіляція AST назад до PHP ("симпатичний друк")
• Інфраструктура для обходу та зміни AST
• Серіалізація до та з XML (а також скидання в зручній для читання формі)
• Вирішення імен з простором імен (псевдоніми тощо)

Для того використання Огляд см «Використання основних компонентів» розділ документації .

Це не буде чудовим варіантом для вас, оскільки воно порушує обмеження pure-PHP, але:

Деякий час тому люди з php-інтерналів вирішили, що вони перейдуть на Lemon як свою технологію синтаксичного аналізу. У репозиторії svn PHP є гілка, яка містить необхідні зміни.

Вони вирішили не продовжувати з цим , оскільки виявили, що їх лимонний розчин повільніше приблизно на 10-15%. Але, філія все ще є.

Існує старіший парсер Lemon, написаний як розширення PHP. Можливо, ви зможете з цим працювати. Є також цей пакет PEAR . Є також цей інший лимонний пакет (через цю публікацію в блозі про PGN ).

Звичайно, навіть якщо ти змусиш це працювати, я не впевнений, що ти зробив би з даними або як ці дані навіть виглядають.

Ще одним шаленим варіантом було б заглянути в Quercus , реалізацію PHP на Java. Вони мали б написати синтаксичний аналізатор, можливо, варто було б дослідити.

Інструмент метрики PHP Depend містить код для створення AST із джерела PHP, повністю написаного на PHP. Однак він використовує власний PHP token_get_all для токенізації.

Вихідний код доступний на github: https://github.com/manuelpichler/pdepend/tree/master/src/main/php/PHP/Depend

Реалізація AST для деяких частин, таких як математичні вирази, ще не була завершена останньою, яку я перевірив, але, за словами її автора, це є метою.

Ну, це не в PHP, вибачте, але побудувати такий механізм важко, і PHP не особливо підходить для завдання обробки мови.

Наш PHP Front End забезпечує повний розбір PHP 4.x та 5.x (EDIT 9/2016: тепер обробляє PHP 7), синтаксичний аналіз, автоматично створює AST з усіма деталями повної граматики PHP, може генерувати компільований вихідний текст з AST. Це складніше, ніж це може здатися, якщо врахувати всі делікатні деталі, включаючи дивні літеральні рядки, захоплені коментарі, числа з радіусом тощо.

Але AST навряд чи достатньо (ви вже спостерігали, що токенів навіть не вистачає).

Основа, на якій вона побудована, Інструментарій реінжинірингу програмного забезпечення DMS забезпечує підтримку аналізу та довільних перетворень AST. Він також буде читати великі набори файлів одночасно, що дозволяє аналіз і перетворення через PHP файли.

Існує порт ANTLR до PHP: http://code.google.com/p/antlrphpruntime/w/list

Тут покинули, але я думаю, що це все одно має спрацювати.