SEWiki - Вклад участника [ru]

Формальные грамматики 2014

2014-12-11T14:25:15Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(11 декабря: все работы проверены, скоро будут результаты)''

Формальные грамматики 2014

2014-10-15T09:24:01Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, К. Б. Аманова, А. Афанасьева, П. Авдеева, Т. Бондарева, Б. Бугаева, С. Ворончихина, И. Гайдая, И. В. Гончаровой, К. Елагина, Д. Жаркова, И. Жиркова, А. В. Калакуцкого, Н. Карташова, А. Комарова, А. Лиозновой, А. Маловой, Т. С. Малыгиной, Д. Мелешко, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Н. К. Ситдыковой, Е. Старостиной, М. Тураева, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова, О. Яснева)''

Формальные грамматики 2014

2014-10-14T14:59:11Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, К. Б. Аманова, А. Афанасьева, П. Авдеева, Т. Бондарева, Б. Бугаева, С. Ворончихина, И. Гайдая, И. В. Гончаровой, К. Елагина, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, А. Лиозновой, А. Маловой, Т. С. Малыгиной, Д. Мелешко, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Н. К. Ситдыковой, Е. Старостиной, М. Тураева, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова, О. Яснева)''

Формальные грамматики 2014

2014-10-14T13:38:30Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, К. Б. Аманова, А. Афанасьева, П. Авдеева, Т. Бондарева, Б. Бугаева, С. Ворончихина, К. Елагина, И. Гайдая, И. В. Гончаровой, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, А. Лиозновой, А. Маловой, Т. С. Малыгиной, Д. Мелешко, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Н. К. Ситдыковой, Е. Старостиной, М. Тураева, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова, О. Яснева)''

Формальные грамматики 2014

2014-10-14T10:16:34Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, К. Б. Аманова, А. Афанасьева, П. Авдеева, Т. Бондарева, Б. Бугаева, С. Ворончихина, К. Елагина, И. Гайдая, И. В. Гончаровой, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, А. Маловой, Т. С. Малыгиной, Д. Мелешко, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Н. К. Ситдыковой, Е. Старостиной, М. Тураева, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова, О. Яснева)''

Формальные грамматики 2014

2014-10-13T11:53:42Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, А. Афанасьева, П. Авдеева, Б. Бугаева, К. Елагина, И. Гайдая, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, М. Тураева, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова)''

Формальные грамматики 2014

2014-10-13T10:14:45Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы Е. Акимова, А. Афанасьева, П. Авдеева, Б. Бугаева, К. Елагина, И. Гайдая, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова)''

Формальные грамматики 2014

2014-10-13T10:12:19Z

Okhotin: /* Задание 2: к 13 октября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(проверенные работы переданы на кафедру)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

''(получены работы А. Афанасьева, П. Авдеева, Б. Бугаева, К. Елагина, И. Гайдая, Д. Жаркова, А. В. Калакуцкого, Н. Карташова, К. Новокрещенова, Н. Обедина, А. Ордияна, С. Сидорова, Т. Тураева, Е. Устюжаниной, М. Хабибуллина, А. Цветкова, П. Чуприкова)''

Формальные грамматики 2014

2014-10-09T09:11:48Z

Okhotin: /* Задание 1: к 22 сентября */

Формальные грамматики 2014

2014-10-08T16:13:08Z

Okhotin: /* Задание 1: к 22 сентября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

[[Файл:Formal grammars 2014 homework 1 solutions.pdf]]

''(всё проверено, изыскиваются способы передать проверенные работы)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

Файл:Formal grammars 2014 homework 1 solutions.pdf

2014-10-08T16:12:11Z

Okhotin: Формальные грамматики 2014, решения задач из домашнего задания 1

Формальные грамматики 2014, решения задач из домашнего задания 1

Формальные грамматики 2014

2014-10-07T15:45:31Z

Okhotin: /* Задание 1: к 22 сентября */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

''(всё проверено, изыскиваются способы передать проверенные работы)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

Формальные грамматики 2014

2014-10-07T07:26:56Z

Okhotin: /* Упражнения */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

''(почти всё проверено, скоро будут результаты)''

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

''(задания принимаются по эл. почте в формате pdf, печатном или отсканированном рукописном; отсканированные файлы должны быть пригодны для печати и умещаться в один мегабайт)''

Формальные грамматики 2014

2014-10-03T15:35:52Z

Okhotin: /* Задание 2: (есть шесть задач из семи, последняя сочиняется) */ Выданы все задачи

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: к 13 октября ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка–Касами–Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> — начальный символ грамматики. Описать, когда и как именно вычисляется это произведение — то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# Для произвольной данной линейной грамматики G, пусть <math>L=\{vu \mid uv \in L(G)\}</math> — циклический сдвиг порождаемого ею языка. Построить алгоритм, определяющий принадлежность данной на входе строки языку <math>L</math>, и ''использующий как можно меньше памяти''. Объём памяти считать функцией <math>s(n)</math>, где <math>n</math> — длина входной строки, и этот объём должен быть по крайней мере меньше, чем линейным. Примечания: алгоритм строится по грамматике, и потому зависимостью требуемого объёма памяти от размера этой грамматики можно пренебречь; алгоритм должен быть детерминированным; если получится использовать алгоритмы, приведённые на лекциях, то их можно не повторять, но нужно указать, как именно и к чему именно они применяются.

Файл:Formal grammars 2014 lecture 14.pdf

2014-10-02T17:03:18Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 14.pdf»: В раздел о P-полноте добавлена картинка.

Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Формальные грамматики 2014

2014-10-02T15:54:26Z

Okhotin: /* Лекция 14: Вычислительная сложность разбора */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 2 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (есть шесть задач из семи, последняя сочиняется) ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка--Касами--Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> --- начальный символ грамматики. Описать, когда и как именно вычисляется это произведение --- то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# '''(сочиняется)'''

Файл:Formal grammars 2014 lecture 14.pdf

2014-10-02T15:53:55Z

Okhotin:

Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Файл:Formal grammars 2014 lecture 14.pdf

2014-10-02T10:23:58Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 14.pdf»: В раздел про память (\log n)^2 добавлен рекурсивный алгоритм.

Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Формальные грамматики 2014

2014-10-01T15:34:42Z

Okhotin: /* Задание 2: (есть шесть задач из семи, последняя сочиняется) */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 1 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (есть шесть задач из семи, последняя сочиняется) ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка--Касами--Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> --- начальный символ грамматики. Описать, когда и как именно вычисляется это произведение --- то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром <math>w</math>, т.е., строку, для которой <math>w=w^R</math>»?
# '''(сочиняется)'''

Формальные грамматики 2014

2014-10-01T15:34:08Z

Okhotin: /* Задание 2: (одно упражнение есть, остальные сочиняются) */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

Приветствуются любые замечания
по содержанию материалов к лекциям:
если что-то неправильно или плохо понятно,
то, пожалуйста, напишите, что именно.

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]
(редакция от 1 октября)

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (есть шесть задач из семи, последняя сочиняется) ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка--Касами--Янгера.
# Рассмотреть работу алгоритма Валианта (синтаксический анализ через умножение матриц, лекции 9-10) для грамматики, построенной в прошлом упражнении. Среди всех действий, производимых алгоритмом, найти то произведение булевых матриц, после вычисления которого станет верным условие <math>S \in f(P_{0,6})</math>, где <math>S</math> --- начальный символ грамматики. Описать, когда и как именно вычисляется это произведение --- то есть, какая процедура, вызванная с какими значениями, и какой оператор в ней умножает какие две булевы матрицы какого размера, каков результат умножения, и какие элементы <math>P_{i,j}</math> будут этим затронуты?
# Замкнут ли класс LL языков относительно пересечения с регулярными языками? Если замкнут, привести построение (см. построение такого рода для всего класса обыкновенных грамматик в материалах к лекциям 2-4), а если незамкнут, привести пример LL грамматики и регулярного языка с доказательством несуществования LL грамматики для их пересечения (см. доказательства такого рода в материалах к лекции 11).
# Построить линейную грамматику для языка <math>f(L_0)</math>, где <math>L_0 = \{ w\$w^R \mid w \in \{a,b\}^* \}</math> и <math>f(L) = \{ [w_{1,1} \# \ldots \# w_{1, k_1}] \ldots [w_{m,1} \# \ldots \# w_{m, k_m}] \mid \exists i_1, \ldots, i_m: \; w_{1,i_1} w_{2,i_2} \ldots w_{m,i_m} \in L \}</math> (это NLOGSPACE-полный язык, приведённый на лекции).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку чётной длины»? Если разрешима, привести алгоритм, а если неразрешима, доказать это с помощью методов лекции 15 (использовав язык VALC в готовом виде, или же определив новый его вариант).
# Разрешима ли такая задача: «по данной обыкновенной грамматике, определить, порождает ли она хотя бы одну строку-палиндром $w$, т.е., строку, для которой <math>w=w^R</math>»?
# '''(сочиняется)'''

Формальные грамматики 2014

2014-10-01T15:14:44Z

Okhotin: /* Лекция 14: Вычислительная сложность разбора */

Файл:Formal grammars 2014 lecture 14.pdf

2014-10-01T15:14:19Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 14.pdf»: Исправлено несколько опечаток.

Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Формальные грамматики 2014

2014-10-01T15:05:28Z

Okhotin: /* Содержание лекций */

Формальные грамматики 2014

2014-09-30T17:22:57Z

Okhotin: /* Задание 2: (сочиняется) */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (одно упражнение есть, остальные сочиняются) ===

# Постоить обыкновенную грамматику ''в нормальном виде Хомского'' для языка Дика <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> над алфавитом <math>\{a, b\}</math>. Для этой грамматики и для входной строки <math>w=abaabba \notin D</math>, построить таблицу разбора <math>T_{i,j}</math>, как в алгоритме Кокка--Касами--Янгера.

(остальные задания сочиняются и будут выданы к вечеру 1 октября)

Формальные грамматики 2014

2014-09-30T14:51:07Z

Okhotin: /* Лекция 15: Разрешимость свойств грамматик */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]
(редакция от 30 сентября)

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (сочиняется) ===

Файл:Formal grammars 2014 lecture 15.pdf

2014-09-30T14:50:35Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 15.pdf»: Добавлена вторая картинка про VALC.

Формальные грамматики 2014, материалы к лекции 15 (англ. яз.).

Формальные грамматики 2014

2014-09-30T12:41:16Z

Okhotin: /* Лекция 9: Табличные алгоритмы синтаксического анализа */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(редакция от 30 сентября)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (сочиняется) ===

Файл:Formal grammars 2014 lectures 9 10.pdf

2014-09-30T12:40:47Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lectures 9 10.pdf»

Формальные грамматики 2014, материалы к лекциям 9--10 (англ. яз).

Формальные грамматики 2014

2014-09-29T16:56:31Z

Okhotin: /* Лекция 15: Разрешимость свойств грамматик */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

[[Файл:Formal grammars 2014 lecture 15.pdf]]

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (сочиняется) ===

Файл:Formal grammars 2014 lecture 15.pdf

2014-09-29T16:55:35Z

Okhotin: Формальные грамматики 2014, материалы к лекции 15 (англ. яз.).

Формальные грамматики 2014, материалы к лекции 15 (англ. яз.).

Формальные грамматики 2014

2014-09-29T10:02:09Z

Okhotin: Проставлены даты лекций

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.
''(8 сентября)''

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.
''(8 сентября)''

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.
''(9 сентября)''

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».
''(9 сентября)''

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик
через логический вывод, перезапись термов, деревья разбора и языковые уравнения.
Примеры грамматик: wcw, объявление перед использованием, степени четвёрки.
Приведение к нормальному виду Хомского.
Понятие о булевых грамматиках.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования.
Комбинаторные и аналитические методы доказательства существенной неоднозначности.
''(11 сентября)''

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.
''(12 сентября)''

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.
''(22 сентября)''

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.
''(22 сентября)''

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.
''(22 сентября)''

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку.
Детерминированный конечный автомат, читающий стек.
Класс LR(k) грамматик.
Построение таблиц по методу SLR(k).
Магазинные автоматы и их равносильность LR(k) грамматикам.
''(24 сентября)''

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.
''(24 сентября)''

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.
''(24 сентября)''

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.
''(26 сентября)''

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (сочиняется) ===

Формальные грамматики 2014

2014-09-29T09:09:19Z

Okhotin: /* Упражнения */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

=== Задание 2: (сочиняется) ===

Формальные грамматики 2014

2014-09-29T09:08:50Z

Okhotin: /* Разрешимость свойств грамматик */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Лекция 15: Разрешимость свойств грамматик ===

Язык вычислений машины Тьюринга (VALC)
и его представление в виде пересечения двух LL(1) линейных языков.
Неразрешимость основных свойств линейных грамматик.
Разрешимость проверки равносильности LL(k) грамматик.
Разрешимость задачи включения для автоматов, управляемых входом.
Иерархия семейств грамматик.

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Формальные грамматики 2014

2014-09-26T11:44:52Z

Okhotin: /* Лекция 14: Вычислительная сложность разбора */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строки данной обыкновенной грамматике
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Формальные грамматики 2014

2014-09-26T07:33:48Z

Okhotin: /* Лекция 14: Вычислительная сложность разбора */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строке данной обыкновенной грамматики
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

[[Файл:Formal grammars 2014 lecture 14.pdf]]

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lecture 14.pdf

2014-09-26T07:32:38Z

Okhotin: Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Формальные грамматики 2014, материалы к лекции 14 (англ. яз.).

Формальные грамматики 2014

2014-09-25T08:44:19Z

Okhotin: /* Лекция 12: LR(k) анализ и детерминированные языки */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 25 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строке данной обыкновенной грамматики
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lectures 12 13.pdf

2014-09-25T08:43:50Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lectures 12 13.pdf»: Исправлено несколько опечаток в разделе об автоматах, управляемых входом.

Формальные грамматики 2014

2014-09-24T22:41:38Z

Okhotin: /* Лекция 12: LR(k) анализ и детерминированные языки */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

[[Файл:Formal grammars 2014 lectures 12 13.pdf]]
(весьма неполная редакция от 24 сентября)

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строке данной обыкновенной грамматики
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lectures 12 13.pdf

2014-09-24T22:41:15Z

Okhotin:

Формальные грамматики 2014

2014-09-24T15:05:00Z

Okhotin: /* Вычислительная сложность разбора */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Лекция 14: Вычислительная сложность разбора ===

Разбор обыкновенных грамматик с использованием памяти <math>(\log n)^2</math>,
разбор схемой высоты <math>(\log n)^2</math>.
Линейная грамматика для NLOGSPACE-полного языка.
Задача принадлежности данной строке данной обыкновенной грамматики
и её P-полнота.
Равносильность грамматик 1-го порядка классу P.

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Формальные грамматики 2014

2014-09-24T14:59:55Z

Okhotin: /* Обобщённый LR; автоматы, управляемые входом */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

=== Лекция 13: Автоматы, управляемые входом; обобщённый LR ===

Автоматы, управляемые входом (input-driven automata; visibly pushdown automata). Равносильность их детерминированных и недетерминированных разновидностей. Грамматики, управляемые входом.
Обобщённый LR: пример работы, оценки сложности.

=== Вычислительная сложность разбора ===

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Формальные грамматики 2014

2014-09-24T10:13:42Z

Okhotin: /* LR(k) анализ и детерминированные языки */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== Лекция 12: LR(k) анализ и детерминированные языки ===

Анализ через сдвиг и свёртку. Детерминированный конечный автомат, читающий стек. Класс LR(k) грамматик. Построение таблиц по методу SLR(k). Магазинные автоматы и их равносильность LR(k) грамматикам.

=== Обобщённый LR; автоматы, управляемые входом ===

=== Вычислительная сложность разбора ===

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Формальные грамматики 2014

2014-09-24T06:54:48Z

Okhotin: /* Содержание лекций */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== LR(k) анализ и детерминированные языки ===

=== Обобщённый LR; автоматы, управляемые входом ===

=== Вычислительная сложность разбора ===

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lecture 11.pdf

2014-09-23T20:21:07Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 11.pdf»: Добавлена картинка, поясняющая мн-ва First и Follow.

Формальные грамматики 2014, материалы к лекции 11 (англ. яз.).

Файл:Formal grammars 2014 lecture 11.pdf

2014-09-23T20:04:27Z

Okhotin: загружена новая версия «Файл:Formal grammars 2014 lecture 11.pdf»: Добавлено построение LL-таблиц.

Формальные грамматики 2014, материалы к лекции 11 (англ. яз.).

Формальные грамматики 2014

2014-09-23T16:05:11Z

Okhotin: /* Лекция 11: Разбор сверху вниз */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

[[Файл:Formal grammars 2014 lecture 11.pdf]]

=== LR(k) анализ и детерминированные языки ===

=== Оценки сложности синтаксического анализа ===

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lecture 11.pdf

2014-09-23T16:04:46Z

Okhotin: Формальные грамматики 2014, материалы к лекции 11 (англ. яз.).

Формальные грамматики 2014, материалы к лекции 11 (англ. яз.).

Формальные грамматики 2014

2014-09-22T21:30:37Z

Okhotin: /* Лекция 9: Табличные алгоритмы синтаксического анализа */

Курс «Формальные грамматики»: сентябрь 2014 г., 15 лекций,
лектор: [http://users.utu.fi/aleokh/ Александр Охотин] (университет Турку, Финляндия).

== Содержание лекций ==

=== Лекция 1: Введение, регулярные языки ===

Математические модели синтаксиса.
Формальные языки.
Детерминированные и недетерминированные конечные автоматы, регулярные выражения, их равносильность.
Примеры. Замкнутость относительно основных действий.
Нерегулярные языки.

[[Файл:Formal grammars 2014 lecture 1.pdf]]

=== Лекция 2: Обыкновенные грамматики ===

Обыкновенные формальные грамматики
(в терминологии Хомского, «бесконтекстные»).
Определения через перезапись строк,
через деревья разбора,
через логический вывод
и через языковые уравнения.
Равносильность определений.
Примеры грамматик.
Замкнутость относительно объединения, конкатенации, звёздочки,
а также циклического сдвига.

[[Файл:Formal grammars 2014 lectures 2 3 4.pdf]]
(редакция от 16 сентября, добавлены все недостающие разделы)

=== Лекция 3: Свойства обыкновенных грамматик ===

Замкнутость относительно пересечения с регулярными языками.
Языки, не представимые грамматиками.
Лемма накачки, лемма Огдена.
Грамматики над односимвольным алфавитом.
Нормальный вид Хомского.

=== Лекция 4: Представления обыкновенных грамматик ===

Нормальный вид Грейбах.
Нормальный вид Розенкранца.
Теорема Хомского--Шюценберже о представлении обыкновенных языков через язык Дика.
Теорема Грейбах о «самом сложном языке».

=== Лекция 5: Конъюнктивные грамматики ===

Определения конъюнктивных грамматик через логический вывод, перезапись термов, деревья разбора и языковые уравнения. Примеры грамматик: wcw, объявление перед использованием, степени четвёрки. Приведение к нормальному виду Хомского. Понятие о булевых грамматиках.

[[Файл:Formal grammars 2014 lecture 5.pdf]]

=== Лекция 6: Однозначные грамматики ===

Неоднозначность в естественных языках и языках программирования. Комбинаторные и аналитические методы доказательства существенной неоднозначности.

[[Файл:Formal grammars 2014 lecture 6.pdf]]

=== Лекция 7: Линейные грамматики ===

Обыкновенные линейные грамматики, лемма накачки для них.
Линейные конъюнктивные грамматики и клеточные автоматы, их равносильность.
Лемма Терье.

[[Файл:Formal grammars 2014 lecture 7.pdf]]

=== Лекция 8: Многокомпонентные грамматики, логика FO(LFP) ===

Грамматики обёртывания пар и грамматики надстройки деревьев (tree-adjoining grammars).
Логика первого порядка над позициями в строке FO(LFP),
представление грамматик в этой логике.
Алгоритм проверки истинности формул логики FO(LFP)
как прототип алгоритмов синтаксического анализа.

[[Файл:Formal grammars 2014 lecture 8.pdf]]

=== Лекция 9: Табличные алгоритмы синтаксического анализа ===

Алгоритм Кокка-Касами-Янгера.
Использование умножения матриц для ускорения алгоритма.
Умножение матриц по методу Штрассена и по методу Арлазарова и др.

[[Файл:Formal grammars 2014 lectures 9 10.pdf]]
(всё есть, но многoe нуждаeтся в редактировании; новая редакция будет позднее)

=== Лекция 10: Табличные алгоритмы синтаксического анализа (окончание) ===

Разбор через умножение матриц (алгоритм Валианта). Разбор однозначных грамматик за квадратичное время.
Разбор для грамматик обёртывания пар.

=== Лекция 11: Разбор сверху вниз ===

LL(k) анализ для обыкновенных грамматик, рекурсивный спуск.
Удаление пустых правил из LL-грамматик.
Языки, не представимые LL-грамматиками.
Теорема Розенкранца--Стирнса
о регулярном объединении LL-языков.

=== LR(k) анализ и детерминированные языки ===

=== Оценки сложности синтаксического анализа ===

=== Разрешимость свойств грамматик ===

== Упражнения ==

=== Задание 1: к 22 сентября ===

# Построить обыкновенную грамматику для языка всех палиндромов: <math>L_1 = \{ w \in \{a, b\}^* \mid w=w^R \}</math>. Показать, как строка <math>ababa</math> выводится с помощью перезаписи строк. Показать, что эта же строка принадлежит наименьшему решению системы языковых уравнений, построив несколько шагов последовательности <math>\varphi^k(\bot)</math>.
# Доказать, что не существует обыкновенной грамматики для языка <math>L_2=\{ a^{k_1} b \ldots a^{k_n} b \mid n \geqslant 1, 0 \leqslant k_1 \leqslant \ldots \leqslant k_n \}</math>
# Построить конъюнктивную грамматику для языка <math>L_2</math>.
# Построить однозначную обыкновенную грамматику для языка <math>L_3=\{c^m a^{\ell_0}b \ldots a^{\ell_{m-1}}b a^{\ell_m}b \ldots a^{\ell_z}b d^n \mid m,n, \ell_i \geqslant 0, z \geqslant 1, \ell_m=n\}</math>
# Является ли язык <math>L_3</math> линейным конъюнктивным?
# Пусть <math>D=\{\varepsilon, ab, aabb, abab, aaabbb, \ldots\}</math> --- язык Дика над алфавитом <math>\{a, b\}</math>. Существует ли грамматика обёртывания пар для языка <math>L_4 = \{wc^{|w|} \mid w \in D\} = \{\varepsilon, abcc, aabbcccc, ababcccc, aaabbbcccccc, \ldots\}</math>?
# Построить грамматику 1-го порядка для языка <math>\{ww \mid w \in \{a, b\}^*\}</math>.

Файл:Formal grammars 2014 lectures 9 10.pdf

2014-09-22T21:27:57Z

Okhotin: Формальные грамматики 2014, материалы к лекциям 9--10 (англ. яз).

Формальные грамматики 2014, материалы к лекциям 9--10 (англ. яз).