материалы по компьютерной лингвистике для слушателей курса ДПО (ФГН) План курса
Светлана Юрьевна Толдова
| Неделя | |
|---|---|
| 21.10 | Занятие 0. |
| 21.10 | Лекция 1. Введение |
| 06.11 | Лекция 1-3. Введение |
| 06.11 | Лекция 4. Задачи автоматической обработки текста. Этапы обработки. |
| 11.11 | Лекция 5. Модель информационного поиска. |
| 11.11 | Семинар 6. Регулярные выражения. Поиск в корпусах университета Лидса. Упр. на занятии |
| 20.11 | Лекция 7. Препроцессинг. |
| 20.11 | Семинар 8. Регулярные выражения.. Материалы к занятию: "Объявления о квартирах"; Группировка символов |
| 25.11 | Лекция 9. Морфология. Обзор + FST |
| 25.11 | Лекция 10. FST-FSA |
| 29.11 | Практическое занятие 11. Краткое резюме про морфологический анализ (полезно посмотреть) Лемматизация. PyMorphy и MyStem Ведут Настя и Лоренцо |
| 30.11 | Практическое занятие 12. Лемматизация. PyMorphy и Mystem Ведут Настя и Лоренцо. Текст для тестирования морфологических тагеров дома вот этот правильные ответы вот здесь, но не в том формате и не с теми тегами, которые выдают программы. Краткое обсуждение будет 01.12 |
| 02.12 | Лекция 13. Языковые модели. Снятие морфологической омонимии |
| 02.12 | Семинар 14. Вероятности. Снятие морфологческой омонимии Датасет для обсуждения морфологии вот здесь (тот же, что выше) |
| 04.12 | Лекция 15. Синтаксис: контекстно-свободные грамматики. Зависимостный парсинг. Ссылки UD стандарты Стэндфордский синтаксический анализатор Визуализация UD разбора |
| 04.12 | Семинар 16. Обсуждение проектов |
| 07.12 | Семинар 17. Синтаксис |
| 11.12 | Семинар 18.Частотный анализ TF-IDF, старт работы над проектами |
| 16.12 | Лекция 19. Коллокации |
| 23.12 | Лекция 20. Коллокации. Продолжение |
| Неделя | ||
|---|---|---|
| 13.01 | Лекция 1. Введение в корпусную лингвистику | |
| 20.01 | Лекция 2. Метаразметка. Основные копруса | Особенности работы с НКРЯ |
| 20.01 | Лекция 2. Метаразметка. Основные копруса | Особенности работы с НКРЯ |
| 20.01 | Лекция 3. Частотные словари | Особенности работы с НКРЯ |
| 01.02 | Практикум. Поиск в корпусах с использованием CQL | |
| 08.02 | Практикум. Текстовая аналитика с использованием Excel | |
| 15.02 | Лекция. Извлечение именованных сущностей | |
| 15.02 | Практикум. Natasha | |
| 29.02 | Практикум. Yargy. Food | |
| 21.03 | Практикум. Yargy. Food |
Полезная литература и ссылки
Общие учебники:
Speech and Language Processing (3rd ed. draft) - https://web.stanford.edu/~jurafsky/slp3/ - основной классический учебник (на английском языке). Это последнее издание.
«Прикладная и компьютерная лингвистика» (М.: ЛЕНАНД, 2017) - один из лучших учебников на русском для "не технарей"