Семинар Machine Learning рук. проф.: Е.Л. Столов, В.Д. Соловьев Учебник Бишопа us/um/people/cmbishop/prml/ - презентация

1 Семинар Machine Learning рук. проф.: Е.Л. Столов, В.Д. Соловьев Учебник Бишопа us/um/people/cmbishop/prml/ us/um/people/cmbishop/prml/ Стэнфордский курс machine_learning/ machine_learning/

2

3 Пример

4 Линейная аппроксимация

5 Использование данных Google Labs для исследования эволюции лексики В.Д. Соловьев, Э.Ю. Лернер Казанский федеральный университет

6 GOOGLE BOOKS & Ngram Viewer GOOGLE BOOKS – хорошо известная электронная библиотека, содержащая 15 миллионов книг (12% всех опубликованных в мире книг) Для подсчета частоты слов выбрано подмножество из 5 миллионов книг, содержащих 500 миллиардов (!) слов, в том числе, русскоязычная часть – 35 миллиардов слов Реализован удобный интерфейс (Ngram Viewer), предоставляющий статистическую информацию в виде графиков

7 Частотность Прагматически мотивированные изменения частотности языковых элементов приводят к эволюции языка (и лексики, и грамматики) Межязыковые различия в частотности являются значимыми с семантической и, в более общем плане, с общекультурной точки зрения (А. Вежбицкая) Трудоемкость изучения частотности

8 Пример графика: кровь

9 Преобразование неправильных глаголов английского языка в правильные

10 Оценки в английском и русском

11 Эволюция лексики Слова рождаются, распространяются и умирают Графики отражают характер этих процессов Задача 1: построить математические модели эволюционных процессов Задача 2: объяснить характер этих процессов

12 Пример: модель роста численности популяций

13 Типичный график

14 Линейный рост частоты

15 Научные термины

16 Динамика популярности личностей

17 Динамика популярности личностей (продолжение)

18 Выводы по динамике распространения слов Частота входящих в активный оборот слов растет практически строго по линейному закону После короткого пребывания на пике частота падает Мало плавных кривых, переход от одной прямой к другой осуществляется быстро Также по линейному закону растет частота упоминаний людей или понятий, становящихся популярными Проблема. Почему это так?