1 Слово Лексемы, словоформы, леммы. 2 Проблема слова «слово» Что называется словом в естественном языке? Самые разные вещи: «В этом стихотворении ровно.

Презентация:



Advertisements
Похожие презентации
Слово Лексемы и словоформы. Проблема слова «слово» Что называется словом в естественном языке? Самые разные вещи: «В этом стихотворении ровно сто слов»
Advertisements

1 Слово Лексемы, словоформы, леммы. 2 Проблема слова «слово» Что называется словом в естественном языке? Самые разные вещи: «В этом стихотворении ровно.
12 июля 2008 года Летняя лингвистическая школа. 1 Компьютерная лингвистика как источник лингвистических знаний Леонид Лейбович Иомдин Институт проблем.
Объектная модель многофункциональных словарей Докладчик: Носков А. А. Группа: 525 Научный руководитель: Большакова Е. И.
Речевая коммуникация. Команда: Легион. Цель: Изуение литературы по теме.
Тема 11 Медицинская помощь и лечение (схема 1). Тема 11 Медицинская помощь и лечение (схема 2)
Лингвистика или языкознание – наука о языке (от греч. «лингва» язык)
Информация и информационные процессы. Кодирование и декодирование Для обмена информацией с другими людьми человек использует естественные языки. Наряду.
6 ноября 2012 г.6 ноября 2012 г.6 ноября 2012 г.6 ноября 2012 г. Лекция 5. Сравнение двух выборок 5-1. Зависимые и независимые выборки 5-2.Гипотеза о равенстве.
Математические модели Динамические системы. Модели Математическое моделирование процессов отбора2.
Грамматические формы, грамматические значения и грамматические категории
Лексика – Слово как лингвистическая единица в языках различных типов. – Понятие лексемы и парадигмы словоформ. – Системность и структурность в лексике.
Основные понятия морфологии. 1. Словоформа, лексема и парадигма. Словоформа - конкретно наблюдаемое слово в контексте. Словоформа - конкретно наблюдаемое.
1 Измерение информации: алфавитный подход Информация и информационные процессы.
Функцию y = f(x), x Є N, называют функцией натурального аргумента или числовой последовательностью и обозначают y = f(n) или y, y, y, …, y n, …. Значения.
Кодирование информации Подготовила: учитель информатики Ефимова Н.Ю.
Кодирование информации. Кодирование и декодирование Для обмена информацией с другими людьми человек использует естественные языки. Наряду с естественными.
1 Массивы 2 Опр. Массивом называется совокупность однотипных данных, связанных общим именем. Основные характеристики массива: 1. Имя массива 2. Тип компонентов.
Говоря о двух последних «умениях» компьютера, необходимо помнить, что почти во всех существующих системах автоматического реферирования в качестве основных.
Тема: «Сложное предложение» Контрольный опрос по русскому языку в 9-ом классе.
Транксрипт:

1 Слово Лексемы, словоформы, леммы

2 Проблема слова «слово» Что называется словом в естественном языке? Самые разные вещи: «В этом стихотворении ровно сто слов» «До реформы орфографии это слово писалось с ером» «Это слово мне незнакомо» «Лексический минимум первого года обучения – тысяча слов»

3 Словоупотребление – единица (письменного) текста «В этом стихотворении ровно сто слов» Словоупотребление: последовательности символов в тексте, отделенные друг от друга пробелами и знаками препинания (и другими разделителями) Также (word) token, единица измерения корпусов

4 Словоупотребление Чем больше количество словоупотреблений, тем представительнее корпус Word per million, occurences per million, incidence per million – частотная характеристика исследуемого феномена в корпусе Также – например, измерение скорости речи

5 Словоформа «До реформы орфографии это слово писалось с ером на конце» «Второго слова в пятой строчке стихотворения Катулла я разобрать не смог – вот оно же в шестой» Wordform, word form, форма слова В простом случае – последовательность букв Но где? Не в тексте, а «в голове»

6 Словоформа В более сложном случае – последовательность фонем или «звуков» или звукотипов (ментальных символов хранения словесных артикуляций по СВК) Также, например, единица измерения словника (например, пока неизвестного) языка: конкорданса, симфонии

7 Словоформа Словоформа: абстрактная единица, по отношению к которой конкретные идентичные словоупотребления являются контекстными реализациями NB: каждой словоформе можно сопоставить исходную форму слова + набор грамматических категорий

8 Лексема «Лексический минимум первого года обучения – тысяча слов» Топор, топора, топору... топоры, топоров, топорам... – что можно сказать про значение этих «слов» эти «слова» имеют одинаковое лексическое значение, различаясь лишь грамматическими значениями

9 Лексическое и грамматическое значение Топор, топорик, топорный – что можно сказать про значения этих «слов» - эти слова имеют разное лексическое значение (при этом два первых слова имеют одинаковое грамматическое значение)

10 Лексема Лексема: абстрактная единица, соответствующая множеству всех морфологически связанных друг с другом (принадлежащих одной парадигме) словоформ с одинаковым лексическим значением

11 Summary Словоупотребление – единица текста Словоформа – единица грамматики, абстрактная совокупность (~тождественных) словоупотреблений Лексема – единица словаря, абстрактная совокупность ~родственных словоформ

12 Лексема – единица словаря «Лексический минимум первого года обучения – тысяча слов» Lexical item, словарный вход Хаспельмат: пользователь словаря не ожидает найти в словаре слово sleeps, но ожидает найти там слово sleep Однако определение через словарь для нелингвиста (дан словарь)

13 Лексема – единица словаря Оно также зависит от структуры словаря – sleeplessly отдельная лексема, но в словаре в статье sleepless Что попадает в словаре в разные статьи, а что в одну? Отчасти типографский вопрос (связано также с лексикографической традицией: ср. арабские словари) Также коррелирует с вопросом о структуре ментального лексикона (как слова хранятся в мозге)

14 Лексическое значение Различие между грамматическим и лексическим значениями кажется интуитивно ясным Топор, топора, топору... топоры, топоров, топорам... Топор, топорик, топорный Однако мы уже знаем, что набор грамматических значений изменяется от языка к языку

15 Грамматическое значение (preview) Значит, для каждого языка определение того, что в нем является грамматическим, должно осуществляться заново Якобсон (о Боасе): грамматическое – это то, что говорящий на языке не может не выразить. В русском языке у существительных грамматическое значение – число, падеж лексическое значение – уменьшительность

16 Как это связано со словоизменением и словообразованием? Словоизменение – остаемся в пределах одной лексемы Словообразование – связь между лексемами Традиционно – разные части речи не могут принадлежать одной лексеме, однако проблема абсолютно продуктивных дериваций (например, причастия)

17 Обязательность как критерий грамматического Основная проблема – грамматологический подход (обязательность) vs. многие другие подходы, в том числе экспериментальный (продуктивность) Все обязательное продуктивно, но не все продуктивное обязательно Одно из возможных решений – развести грамматическое и словоизменительное (последнее может быть шире)

18 Парадигма Парадигма (в узком смысле) – определенным образом упорядоченный набор словоформ, объединенных общим лексическим значением (т.е. принадлежащих одной лексеме). [Впрочем, иногда говорят и о слообразовательной парадигме определенной лексемы, например: приставочная парадигма глагольной основы (с какими приставками основа сочетается)]

19 Лексема ~ словоформа В этом смысле утверждение Хаспельмата: словоформа эквивалентна паре лексема + набор грамматических значений «Простейшая» задача автоматического анализа текста) – по словоформе получить лексему и набор грамматических значений; по лексеме и набору грамматических значений построить лексему

20 Лемма Лексема – это не начальная форма. Она соответствует не словарному входу, а словарной статье Словарная статья – описывает лексему Начальная форма (лемма) – называет ее

21 Лемма Также: начальная форма, исходная форма Чтобы назвать лексему, неудобно перечислять все входящие в нее словоформы Вместо этого чаще всего используется одна из словоформ. Какая? у существительных? у глаголов? Выбор в значительной степени произволен Теоретически может использоваться и не словоформа, а основа – но это менее удобно нелингвисту

22 Лемма vs. Начальная форма Термин «лемма» в лингвистике имеет легкий компьютерный привкус (лемматизация и т.д) Под начальными или исходными формами иногда также понимают опорные формы – набор форм, однозначно задающих словоизменительный тип данной лексемы В этом случае понятия исходной (начальной) формы и леммы могут оказываться различными

23 Family metaphor Представим себе фотоальбом Конкретные изображения людей на фотографиях ~ словоупотребление Люди, принадлежащие одной семье ~ «родственные» словоформы Лексема – это семья Лемма – это фамилия Омофоны – полные тезки Парадигма – генеалогическое древо

24 Семинар и чтение Зализняк: РИС, Глава 1 Обсуждение определения Хаспельмата и его проблем Подсчет словоупотреблений, словоформ, лексем

25 «Почему не говорят?» Сложная загадка: почему не говорят, что словоформа – последовательность символов, которые могут встретиться между пробелами? (=зачем нужно определение Хаспельмата) Очень сложная загадка (contra Хаспельмат): почему не говорят, что словоформа – это лексема плюс (полный) набор грамматических значений?

26 WPM Один исследователь изучал историю лексемы L на материале НКРЯ. Для этого он посчитал количество вхождений всех словоформ L в тексты 18-го, 19-го и 20-го веков – получилось n 1, n 2 и n 3, соответственно, причем n 1 < n 2 < n 3 Исследователь сделал вывод, что частотность L со временем растет. Прокомментируйте этот вывод.