Извлечение ключевых объектов веб-страниц Михаил Обухов, Дмитрий Вихарев.

Презентация:



Advertisements
Похожие презентации
Извлечение объектов из поисковых запросов Михаил Обухов, Михаил Долинин.
Advertisements

М УЗЫКА Просторы Интернета безграничны. В недрах его можно найти сотни, тысячи, сотни тысяч терабайт разной информации. Но одним из самых востребованных.
Публикация и использование открытых государственных данных ИНСТРУМЕНТ ПУБЛИКАЦИИ ОТКРЫТЫХ ДАННЫХ.
Для владельца сайта. Частые вопросы: Какие страницы проиндексированы? Когда приходил робот? Какие ссылки ведут на мой сайт? Насколько сайт «нравится»
КУРС «WEB-ДИЗАЙН». Что такое Web-страница? То, что мы видим в окне браузера, когда заходим на какой-либо сайт! Мы видим веб-страницу сайта – ее содержимое!
Новые тенденции в продвижении сайтов Михаил Кузьмин для ForwardSeo Новые тенденции в продвижении сайтов.
РЕГИСТРАЦИЯ Регистрация Шаг 1. Создание электронной почты Открываете страницу:
Проектная работа учителя. Сайт Зарегистрироваться Создать учетную запись Имя участника Пароль Повторный набор.
Кабинет веб-мастера. Частые вопросы: Какие страницы проиндексированы? Когда приходил робот? Какие ссылки ведут на мой сайт? Насколько сайт «нравится»
Поиск информации в Интернет. Что такое web-сервер? Подключенный к сети компьютер, на котором хранятся Web-сайты и Web- документы. Т. е. структурированные.
Международная федерация настольного тенниса (ITTF) Федерация настольного тенниса России Сайт о настольном теннисе.
Рунет и Кризис люди, темы, сайты. Что знает Рамблер Toп 100 Суточная аудитория 22 млн. 37% аудитории из-за рубежа Суточная аудитория России 13,9 млн.
HyperText Markup Language (HTML) - язык разметки гипертекста Гипертекст - информационная структура, позволяющая устанавливать смысловые связи между элементами.
Контекстная реклама в Google AdWords Елена Каменева Менеджер по работе с клиентами, РА AdLabs.
1. Возможность посмотреть информацию, новости в любое время суток из любой точки мира 2. Находить друзей и родственников по всему миру 3. Возможность.
Страничные факторы ранжирования Михаил Костин, Mail.ru.
Оптимизируя сайт, думай о пользователях. 31 марта 2011г. Рахимьянов Артур Компания Матрица.
Высшая школа экономики, Москва, 2013 МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ПО ПУБЛИКАЦИИ ОТКРЫТЫХ ДАННЫХ.
ivi.ru: НЕ ТОЛЬКО В WEB ТЕЛЕВИЗОРЫ SMART TV (Connected TV) – новый тренд развития телевизоров.
Транксрипт:

Извлечение ключевых объектов веб-страниц Михаил Обухов, Дмитрий Вихарев

Что улучшаем? Ответы на запросы

Смотреть онлайн без СМС Разбираем запрос смотреть Доктор Хаус онлайн без СМС Доктор Хаус Объект Контекст

Что такое объекты? Названия – Организаций – Фильмов – Программ – Песен – Музыкальных групп – … Имена людей и т.д. (именованные сущности) Пираты карибского моря Mail.RU Москва Форрест Гамп Джонни Депп

Что такое контексты? Остальная часть запроса Примеры: Купить Смотреть онлайн бесплатно биография Рецепт

Что у нас есть ЗапросыСтраницы JSD: Jensen-Shanon Divergence

Извлечение объектов из запросов КонтекстыСтраницыОбъекты Запросы

Структура сайта

Шаблоны ФИЛЬМ Описание: … ФИЛЬМ- фильмы В ролях : … Комментарии:

Извлечение структуры сайта Объекты Страницы Фильм Трейлер … Фото Постер Обои … Контексты

Промежуточный результат Объект В ролях : … смотреть онлайн без СМС в хорошем качестве … смотреть онлайн без СМС в хорошем качестве … биография фото фильмы … биография фото фильмы … кадры из моменты обои … кадры из моменты обои …

смотреть Доктор Хаус онлайн без СМС Контекст (что хочет пользователь): 1.смотреть * онлайн 2.смотреть * без регистрации 3.* онлайн в хорошем качестве 4.… Контекст (что хочет пользователь): 1.смотреть * онлайн 2.смотреть * без регистрации 3.* онлайн в хорошем качестве 4.… URLы (где лежит): 1.kino.ru/film/178710/ 2.kino.ru/film/474/ 3.kino.ru/film/301/ 4.… URLы (где лежит): 1.kino.ru/film/178710/ 2.kino.ru/film/474/ 3.kino.ru/film/301/ 4.… Объекты (кинофильмы): 1.Доктор Хаус 2.Гладиатор 3.Матрица 4.… Объекты (кинофильмы): 1.Доктор Хаус 2.Гладиатор 3.Матрица 4.…

Контекст 50 пар [Объект – URL] Подготовка «выдергивателей» Подготовка «выдергивателей» Интересные сайты «Выдергиватели» Интересные сайты «Выдергиватели» Интересные сайты «Выдергиватели» Интересные сайты и «Выдергиватели» (для них) База (будущий индекс) Контекст 50 пар [Объект – URL] Контекст 50 пар [Объект – URL] Объект + URL «Гладиатор» Эталонные объекты

Матрица Описание: снятый братьями Вачовски … Матрица … широко применяются в математике для компактной записи СЛАУ… Матрица - фильмы В ролях : … Комментарии: … … Матрица …

Матрица Описание: снятый братьями Вачовски … Матрица … широко применяются в математике для компактной записи СЛАУ… Матрица - фильмы В ролях : … Комментарии: … … Матрица … … Матрца … … Матрица … Фильм Матрица The Matrix … * … «Выдёргиватель»

Матрица Описание: … Матрица … Матрица - фильмы В ролях : … Комментарии: … Матрица … Гладиатор Описание: Гладиатор.. Гладиатор- фильмы В ролях : … Комментарии: … Гладиатор … Терминатор Описание: … Терминатор - фильмы В ролях : … Комментарии: … Терминатор … … * … «Выдёргиватели» Наиболее часто встречающиеся: Наибольшие общие подстроки Для: *

Матрица Описание: … Матрица … Матрица - фильмы В ролях : … Комментарии: … Матрица … Гладиатор Описание: Гладиатор.. Гладиатор- фильмы В ролях : … Комментарии: … Гладиатор … Терминатор Описание: … Терминатор - фильмы В ролях : … Комментарии: … Терминатор … ФИЛЬМ Описание: … ФИЛЬМ- фильмы В ролях : … Комментарии: *

Матрица Описание: … Матрица … Матрица - фильмы В ролях : … Комментарии: … Матрица … Кеану Ривз Описание: Кеану Ривз. Кеану Ривз - актеры В ролях : … Комментарии: … Кеану Ривз … Терминатор Описание: … Терминатор - кадры В ролях : … Комментарии: … Терминатор … Фильмы:Актеры:Кадры из фильма:

Матрица Описание: … Матрица … Матрица - фильмы В ролях : … Комментарии: … Матрица … Матрица Матрица смотреть … Матрица В ролях : … Матрица Эталонные объекты

Контекст 50 пар [Объект – URL] Контекст 50 пар [Объект – URL] Матрица Комментарии: Матрица Подготовка « выдергивателей » Подготовка « выдергивателей »

смотреть Доктор Хаус онлайн без СМС Контекст (что хочет пользователь): смотреть * онлайн Контекст (что хочет пользователь): смотреть * онлайн Объект (кинофильм): Доктор Хаус Объект (кинофильм): Доктор Хаус Доктор Хаус смотреть … Доктор Хаус sezon.html/ URL

Результаты: Раздел / Кол-во страницKinopoiskAfishaFilms.imhonet Описание фильмов/сериалов230k80k - Описание фильмов45k40k - Описание сериалов35k40k - Сезонов сериалов12k - Эпизодов сериалов250k Знаменитости480k112k80k Точность: 99.9%

СПАСИБО! ВОПРОСЫ? Михаил Обухов Дмитрий Вихарев