Информационно-поисковые системы. Сычев А.В г. 1 Спамдексирование Воронежский государственный университет Факультет компьютерных наук Кафедра информационных систем

Информационно-поисковые системы. Сычев А.В г. 2 Спамдексирование vs. поисковая оптимизация Спамдексирование или поисковый спам – это недобросовестная практика умышленного создания веб-страниц, индексируемых поисковыми системами, для повышения ранга веб- сайта (веб-страницы) в выдаче поисковой системы или воздействия на выбор категории, в которую он помещается. При этом реальное содержание документа не соответствует запросу пользователя. В определенной степени перекрывается с обычным стремлением веб-дизайнеров повысить доступность сайта (страницы) в Веб, т.е. поисковой оптимизацией (search engine optimization - SEO)

Информационно-поисковые системы. Сычев А.В г. 3 Методы спамдексирования Контентный спам: Внедрение в страницу неотображаемого или незаметного для пользователя текста (метатэги, комментарии, цвет шрифта и др.) Умышленное повышение частоты ключевых слов Внедрение ключевых слов/фраз в текст Манипулирование текстовым содержимым анкерных тэгов. Копирование содержимого популярных страниц (по результатам поиска или напрямую) с добавлением рекламы и нужных ссылок.

Информационно-поисковые системы. Сычев А.В г. 4 Ссылочный спам Ссылочные фермы – умышленное создание сообщества страниц, ссылающихся друг на друга. Создание невидимых для пользователя гиперссылок Создание нескольких веб-сайтов с разными доменными именами, ссылающихся друг на друга (спам-блог) Размещение бессмысленных сообщений с гиперссылками, содержащими ключевые слова, в гостевых книгах, форумах, дневниках и др. Методы спамдексирования

Информационно-поисковые системы. Сычев А.В г. 5 Ссылочный спам Создание сетевых дневников исключительно с целью спамминга Инфильтрация веб-каталогов Скупка доменов, которые перестали использоваться Создание сайтов особого содержания (насилие, порнография и др.) с целью привлечения ссылок. Методы спамдексирования

Информационно-поисковые системы. Сычев А.В г. 6 Методы спамдексирования Другие методы : Создание разных версий страницы для пользователей и сетевого робота-паука Использование автоматического перенаправления Создание зеркальных сайтов. Эффективно при поиске ключевых слов в URL

Информационно-поисковые системы. Сычев А.В г. 7 Методы противодействия спамдексированию BadRank – вычисление понижающих коэффициентов при ссылке со страниц, оказавшихся в черном списке TrustRank – вычисление повышающих коэффициентов при ссылке со стороны доверяемых страниц (например каталогов поисковых систем) Обнаружение статистических аномалий (анализ частотного распределения, анализ распределения гиперссылок)

Информационно-поисковые системы. Сычев А.В г. 8 SpamRank – анализ распределения PR в помножестве соседних узлов веб-графа Использование вероятностных моделей при расчете ссылочной авторитетности (позволяет перейти от дискретной шкалы к непрерывной) Методы противодействия спамдексированию

Информационно-поисковые системы. Сычев А.В г. 9 Литература T.Jones Both Sides of the Digital Battle for a High Rank from a Search Engine. Association for Computing Machinery New Zealand Bulletin, T.Jones Both Sides of the Digital Battle for a High Rank from a Search Engine. Association for Computing Machinery New Zealand Bulletin, G. Weikum Information Retrieval and Data Mining. Слайды. ( sb.mpg.de/departments/d5/teaching/ws05_06/irdm/in dex.html) sb.mpg.de/departments/d5/teaching/ws05_06/irdm/in dex.html