Оптимізація сайтів. Роботи і агенти Яндекс

У Яндексу є декілька роботів, які представляються по-різному.

• Yandex/1.01.001 (compatible; Win16; I) — основний робот, що індексує
• Yandex/1.01.001 (compatible; Win16; P) — індексатор картинок
• Yandex/1.01.001 (compatible; Win16; H) — робот, що визначає дзеркала сайтів
• Yandex/1.02.000 (compatible; Win16; F) — робот, що індексує піктограми сайтів (favicons)
• Yandex/1.03.003 (compatible; Win16; D) — робот, що звертається до сторінки при додаванні її через форму «Додати URL»
• Yandex/1.03.000 (compatible; Win16; M) — робот, що звертається при відкритті сторінки за посиланням «Знайдені слова»
• Yadirectbot/1.0 (compatible; Win16; I) — робот, що індексує сторінки сайтів, що беруть участь у Рекламній Мережі Яндексу
• Yandexblog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) — робот пошуку по блогах, що індексує коментарі постів.

IP-адрес, з яких «ходить» робот Яндексу, багато, і вони можуть змінюватися. Список адрес Яндекс не розголошує.

Крім роботів, у Яндексу є декілька агентів-«простукувачів», які визначають, чи доступний в цей момент сайт або документ, на який стоїть посилання у відповідному сервісі.

• Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукувач» Яндекс.Каталогу. Якщо сайт недоступний протягом декількох днів, він знімається з публікації. Як тільки сайт починає відповідати, він автоматично з'являється В каталозі.
• Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукувач» Яндекс.Закладок. Посилання на недоступні сайти позначаються сірим кольором
• Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукувач» Яндекс.Діректа. Він перевіряє коректність посилань із оголошень перед модерацією. Ніяких автоматичних дій не вживає
• Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукувач» Яндекс.Новин. Він формує статистичні звіти для контент-менеджера та інформує його про можливі проблеми в партнерів-постачальників новин.

Теги:
пошукова оптимізація, роботи яндекс, агенти яндекс, індексація сайтів, yadirectbot, yandexblog, яндекскаталог, яндексзакладки, яндексдірект, яндексновини