Стало известно, что планируется изменение User-Agent поисковых ботов Яндекса, хотя после прошлой смены, не прошло, как говориться, и года. Новые боты стали более понятны, так как называются они соответственно своим должностным обязанностям.
Этим изменением, Яндекс хочет упорядочить работу с поисковыми ботами не только у себя, но и сделать их более информативными для пользователей.
Что касается прежних имен поисковых ботов, то посмотрев статистику и определив бота яндекса по его типу можно лишь обладая феноменальной памятью либо при помощи http://help.yandex.ru/webmaster/?id=995329
Имена новых ботов понятны и без дополнительной расшифровки.
Список новых ботов Яндекса (User-Agent):
Mozilla/5.0 (compatible; YandexBot/3.0) — основной индексирующий робот.
Mozilla/5.0 (compatible; YandexBot/3.0; MirrorDetector) — робот, определяющий зеркала сайтов.
Mozilla/5.0 (compatible; YandexImages/3.0) — индексатор Яндекс.Картинок.
Mozilla/5.0 (compatible; YandexVideo/3.0) — индексатор Яндекс.Видео.
Mozilla/5.0 (compatible; YandexMedia/3.0) — робот, индексирующий мультимедийные данные.
Mozilla/5.0 (compatible; YandexBlogs/0.99; robot) — робот поиска по блогам, индексирующий комментарии постов.
Mozilla/5.0 (compatible; YandexAddurl/2.0) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL».
Mozilla/5.0 (compatible; YandexFavicons/1.0) — робот, индексирующий пиктограммы сайтов (favicons).
Mozilla/5.0 (compatible; YandexDirect/3.0) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса.
Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel) — «простукивалка» Яндекс.Директа.
Mozilla/5.0 (compatible; YandexMetrika/2.0) — робот Яндекс.Метрики.
Mozilla/5.0 (compatible; YandexCatalog/3.0; Dyatel) — «простукивалка» Яндекс.Каталога.
Mozilla/5.0 (compatible; YandexNews/3.0) — индексатор Яндекс.Новостей.
Mozilla/5.0 (compatible; YandexImageResizer/2.0) — робот мобильных сервисов
Для указания правил индексации всем ботам, так и продолжаем писать Yandex, а если хотим указать правила индексации отдельному боту, то пишем соответствующий User-Agent.
Остается надеяться, что в ближайшее время боты научатся распознавать зеркала сайта, и тогда можно будет не заморачиваться, а просто написать User-Agent: * 
Последние комментарии