Учитывает ли Noindex поисковый робот Mail.ru. Часть 1 👇
Начнём про Noindex Mail.ru, посмотрел на днях вот это видео в котором руководитель проекта «Поиск@Mail.ru» Андрей Калинин — рассказывал, как работают их ребята, мне очень понравилось.
Подумал, учитывает ли ПС мэйла тег <noindex></noindex> — все потому, что на своих сайтах они его юзают, видать под Яндекс.
Может кому-то и смешно воспринимать Мэйл как поисковик. Но, у меня на одном из ресурсов ~1300 Мэйловского суточного трафика. Как показывает практика, эти посетители плодотворно приносят доход и клики по блокам рекламы. На еще одном не примечательном сайте, был вообще всплеск трафик на протяжении недели один интересный «ключ», который показали по телику скорее всего, давал +400 уников суточных, на сайте котором всего 100 уников =) в общем эти 400 уников слились на Адсенс и приносили 3-5 eвро-баксов в сутки на протяжении недели =)
Так вот берем рандомный URL http://otvet.mail.ru/question/73664885 - в самом верху есть блок NOINDEX которым обернут навигационный блок меню
так вот если обратиться к кэшу Мэйла http://hl.mailru.su/mcached?c=19-1%3A131-1&qurl=http%3A//otvet.mail.ru/question/73664885&q=%D0%9A%D0%B0%D0%BA%D0%B8%D0%B5%20%D1%81%D0%BE%D1%87%D0%B5%D1%82%D0%B0%D0%BD%D0%B8%D1%8F%20%D0%B2%20%D0%BC%D0%B0%D0%BA%D0%B8%D1%8F%D0%B6%D0%B5%20%D1%83%D0%BC%D0%B5%D1%81%D1%82%D0%BD%D1%8B%3F&r=7546410&fr=webhsm алиас если что http://www.peeep.us/41637989
как видим в кэше МэйлРу тупо вырезали свое меню из кода
пробуем вбить в поиск заголовок
пробуем добавить слово «Игры» которое находилось в меню под Noindex
и тут мы видим что слова «Игры» поисковик не нашел на странице, но в топ 5 подмешал свои ответы
А теперь посмотрим, как Noindex Mail.ru смотрит на сайт Пузата http://www.jlady.ru/
Смотрим кэш морды Джэйледи http://hl.mailru.su/mcached?c=19-1%3A273-1&qurl=http%3A//www.jlady.ru/&q=http%3A//www.jlady.ru/&r=935047&fr=webhsm алиас http://www.peeep.us/95711204
на сайте есть такой блок в Noindex
в кэше Мэйла виден блок выше
На дворе уже 2014? Может Рома прочитает этот пост и прикажет своим верстальщикам или кому-то еще поправить…
в общем берем кусок текста из блока «Любовный гороскоп на 2013 год» добавим к нему «мы готовы разместить специальные проекты»
делаем запрос = Любовный гороскоп на 2013 год мы готовы разместить специальные проекты = http://go.mail.ru/search?op=1&where=any&advs=1&q=%D0%9B%D1%8E%D0%B1%D0%BE%D0%B2%D0%BD%D1%8B%D0%B9+%D0%B3%D0%BE%D1%80%D0%BE%D1%81%D0%BA%D0%BE%D0%BF+%D0%BD%D0%B0+2013+%D0%B3%D0%BE%D0%B4+%D0%BC%D1%8B+%D0%B3%D0%BE%D1%82%D0%BE%D0%B2%D1%8B+%D1%80%D0%B0%D0%B7%D0%BC%D0%B5%D1%81%D1%82%D0%B8%D1%82%D1%8C+%D1%81%D0%BF%D0%B5%D1%86%D0%B8%D0%B0%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5+%D0%BF%D1%80%D0%BE%D0%B5%D0%BA%D1%82%D1%8B
Видим, что вроде как Noindex учитываем Мэйл =) очень хорошо?
В общем попробуем проверить еще на блоге Маула maulnet.ru
такой вот блок
в кэше Мэйла есть этот блок
взят кусок из поста + кусок из блока
Что-то я уже запутался, то работает Noindex, то нет? В сниппете подсветился =)
по своим сайтам, закинул ключи которые обернуты в Noindex их находит Мэйл =(.
Но «Display:None» поисковик Мэйла явно не индексирует
посерфим такой вот ключ = «Нажмите, чтобы отменить ответ.» E-mail (не публикуется)
смотрите, одни доры и спам
такой вот блок присутствует на многих wordpress сайтах
<a rel="nofollow" id="cancel-comment-reply-link" href="#respond" style="display:none;">Нажмите, чтобы отменить ответ.</a>
так что такие куски Мэйл вырезает =), возможно и Noindex он учитывает только для крупных сайтов?
__
В тему к видео, что в начале упомянул, вспомнил как вытягивал жабой один сайт и прикол был в том, что на каждой из страниц стояли битые URL, они создавали нереально много несуществующих страниц =) Получается, на какую не зайти страницу, она генерила еще десяток несуществующих страниц…
В общем сделать робота, который сможет обойти все сайты, это пол беды, научить его чтобы хавал только нормальные страницы, это еще пол беды =)
Все статьи и новости → Подписаться на TelegramПонравилась статья? Зашарить инфу в социальных сетях ↓