webmaster tools in yandex 2011 (kazan, kharkov), mikhail senin, alex shubin
DESCRIPTION
Our joint talk with Mikhail Senin at Seoconference'11 and Optimization.com.ua'11TRANSCRIPT
![Page 1: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/1.jpg)
Харьков, 14.10.2011
Команда веб-поиска
Михаил СенинАлександр Шубин
Решение типовых задач с помощью сервиса Яндекс.Вебмастер
![Page 2: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/2.jpg)
Взаимоотношения
![Page 3: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/3.jpg)
Он думает только о трафике?Что нужно сайту от Яндекса?
Трафик(попасть в топ)Деньги
(от рекламы)
Трафик(контекст)
Трафик(другие сервисы)
Веб-аналитика
Безопасностьсайта
Технологии для сайта(API карт, Фоток, ПДС и т.п.)
![Page 4: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/4.jpg)
— Нужно, чтобы сайт индексировался без ошибок
— Нужно, отличать важное от второстепенного
— Нужно понимать, что проиндексировали
Яндексу нужны понятные качественные сайты, которые легко индексируются!
Качественно отвечать на вопросыА что нужно Яндексу?
![Page 5: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/5.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Как это работает?
![Page 6: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/6.jpg)
Знакомимся
![Page 7: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/7.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Новый сайт? Расскажите!
![Page 8: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/8.jpg)
Какой же тут подзаголовок? :)Добавление сайта
— Добавить сайт http://webmaster.yandex.ru/site/add.xml
—А зачем тогда addurl?
— Возникли сложности?
—robots.txt
—Ошибки DNS
—Блокировка робота хостером
— Проверка ответа сервера http://webmaster.yandex.ru/server-response.xml
![Page 9: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/9.jpg)
Сложно, но можноПодтверждение прав
С подтверждением справляются не все:70% – успешно подтвердили 13% – не смогли подтвердить17% – не пытались, добавили чужой сайтСайт www.yandex.ru добавили 4 тыс. раз. Ну вот зачем?!
Новые способы подтверждения прав:—Делегирование
—HTML-файл
—Email в записи WHOIS
![Page 10: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/10.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Робот мешает?
![Page 11: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/11.jpg)
Ситуация редкая, но всё жеНагрузка со стороны робота
— Выставляем Crawl-delay
— Смотрим на порядок директивUser-agent: YandexDisallow: *.docAllow: /catalog/
http://webmaster.yandex.ru/site/robots.xml
/catalog/a.doc
Раньше был запрещён,будет разрешен!
User-agent: Yandex Disallow: /catalog/Crawl-delay: 2,5 # таймаут в 2,5 сек
![Page 12: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/12.jpg)
Устраняем неполадки
![Page 13: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/13.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Уменьшился трафик
![Page 14: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/14.jpg)
—Узнайте вовремя: Сообщения, Виджет, Яндекс.Бар
—Описание вердиктов в Я.Вебмастере
—Следите за обновлениями CMS
—Можно пожаловаться на вирусы и фишинг
Вирус?Пропал трафик
![Page 15: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/15.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Уменьшился трафик
![Page 16: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/16.jpg)
РанжированиеУменьшился трафик
Конкуренция? Смотрим на тренды
Доигрались?
— Спам
— Скрытый текст
— Переоптимизированные тексты
— Взрослый контент
— И То-О-Чём-Нельзя-Говорить
![Page 17: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/17.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Загрузили, но не то?
![Page 18: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/18.jpg)
Построение индексаУменьшился трафик
— Смотрим на структуру сайта
— Robots.txt: clean-param
— Насколько уникален сайт?
![Page 19: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/19.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Вообще не загрузили?
![Page 20: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/20.jpg)
Индексирование?Упал трафик
—Проблемы с хостингом —Проблемы с DNS—Неверный robots.txt или файл Sitemap—Неверные ссылки
Проверяем ответ сервераИзучаем исключенные страницы
![Page 21: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/21.jpg)
Улучшаем
![Page 22: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/22.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Где это можно сделать?
![Page 23: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/23.jpg)
Robots.txt и Sitemap… индексацию
Robots.txt
• Clean-param: только нужные страницы • Host: указываем главное зеркало
• Sitemap: урл файла Sitemap
Sitemap
• Приоритет страницы
• Частота обновления
User-agent: YandexDisallow:Clean-param: ref /get_book.plHost: host.com.uaSitemap: host.com.ua/sitemap.xml
![Page 24: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/24.jpg)
И дополнительный источник трафика… ранжирование в своём регионе
• Инструмент “Регион сайта” указываем регион клиента
• Организация в Я.Справочнике (sprav.yandex.ru) указываем регион организации
![Page 25: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/25.jpg)
Фильтр по признакам… нахождение на картах
![Page 26: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/26.jpg)
И не только… представление в Поиске
• Микроформаты, schema.org, opengraph строим семантический веб вместе
• Партнёрские программы 75 рубрик адресов, недвижимость, авто, …
![Page 27: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/27.jpg)
Немного статистики по schema.org… представление в Поиске
• За три месяца размечено 50 млн страниц
• Рунет на 2м месте, Уанет – на 21м
• Популярные форматы: товары, люди, адреса, отзывы
• Следите за анонсами…
schema.org
![Page 28: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/28.jpg)
Как это работает… ранжирование авторских текстов
1. Сообщаем Яндексу свой текст
2. Яндекс проверяет наличие текста в интернете
3. Публикуем текст на сайте
…
4. Авторство за текстом закреплено!
http://webmaster.yandex.ru/site/ext_plugins.xml?wizard=api.originals
![Page 29: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/29.jpg)
Немного статистики… ранжирование авторских текстов
• Всего ~57 000 текстов (63% оригинальные)
• В день загружается ~1 000 текстов
• На пользователя приходится от 1 до 40 текстов
![Page 30: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/30.jpg)
Некоторые темы… ранжирование авторских текстов
• Пластиковые окна, газогенераторы, тракторы, строительство срубов, прокладка труб
• Гадания, предсказания, гороскопы
• Порно-тексты
• Теория мирового заговора, масоны, конец света
![Page 31: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/31.jpg)
Сайт
Яндекс
Поисковый индекс
База робота
Загрузка роботом
Построение индекса
Ранжирование
Хорошо сработано!
![Page 32: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/32.jpg)
Подписываемся на сообщения… свою информированность :)
• Про атаки и вирусы XSS атака, вирусы на сайте, скрытый текст
• Про партнёрские программы Результаты обработки данных, сообщения от модераторов
• И многое другое…
![Page 33: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/33.jpg)
Все инструменты в одном месте… свой бизнес
http://business.yandex.ru/
![Page 34: Webmaster tools in Yandex 2011 (Kazan, Kharkov), Mikhail Senin, Alex Shubin](https://reader033.vdocuments.mx/reader033/viewer/2022061220/5486c490b4af9f7d0d8b5264/html5/thumbnails/34.jpg)
Команда веб-поиска
119021, Россия, Москва,ул. Льва Толстого, 16
+7 (495) 739-00-00+7 (495) 739-70-70 — факс
Михаил СенинАлександр Шубин