Инструменты вебмастера

Мои сайты

Раздел ):

Спустя некоторое время, после того как сайт будет проиндексирован, отчет будет содержать информацию об этом (рис 4.9):

Глядя на этот список, возникает вопрос - а могу ли я таким образом добавить совершенно чужой сайт? Специально для предотвращения таких случаев сделана система проверки прав на управления. Она включает в себя предложение загрузить определенную информацию на ваш сайт. Если получится это сделать, то Яндекс будет считать вас владельцем сайта. Другими словами, владелец сайта может изменять его содержимое, что и проверит Яндекс.

В нашем случае мы авторизованы от имени пользователя v-rn@narod.ru, который автоматически является владельцем сайта v-rn.narod.ru. Поэтому никаких предложений проверить права на управления не возникает - мы автоматически получаем статус подтвержденных прав.

Под ошибками сайта понимаются случаи, когда поисковый бот не мог получить доступ к определенным страницам. Это могут быть и банальные несуществующие страницы (ошибки 404) или же ссылки на защищенные части сайта, которые запрещены для индексирования (см. далее файл "robots.txt" ).

Поле "Загружено страниц" отображает общее число страниц сайта, которые успел обойти поисковый бот Яндекса.

На рис 4.9 гиперссылка на названии сайта ведет не на сам сайт, а на сводную страницу информации (рис 4.10):

Гиперссылка "Структура сайта" ведет на структуру, которую, опять-таки, видит Яндекс. Здесь отображаются только те подразделы, которые содержат более 10 страниц и занимают более 1% от общего числа. Поэтому реальная структура - та, которую мы могли видеть на локальном компьютере или на FTP, будет отличаться от представленной.

Файлы Sitemap - отличное средство указать приоритет индексации страниц для сайтов, содержимое которых часто обновляется. Например, большинство новостных лент содержат подразделы, на которых часто публикуются новости. Другие подразделы - архив, информация о сайте (или компании), список рассылок - обновляются реже. Быстрая индексация наиболее обновляемых материалов позволит отображать в поисковой выдаче актуальные данные, а значит, будет способствовать привлечению на ресурс новых посетителей. Для создания файлов Sitemap используется разметка XML, конкретные спецификации которой представлены на официальном сайте.

Раздел ):

В конце августа 2007 года Яндекс перестал поддерживать такие возможности, как поиск страниц, содержащих ссылку на данную, поиск слов, содержащихся только в текстах ссылок на данную. Они были удобны для использования как владельцами сайтов, так и ""роботами" — программами, написанными с целью изучить ранжирование Яндекса и попытаться им манипулировать". Поскольку такое манипулирование ухудшало качество поиска, то соответствующие инструменты были выключены. Так вот, а раздел "Индекс" позволяет все же просмотреть, какие внешние страницы ссылаются на подраздел вашего сайта с помощью инструмента "Внешние ссылки". Другими словами, в какой-то мере прежняя функциональность доступна в этом сервисе.

Раздел ):

В еще одном инструменте для веб-мастеров - Яндекс.Метрике, который мы рассмотрим позже, есть дублирующие этот раздел средства.

Раздел ):

Как правило, в любом сайте есть разделы, которые не должны индексироваться поисковыми системами. Это административные папки, персональные данные пользователей, рабочие материалы. Для того чтобы сообщать всем поисковым системам и Яндексу, в частности, что какие-то разделы обходить не нужно, используется помещение обычного текстового файла Мы видим его содержимое:

User-Agent: * 
Disallow: /cgi-bin/ 
Disallow: /w2k-bin/ 
Disallow: /admin/ 
Disallow: /w2admin/ 
Disallow: /user/ 
Disallow: /css/ 
Disallow: /diploma/

Язык этого файла довольно простой - это не какое-то программирование или даже не HTML-код. В данном случае для всех поисковых систем - "User-Agent: *" запрещено индексирование директорий cgi-bin, w2k-bin, admin и т.д. со всем их содержимым. Создадим свой собственный файл ):

Название папки может быть совершенно произвольным, но придерживаясь определенных традиций, назовем ее ):

В Мастерской переходим по гиперссылке созданной папки, а затем нажимаем ):

Вводим произвольное название файла, скажем, main.html (рис 4.17):

А затем переходим к редактированию созданной страницы. Напишем, что это страница, которая не должна быть доступна для поисковых систем (рис 4.18):

Конечно, все шаги, которые мы сейчас проделали - всего лишь использование функционала Мастерской. Точно такой же результат мы бы получили, если бы создали папку, затем страницу в программе Dreamweaver, а потом загрузили бы их через ftp. Главное то, что теперь по адресу http://v-rn.narod.ru/admin/main.html мы видим созданную страницу (рис 4.19):

Важное замечание - это страница совершенно доступна для всех пользователей. Она останется такой же и далее. Если же мы хотим, чтобы к ней получали доступ авторизованные пользователи, то эту задачу придется решать средствами веб-программирования. Но к запрету к индексации поисковыми системами это отношения не имеет.

Теперь запускаем блокнот, сохраняем файл ):

Осталось забросить этот файл в корневую папку сайта. Идем в Мастерскую, нажимаем на ссылку ):

Далее нажимаем на кнопку ):

Все готово. Возвращаемся к инструментам Яндекс.Вебмастер, переходим по ссылке ). При этом происходит загрузка содержимого файла ):

Как мы и хотели, эта страницу не будет индексироваться - результат "запрещен правилом /admin/" (рис 4.24):

Для анализа файла robots.txt всех сайтов - не только своего собственного, используется публичная версия инструмента. Она работает даже для неавторизованных пользователей.

Инструмент ):

Разумеется, после изменения сайт по-прежнему будет доступен и по обычной ссылке типа v-rn.narod.ru.

Яндекс.Метрика

В предыдущей лекции, при создании сайта, мы просматривали его статистику посещений. Отчеты были довольно примитивны - мы могли всего лишь видеть, сколько было обращений к сайту и каково число посетителей.

Возможности веб-программирования позволяют получать куда более продвинутую статистику. Для каждого посетителя возможно определение его IP-адреса, названия страны, браузера, операционной системы, разрешения монитора, адреса, с которого пришел посетитель и даже названия провайдера и его контактные данные. Вопрос лишь в том, как реализовать такую функциональность в Вашем собственном сайте и сколько это будет стоить.

http://metrika.yandex.ru/):

Для того чтобы начать получать статистику, нужно просто вставить определенный фрагмент HTML-кода на всех страницахКонечно, для сайта, состоящего из сотен и даже тысяч страниц это предложение может показаться фантастическим. Но дело в том, что при генерации таких страниц используется вполне определенный набор шаблонов, число которых весьма ограничено. Достаточно вставить код Яндекс.Метрики в такие шаблоны, чтобы на всех конечных страницах он присутствовал. сайта. Мы будем рассматривать это на примере сайта, разработанного в предыдущей лекции. Но Яндекс.Метрика работает для всех сайтов, не только расположенных на "Народе". Авторизуемся на сервисе, вводим название своего сайта, указываем адрес электронной почты. Для сайта допускается определение десяти целей сбора статистики. В самом простом случае, укажем фиксирование просмотра хотя бы двух страниц сайта, дав соответствующий заголовок ):

Сервис позволяет фиксировать не только просмотр страниц или определенной страницы, но и такие задачи, как скачивание прайс-листа, презентации компании, добавление комментария. После нажатия на кнопку ):

Здесь мы делаем паузу, открываем в браузере еще одну вкладку и переходим в Мастерскую для редактирования файлов своего сайта. Код метрики устанавливаем на всех страницах, размещая его сразу после тега body. Пример для страницы park_aviastroiteley.html:

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
<html xmlns="http://www.w3.org/1999/xhtml">
<head>
<meta http-equiv="Content-Type" content="text/html" />
<title>Парк Авиастроителей </title>
<meta name="keywords" content="Парк Авиастроителей, Воронеж, Фотографии парка Авиастроителей в Воронеже, 
 деревенные фигуры, деревянная скульптура." />
<meta name="description" content="Фотографии деревянных скульптур воронежского 
 парка Авиастроителей в высоком разрешении." />
<link href="style.css" rel="stylesheet" type="text/css" />


<!-- Этот блок кода вставляется в тег <HEAD> (начало) -->
<script src="http://api-maps.yandex.ru/1.0/
?key=AJYdDUoBAAAAf5hmMAMA2PMJnPGzEq44-gA1uwd77mHo1zsAAAAAAAAAAAAmmT_ZT2pY0QPvuWRIUoVc05A-2g==wizard=constructor"
 type="text/javascript"></script>
<script type="text/javascript">
    window.onload = function () {
        var map = new YMaps.Map(document.getElementById("YMapsID"));
        map.setCenter(new YMaps.GeoPoint(39.234738,51.641178), 15, YMaps.MapType.SATELLITE);
        map.addControl(new YMaps.Zoom());
        map.addControl(new YMaps.ToolBar());
        map.addControl(new YMaps.TypeControl());        
        var s = new YMaps.Style();
        s.iconStyle = new YMaps.IconStyle();
        s.iconStyle.offset = new YMaps.Point(-8,-27);
        s.iconStyle.href = "http://api-maps.yandex.ru/i/0.2/placemarks/pmlbm.png";
        s.iconStyle.size = new YMaps.Point(28,29);
        YMaps.Styles.add("wizard#lbmPoint", s);

        
        var placemark1 = new YMaps.Placemark(new YMaps.GeoPoint(39.241385,51.640591),
          {style: "wizard#lbmPoint", balloonOptions: {maxWidth: 300}});
        map.addOverlay(placemark1);
        placemark1.setBalloonContent("Парк Авиастроителей");        
    }
</script>
<!-- Этот блок кода вставляется в тег <HEAD> (конец) -->



</head>

<body>

<!-- YaMetrics begin -->
<script type="text/javascript"><!--
var ya_cid=160780;
//--></script>
<script src="http://bs.yandex.ru/resource/watch.js" type="text/javascript"></script>
<noscript><div style="display: inline;"><img src="http://bs.yandex.ru/watch/160780" width="1" height="1" alt="" /></div></noscript>
<!-- YaMetrics end -->

<div class="content">
Парк Авиастроителей - небольшой и уютный парк, в котором понадобилось однажды спилить старые деревья.
  Ничего необычного, стандартная задача.
<p><a href="images_full/park13.jpg"><img src="images/park13.jpg" width="806" height="1075" border="0px"/></a>
</p>
<p>Но как были спилены эти деревья! Теперь пеньки - немного доработанные скульпторами, 
 стали совершенно самостоятельными украшениями парка.</p>
<p><a href="images_full/park14.jpg"><img src="images/park14.jpg" width="806" height="1075" border="0px"/></a></p>
<p>Их много и они разные. Сова и панда, который залез на дерево.</p>
<p><a href="images_full/muzey15.jpg"><img src="images/park15.jpg" width="1075" height="806" border="0px"/></a></p>

<p><a href="images_full/park10.jpg"><img src="images/park10.jpg" width="806" height="1075" border="0px"/></a></p>
<p>И панда, и дерево представляют собой один ствол.</p>
<p><a href="images_full/park11.JPG"><img src="images/park11.jpg" width="1075" height="806" border="0px"/></a></p>
<p><a href="images_full/park12.jpg"><img src="images/park12.jpg" width="806" height="1075" /></a></p>
<p>Небольшие пеньки.</p>
<p><a href="images_full/park16.JPG"><img src="images/park16.jpg" width="1075" height="806" border="0px"/></a></p>
<p>И большие.</p>
<p><a href="images_full/park17.jpg"><img src="images/park17.jpg" width="806" height="1075" border="0px"/></a></p>
<p>Знакомые персонажи сказок.</p>
<p><a href="images_full/park18.jpg"><img src="images/park18.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park19.jpg"><img src="images/park19.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park.JPG"><img src="images/park.jpg" width="1075" height="806" /></a></p>
<p><a href="images_full/park3.JPG"><img src="images/park3.jpg" width="1075" height="806" border="0px"/></a></p>
<p><a href="images_full/park8.jpg"><img src="images/park8.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park7.jpg"><img src="images/park7.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park2.jpg"><img src="images/park2.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park4.JPG"><img src="images/park4.jpg" width="1075" height="806" border="0px"/></a></p>
<p><a href="images_full/park5.jpg"><img src="images/park5.jpg" width="806" height="1075" border="0px"/></a></p>
<p><a href="images_full/park6.JPG"><img src="images/park6.jpg" width="1075" height="806" border="0px"/></a></p>
<p><a href="images_full/park9.jpg"><img src="images/park9.jpg" width="806" height="1075" border="0px"/></a></p>
<p>Более подробную информацию о парке Авиастроителей можно найти в Базе Знаний Черноземья <a 
href="http://www.chernozemye.ru/index.php5/Парк_Авиастроителей">
 http://www.chernozemye.ru/index.php5/Парк_Авиастроителей</a></p>

<!-- Этот блок кода нужно вставить в ту часть страницы, где вы хотите разместить карту (начало) -->
<div id="YMapsID" style="width:600px;height:450px"></div>
<div style="width:600px;text-align:right;font-family:Arial"><a href="http://api.yandex.ru/maps/tools/constructor/" 
style="color:#1A3DC1">Создано с помощью инструментов Яндекс.Карт</a></div>
<!-- Этот блок кода нужно вставить в ту часть страницы, где вы хотите разместить карту (конец) -->


<p><a href="index.html">На главную</a></p>
</div>



</body>
</html>

Затем мы переключаемся на страницу с кодом счетчика и нажимаем на кнопку ):

Если мы все сделали правило, то статус счетчиков будет отображать сбор данных (рис 4.30):

Статистика начинает работать и первые данные мы получим уже через несколько часов (иногда и раньше). Синяя, зеленая и красная кнопка предназначены для просмотра отчетов, редактирования счетчика (в том числе и для добавления новых целей) и удаления счетчика. В последнем случае нужно быть предельно внимательным, особенно когда статистика собирается уже достаточно давно. Однако, в случае ошибочного удаления техподдержка Яндекс.Метрики поможет восстановить счетчик.

Спустя несколько дней, в течении которых посетители сайта накапливали статистику, мы заходим снова на страницу Яндекс.Метрики и переходим к отчетам (рис 4.31):

Все данные собраны по 8 группам, собранным по аналогу обычного меню. Значения доступны за сегодня, неделю, месяц, квартал и год. Первая группа - ):

Точное число посетителей отображается во всплывающей подсказке на графике и в виде таблицы (рис 4.33):

Таблица содержит довольно много столбцов, для которых принята определенная терминология:

Определение каждого из этих терминов появляется во всплывающей подсказке при наведении курсора (рис 4.34):

Но это все общая статистика. В самом начале установки счетчика мы наметили цель - отслеживание посещения сайта, при котором посетители просматривают 2 страницы. Выбираем соответствующее значение выпадающего списка ):

Появляются два новых поля - "Целевые визиты" и "Конверсия":

Кроме посещаемости, группа "Трафик" содержит отчеты по распределению визитов по времени суток, а также так называемого "Вовлечения". Под этим термином понимается информация о количестве просмотренных страниц и о времени, проведенном посетителем на сайте.

В рамках нашего небольшого сайта эта информация вряд ли будет интересной. Мы переходим к группе ):

Подразделы ):

В сочетании со статистикой ключевых слов, на которую мы обращали внимание в первой лекции, эти данные позволяют понять, какие ключевые слова должны быть на нашем сайте для лучшего поиска.

Добавляют ли нас пользователи в ):

Конечно, сервис фиксирует повторные визиты, совершаемые любым образом. На графиках мы видим, что большая часть посетителей совершает всего один визит. Это означает, что нужно чаще обновлять сайт и выкладывать на нем больше информации.

Группа ):

Группа ):

Читатели, знакомые с системой Tor, на этом самом месте, могут ее запустить и начать экспериментировать - сможет ли Яндекс.Метрика распознать ежеминутные смены IP-адресов и не включать их в общую статистику? Мои эксперименты статистика распознала и выкинула недостоверные данные из общей картины.

Подраздел географии по России позволит узнать предпочтения жителей областей, которые заходят на наш сайт (рис 4.41):

Переключившись на режим отображения карты вспоминаем границы областей и их расположение друг относительно друга (рис 4.42):

Группа ):

Но на самом деле, ничего сверхъестественного здесь нет - данные представляются на основании лишь той части трафика, для которой существуют точные сведения о поле и возрасте. А они берутся из регистрационных данных сервисов Яндекса. Например, в "Моем круге" мы рассказываем о себе достаточно подробно, а главное - достоверно.

Поэтому внизу таблицы, в каждом случае указывается процентное соотношение этого трафика. В данном случае это выглядит так:

В нашем случае данные о демографии известны для чуть более половины посетителей, в случае других сайтов этот процент может быть совершенно различным.

Подраздел "Половозрастная структура" представляет эти же данные еще более наглядно, на совмещенном графике.

Группа ):

Здесь мы снова видим сайты (источники), с которых вообще пришли посетители. А затем куда они направились с главной страницы. Изображение содержит инструменты масштабирование - его можно таскать и изменять масштаб, как на обычных Яндекс.Картах. Формируемый отчет позволит увидеть самые незаметные уголки нашего сайта и при необходимости, улучшить удобство пользования или навигационные ссылки.

В те времена, когда браузеры Internet Explorer и Netscape Navigator воевали между собой, наиболее популярным разрешением для мониторов было 800*600. Сейчас, конечно, все изменилось, а группа ):

Глядя на эту статистику, мы убеждаемся в том, что сейчас нужно верстать страницы, которые одинаково хорошо выглядят как минимум в браузерах Opera, Mozilla Firefox и Microsoft Internet Explorer. Если ранее мы наблюдали эти данные, собранные кем-то там, весьма отвлеченно, то теперь наш сайт является тестовой площадкой.

Под какое разрешение монитора допустимо сверстать наш сайт, чтобы это было удобно всем? Ответ на этот вопрос заключается в подразделе ):

Конечно, глядя на эти цифры, следует учитывать интересы всех пользователей, а также стараться анализировать данные за достаточно большой период времени.

Статистика по операционным системам, наличия библиотек .NET, Java и Flash может показаться не самой необходимой информацией. Но если рано или поздно она понадобиться, то эти данные будут под рукой.

Яндекс.Метрика, позволяет получать статистические данные в такой форме, что процесс администрирования сайта превращается в увлекательное занятие, которое начинает содержать элементы спортивного интереса. Общий объем получаемой статистики, который получается банальным размещением HTML-кода на страницах сайта, вполне может конкурировать с самыми продвинутыми системами управления сайтов, содержащими свои статистические модули.

Мы рассмотрели наиболее интересные, на момент написания курса, инструменты Яндекса для вебмастеров. Они постоянно развиваются и пополняются. Полный перечень всех предложений вебмастерам от Яндекса доступен здесь.