9. Оптимизация метатегов
Метатеги[18] (от англ. meta tags) – это html-теги, предназначенные для предоставления структурированных метаданных (дополнительных, сопроводительных данных) о веб-странице.
Метатегов очень много, но большинство из них для практического поискового продвижения бесполезны, поэтому в данном разделе мы рассмотрим только те теги, которые способны реально повлиять на позиции сайта в поисковых системах.
Для диагностики проблем с метатегами можно воспользоваться сервисами для веб-мастеров Яндекса и Гугла. В них представлена информация о проиндексированных страницах, и можно легко увидеть явные проблемы (например, разделы с отсутствующими или повторяющимися метатегами).
Однако о скрытых дефектах метатегов поисковые системы не рассказывают: продвигаемый сайт будет просто ранжироваться ниже конкурентов. Поэтому изучению метатегов и правил их заполнения стоит уделить особое внимание.
Тег (название страницы)</em></strong></p><p>Хотя <title>[19] с технической точки зрения не метатег, а просто тег, он часто используется вместе с метатегом <description>, поэтому обсуждать его мы будем именно в этом разделе[20].</p><p><title> многими исследователями считается чуть ли не вторым по важности фактором при ранжировании страницы (на первое место ставится текстовое наполнение). Такое утверждение спорно, однако тег точно нельзя недооценивать. Как правило, на его основе поисковая система формирует заголовок страницы, который пользователь видит на странице поисковой выдачи[21]. Именно от него во многом зависит, какую позицию займет страница и перейдет ли на нее пользователь.</p><p>При заполнении тега нужно придерживаться следующих рекомендаций:</p><p>1. <title> должен отражать содержимое страницы.</p><p>2. В теле тега <title> должно присутствовать точное вхождение основного запроса, под который оптимизирована страница. Также в него можно включить вхождения второстепенных запросов и полезную информацию для пользователей (бренд, отзывы, цена, скидки, телефон, сведения о доставке). При этом нужно избегать переоптимизации (чрезмерного употребления) по главным и второстепенным ключевым словам.</p><p>3. Ключевые слова лучше размещать ближе к началу заголовка. Это влияет как на позицию в выдаче, так и на CTR (на такой заголовок больше кликают).</p><p>4. Текст заголовка должен быть осмысленным и привлекательным для клика. Нужно помнить, что именно его видит пользователь в результатах выдачи.</p><p>5. Весь заголовок рекомендуется вмещать в 70 символов, так как есть вероятность, что большее количество текста пользователь просто не увидит из-за ограничений верстки на странице выдачи поисковых систем. Приблизительно это 1–2 небольших словосочетания. Ограничениями можно пренебречь, чтобы разместить действительно важную для пользователей информацию (есть вероятность, что поисковая система покажет эту часть заголовка при вводе пользователем соответствующего запроса). При этом нужно помнить, что чем больше слов в <title>, тем меньше вес у каждого слова, поэтому чем заголовок содержательнее и короче, тем лучше.</p><p>6. Необходимо проанализировать заголовки успешных конкурентов, которые уже присутствуют в выдаче по нужным ключевым словам. Это не только поможет определить оптимальную длину заголовка, но и подскажет, какую информацию стоит в нем разместить.</p><p>7. <title> должен быть уникальным для всех страниц в пределах одного сайта.</p><p>Для больших сайтов часто кажется слишком трудоемким заполнение тега заголовка для всех страниц в ручном режиме. Зачастую это иллюзорное впечатление: объем усилий оказывается не таким уж большим и с лихвой окупается полученным эффектом.</p><p>Но если ручной режим представляется нецелесообразным, можно сгенерировать метатеги по шаблону. Подробнее мы поговорим об этом ниже.</p><br/><p><strong><em>Метатег <description> (описание страницы)</em></strong></p><p>Метатег <description>[22] описывает содержимое веб-страницы. Он также очень важен, так как на его основе поисковые системы зачастую формируют сниппеты, и, следовательно, от его качества напрямую зависит популярность сайта.</p><br/><p>✍ <strong><em>На заметку</em></strong></p><p><strong><em>Сниппет – это небольшой фрагмент текста, который мы видим на странице поисковой выдачи вместе со ссылкой на сайт. Сниппеты напрямую влияют на кликабельность, и их оптимизации посвящен отдельный раздел в этой книге.</em></strong></p><br/><p>При формировании содержимого метатега < description> необходимо выполнять следующие рекомендации:</p><p>1. В теле < description> должно присутствовать точное вхождение основного запроса, под который оптимизирована страница. Также в него можно включить: вхождения второстепенных запросов и полезную информацию для пользователей (бренд, отзывы, цена, скидки, телефон, инфо о доставке и прочее). При этом нужно избегать переоптимизации (чрезмерного употребления) по главным и второстепенным ключевым словам.</p><p>2. Текст должен содержать призыв к действию и быть привлекательным для клика.</p><p>3. Желательно делать основное содержимое < description > короче 160 символов. Но нужно учитывать, что количество символов, которые выводятся в сниппете на странице с результатами поиска, может в любой момент измениться. Поэтому текст описания может быть и более 160 символов. Главное, чтобы это была полезная и нужная для пользователей информация. 160 символов – это 2–4 небольших предложения. Допускается, когда эти предложения взяты из текста на странице (желательно из верхней его части). Это почти гарантированно приведет к тому, что сниппет будет формироваться поисковыми системами именно на основе содержимого <description>.</p><p>4. <description> должен присутствовать на всех страницах и быть уникальным в пределах сайта.</p><p>5. Хорошим приемом повышения кликабельности сайта на странице поисковой выдачи может быть вставка в описании специальных символов и значков (самолет, телефон, решетка и прочее). О том как это сделать, можно легко найти информацию в Сети.</p><br/><p><strong><em>Шаблонизация</em></strong></p><p>Для больших веб-проектов актуальна проблема ручного заполнения метатегов на всех страницах. Этих страниц просто слишком много, хотя выше мы отмечали, что часто эта проблема надуманная: на заполнение метатегов понадобится не так уж много времени, а затраченные усилия с лихвой окупятся хорошими позициями в поисковых системах.</p><p>Но если вопрос стоит остро, на помощь придут автоматические скрипты и конкатенация.</p><br/><p>✍ <strong><em>На заметку</em></strong></p><p><strong><em>Конкатенация – операция склеивания объектов линейной структуры, обычно строк. Например, конкатенация слов «микро» и «мир» даст слово «микромир»[23].</em></strong></p><br/><p>Заниматься написанием скриптов должны программисты, это технический вопрос. Важнее другой момент: как составить тексты для заголовков и описаний?</p><p>Универсальных рецептов нет, но важно понимать, что схема конкатенации – это составление шаблонов для определенных видов контента, где на место свободных полей можно подставить конкретные значения с каждой страницы.</p><p>Допустим, нужно заполнить метатеги для большого количества продуктовых страниц на сайте интернет-магазина парфюмерии. Для начала необходимо определить, как пользователи движутся по сайту. Пусть это происходит так: главная – категория – продукт. Эти три переменные необходимо заполнить.</p><p>Далее определяются дополнительные параметры и слова, которые важны для пользователей. Для этого необходимо проанализировать хвост низкочастотных запросов, который возникает при проверке основного запроса. Например, вот что мы видим при проверке в сервисе Яндекс. Wordstat[24] категории «женские духи»:</p><br/><div style="text-align: center"><img src="/img/58535581/i_002.png"></img></div><br/><p>Анализируем таблицу и выбираем то, что волнует покупателей женских духов (цена, фото, отзывы, купить…).</p><p>Переходим к построению шаблона заголовка. Например, для страницы с товаром он мог бы быть таким:</p><br/><p><em>{название категории} {название товара} – купить в {название магазина}. Цена от {цена} р., фото, отзывы, доставка.</em></p><br/><p>После подстановки всех переменных получим:</p><br/><p><em>Женские духи Dia Woman – купить в магазине Beauty. Цена от 17 800 р., фото, отзывы, доставка.</em></p><br/><p>С мета-описанием аналогично. Если на страницах сайта есть подробное описание товара – можно планировать схемы детальнее, включать больше параметров и полезной для пользователей информации.</p><p>Рекомендуется делать схемы для каждого раздела сайта. Чем детальнее их проработать, тем лучше, хотя стоит помнить о балансе затрат и полученных результатов.</p><br/><p><strong><em>Метатег <keywords> (ключевые слова)</em></strong></p><p>На заре развития поисковых систем появилась красивая, но наивная идея о том, что веб-мастера будут сами подсказывать поисковым системам те ключевые слова, которым релевантна та или иная веб-страница.</p><p>Для реализации этой теории ввели метатег <keywords >, слова из которого имели серьезное значение при ранжировании документов.</p><p>Что произошло дальше, догадаться нетрудно. Веб-мастера и специалисты по продвижению начали запихивать в <keywords> все ключевые слова, по которым они хотели продвинуть сайт в результатах поиска. На релевантность никто не обращал внимания: зачем эти тонкости, когда можно было в короткий срок продвинуться по всем нужным коммерческим запросам?</p><p>Масштаб злоупотреблений достиг такой величины, что поисковые системы вынуждены были свести влияние <keywords> буквально до нуля, поэтому на данный момент заполнять этот тег бессмысленно.</p><p>Если тег все-таки заполняется содержимым (так сказать, на всякий случай), необходимо соблюдать простые правила. Содержимое <keywords> должно быть уникальным в пределах сайта, все ключевые слова должны быть релевантны странице, и их должно быть немного.</p><p>В противном случае поисковые системы могут воспринять содержимое метатега <keywords> как веб-спам и понизить сайт в результатах поиска.</p><br/><p><strong><em>Метатег <robots></em></strong></p><p>Данный метатег[25] позволяет контролировать сканирование и индексирование сайта поисковыми системами. По умолчанию задаются значения «index, follow» (то же самое, что «all») – дополнительно их прописывать не нужно. Разные поисковики распознают разные значения тега, но универсальными являются два:</p><p>– noindex: запрещает индексирование страницы;</p><p>– nofollow: запрещает роботу переходить по ссылкам с этой страницы.</p><p>Эти значения можно комбинировать, разделяя их запятыми. Например, комбинация</p><br/><p><em><meta name=«robots» content=«noindex, follow»/> </em>заставит робота поисковиков перейти по всем ссылкам на странице, но не индексировать ее содержимое.</p><br/><p>Нужно отметить, что использование данного метатега, как правило, свидетельствует о проблемах со структурой сайта. С такими проблемами еще можно мириться на огромном портале, где регулярно возникают трудноустранимые с программной точки зрения «тупики» (страницы, представляющие мало интереса для пользователей и возникающие вследствие несовершенства архитектуры сайта). Но для небольшого проекта это недопустимо.</p><br/><p>✍ <strong><em>На заметку</em></strong></p><p><strong><em>Данное правило является частным случаем другого, более универсального, принципа, который звучит так: «Пользователи и поисковые системы должны видеть одинаковый контент». Если на сайте возникают страницы, содержимое которых нецелесообразно индексировать поисковому роботу, необходимо задуматься о том, а стоит ли их «индексировать» пользователям сайта и какое впечатление такие страницы на них произведут? Не проще ли просто их убрать?</em></strong></p><br/><p>Остается добавить, что использование данного тега для управления индексированием менее предпочтительно по сравнению с правильным формированием файла robots.txt (о нем мы поговорим позже).</p></section><section><p>10. Поиск и устранение дублей</p><p>Идентичный (дублированный) контент на разных страницах сайта может привести к ошибкам индексации и даже свести на нет все усилия по продвижению. Чем опасны дубликаты и почему от них стоит избавляться?</p><p>Во-первых, на дубли уходит часть статического веса, а неправильное распределение веса ухудшает ранжирование целевых разделов сайта.</p><br/><p>✍ <strong><em>На заметку</em></strong></p><p><strong><em>Статический вес – это один из важных параметров, влияющих на продвижение сайта в целом и конкретной страницы в частности. Вес определяется количеством и качеством ссылающихся на страницу документов (в основном, html-страниц, но учитываются еще pdf и doc-файлы, а также другие распознаваемые поисковиками документы с гиперссылками).</em></strong></p><br/><p>Во-вторых, на дубли тратится часть драгоценного краулингового бюджета. Особенно остро эта проблема стоит для крупных информационных и e<ommerce (онлайн-торговля) проектов.</p><br/><p>✍ <strong><em>На заметку</em></strong></p><p><strong><em>В Интернете триллионы веб-страниц, и каждый день появляются сотни миллионов новых веб-страниц. В этой связи перед поисковыми системами стоит серьезная проблема: как успевать обходить, скачивать и ранжировать все это огромное хозяйство.</em></strong></p><p><strong><em>Для обхода страниц используются роботы. Поисковый робот («веб-паук», «краулер») – программа, являющаяся составной частью поисковой системы и предназначенная для перебора страниц Интернета и занесения информации о них в базу данных. Очевидно, что каким бы мощным и быстрым не был краулер, скачать единовременно все обновления со всех сайтов у него не получится.</em></strong></p><p><strong><em>Из-за этого паук скачивает сайты постепенно, небольшими «порциями», например, по нескольку десятков или сотен страниц в день. Размер этой порции на профессиональном сленге специалистов по продвижению и называется краулинговым бюджетом.</em></strong></p><p><strong><em>По сути, бюджет – это то количество страниц сайта, которое обновится в базе поисковика за определенный период. Чем больше бюджет, тем лучше, так как при большом бюджете можно быть уверенным, что все изменения на сайте быстро попадут в базу данных поисковика.</em></strong></p><p><strong><em>Краулинговый бюджет зависит от многих факторов (уровня траста, размера сайта, частоты обновления, тематики, региона) и рассчитывается по специальному алгоритму. Самостоятельно увеличить его на нужную величину довольно сложно.</em></strong></p><p><strong><em>Поэтому при продвижении сайта стоит обратная задача: вместить в имеющийся бюджет все изменения, которые произошли на сайте. Для этого применяется комплекс мер, от удаления дублей до управления индексацией с помощью служебных файлов. Все эти меры мы последовательно рассмотрим на страницах данной книги.</em></strong></p><p><strong><em>Остается добавить, что получить представление о краулинговом бюджете для продвигаемого сайта можно с помощью статистики, которую предоставляют поисковые системы в панелях для веб-мастеров, или анализа логов сервера.</em></strong></p><br/><p>В-третьих, из-за ошибок в алгоритмах поисковых систем после очередного обновления поискового индекса дубль может заменить в выдаче целевую страницу. Как правило, после этого позиции сайта в выдаче существенно ухудшаются.</p><p>Но даже если этого не произойдет, может возникнуть ряд негативных эффектов: например, падение конверсии[26] и накопление поведенческой статистики на неправильной странице. Целевая страница при этом может вообще пропасть из индекса (в самом деле, зачем держать в базе несколько копий одной и той же страницы?).</p></div></div><div class="PaginationBlock_paginationBlock__ESqX_ PaginationBlock_paginationBlock_bottom__LljhQ"><div class="PaginationBlock_paginationBlock__pages__KDW6d"><div><div class="Pagination_pagination__thWr5 Pagination_pagination_noMargin__QOW6m"><a class="Previous_prev__nRln6" href="/online/529375/1"><</a><a class="Pagination_pagination__link__innVr" href="/online/529375/1">1</a><a class="Pagination_active__FIUxq" href="/online/529375/2">2</a><a class="Pagination_pagination__link__innVr" href="/online/529375/3">3</a><a class="Pagination_pagination__link__innVr" href="/online/529375/4">4</a><span>...</span><a class="Pagination_pagination__link__innVr" href="/online/529375/6">6</a><a class="Next_next__5tJXc" href="/online/529375/3">></a></div></div></div><div><div><div class="PaginationBlock_pagesInput__controls__OQi14"><span class="PaginationBlock_pagesInput__txt__wP7Er">На страницу:</span><div class="PaginationBlock_pagesInput__input__5EMpR"><input data-page-go-input="true" class="PaginationBlock_formInput__field__BCaW4" name="page-number" type="number" min="1" max="6" placeholder="1" value="1"/></div><div class="PaginationBlock_pagesInput__btn__iKpTu"><a data-page-go-button="true" class="PaginationBlock_paginationBlock__btn__7ClWN" href="/online/529375/1">Перейти</a></div><div class="PaginationBlock_pagesInput__count__CTnof"><span data-current-page="{{ currentPage }}">2</span> <!-- -->из<!-- --> <span data-total-pages="{{ totalPages }}">6</span></div></div></div></div></div></div><div class="Layout_mainContainer__bottomBanner__qtLRD"><div class="undefined FooterBanner_rtbBanner_desktop__MTpQ6"><div id="yandex_rtb_R-A-745629-5"></div></div><div class="undefined FooterBanner_rtbBanner_mobile__4OC92"><div id="yandex_rtb_R-A-745629-4"></div></div></div></div><div class="Layout_mobileOverlay__PjzPa"></div></main><div class="StickyBanner_sticky_banner__NC2R_ " data-sticky-banner="true"><div class="StickyBanner_sticky_banner_btn__RQPM3" data-sticky-banner-btn="true"></div><div class="StickyBanner_sticky_banner_wrap__tQTE_"><div id="yandex_rtb_R-A-745629-6"></div></div></div></div></div><script id="__NEXT_DATA__" type="application/json">{"props":{"pageProps":{"book":{"id":529375,"book_id":411822,"alias":"529375","views_count":178,"comments_count":0,"rating":0,"voted_users":0,"type":"book","genres":[{"id":5337,"parent_id":5048,"title":"интернет-маркетинг","alias":"internet_marketing"},{"id":54725,"parent_id":0,"title":"поисковые системы","alias":"poiskovye-sistemy"},{"id":66495,"parent_id":0,"title":"веб-программирование","alias":"veb-programmirovanie"},{"id":72275,"parent_id":0,"title":"эффективное продвижение","alias":"effektivnoe-prodvizhenie"},{"id":92855,"parent_id":0,"title":"увеличение прибыли","alias":"uvelichenie-pribyli"},{"id":115647,"parent_id":0,"title":"продвижение сайта","alias":"prodvizhenie-saita"}],"author":{"id":154340,"alias":"sergey-anisimov-24757186","views_count":302,"comments_count":0,"books_count":1,"status":"active","first_name":"Сергей","middle_name":"","last_name":"Анисимов"},"tags":[],"series":[],"book":{"id":411822,"author_id":126590,"external_id":58535581,"external_uid":"1260ef68-f68d-11ea-ae9a-0cc47a5f137d","title":"Поисковое продвижение сайтов","alias":"poiskovoe-prodvizhenie-saitov","description":"В интернет-маркетинге существуют четкие критерии успешности веб-проекта: рост посещаемости, увеличение конверсии и прибыли. Задача книги – помочь читателю быстро и без лишних усилий достигнуть этих целевых показателей.\nВ тексте изложены принципы работы поисковых систем, результаты исследований экспертов и авторские наработки по продвижению сайтов. При этом книга задумывалась именно как практическое руководство по поисковой оптимизации, поэтому материал представлен в максимально простой форме, а все рекомендации приведены по принципу «бери и делай».\nКнига адресована широкому кругу читателей: собственникам и топ-менеджерам бизнеса, начинающим и опытным специалистам по продвижению, интернет-маркетологам, дизайнерам, веб-программистам, студентам, а также всем, чьи интересы и деятельность непосредственно связаны с Интернетом.\n\n\nВ формате PDF A4 сохранен издательский макет.\n\n\n","type":"book","lang":"ru","src_lang":"ru","year":2020,"publish_year":null,"publish_city":null,"pub_date":"2020-09-22T00:00:00","publisher":null,"release_date":null,"photo":null,"allow_full_free":0,"has_trial":4,"price":null,"hot":0,"isbn":null,"audio_url":null,"genres":[{"id":5337,"parent_id":5048,"title":"интернет-маркетинг","alias":"internet_marketing"},{"id":54725,"parent_id":0,"title":"поисковые системы","alias":"poiskovye-sistemy"},{"id":66495,"parent_id":0,"title":"веб-программирование","alias":"veb-programmirovanie"},{"id":72275,"parent_id":0,"title":"эффективное продвижение","alias":"effektivnoe-prodvizhenie"},{"id":92855,"parent_id":0,"title":"увеличение прибыли","alias":"uvelichenie-pribyli"},{"id":115647,"parent_id":0,"title":"продвижение сайта","alias":"prodvizhenie-saita"}]},"files":[],"created_at":"2020-09-21T09:30:24","reader":null,"draft":null,"hide_litres_data":false,"other_author_books":[]},"read":{"page":2,"pages":6,"type":"fb2","content":"\u003cbr/\u003e\u003cp\u003eК сожалению, в России пока нет возможности арендовать доменные имена в зоне. ru более чем на год, поэтому все вышеизложенное относится только к международным доменам.\u003c/p\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e5. Приватный WHOIS\u003c/p\u003e\u003cp\u003eWHOIS[4] (от англ. who is – «кто это?») – это сетевой протокол прикладного уровня, основное применение которого заключается в получении регистрационных данных о владельцах доменных имен, IP-адресов и автономных систем.\u003c/p\u003e\u003cp\u003eС данным протоколом работают разнообразные WHOIS-сервисы[5], которые позволяют интернет-пользователям и поисковым системам быстро получить информацию о регистрации домена (в том числе дату регистрации и возраст домена) и узнать контакты, по которым можно связаться с организацией или человеком, которые владеют доменом.\u003c/p\u003e\u003cp\u003eОднако владелец домена по разным причинам может скрыть контактные данные (сделать их приватными). В таком случае поисковые системы считают, что сайту «есть что скрывать». Это понижает уровень траста и может ухудшить позиции веб-ресурса в выдаче по целевым запросам.\u003c/p\u003e\u003cp\u003eОтсюда простая рекомендация: при продвижении необходимо открыть контактные данные и привести полную информацию о владельце домена.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eЗабегая вперед, необходимо отметить, что самый короткий путь к успеху в Интернете – это открытость во всех проявлениях. Прозрачность позволяет установить с пользователями доверительные отношения и быстро масштабировать любой интернет-проект.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cdiv style=\"text-align: center\"\u003e\u003cimg src=\"/img/58535581/i_001.jpg\"\u003e\u003c/img\u003e\u003c/div\u003e\u003cp\u003e\u003cstrong\u003eРис. 1. Данные WHOIS-сервиса для домена mail.ru, представленные на странице https://www.nic.ru/whois/\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e6. Привязка домена высшего уровня (TLD) к стране\u003c/p\u003e\u003cp\u003eTLD (от англ. top-level domain, домен верхнего (первого) уровня) страны (например, ru или. ua) позитивно влияет на рейтинг сайта внутри стран, но негативно – на глобальный.\u003c/p\u003e\u003cp\u003eОтсюда вывод: если в проекте хотя бы в перспективе планируется выход за пределы отечественного Интернета, есть смысл уже на старте задуматься о международном домене.\u003c/p\u003e\u003c/section\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003eТехническая оптимизация сайта\u003c/p\u003e\u003csection\u003e\u003cp\u003eТехническая оптимизация – это комплекс работ по выявлению и устранению программных и технических недоработок, мешающих сайту занять высокие места в выдаче поисковых систем. Это крайне важный процесс, без выполнения которого продвижение сайта либо существенно усложняется, либо становится невозможным.\u003c/p\u003e\u003cp\u003eТехническую оптимизацию условно можно разделить на два этапа:\u003c/p\u003e\u003cp\u003e1. Первоначальная оптимизация. Данная процедура выполняется на старте проекта и обеспечивает корректную индексацию сайта и правильную настройку его основных механизмов.\u003c/p\u003e\u003cp\u003e2. Периодический анализ состояния сайта, устранение выявленных недостатков и доработка новых возможностей. На этом этапе техническая доработка превращается в итерационный процесс, где в конкретный временной период (например, за календарный месяц) выполняется определенный перечень работ по улучшению сайта, объем которых зависит от финансовых возможностей в проекте по продвижению.\u003c/p\u003e\u003cp\u003eВ данном разделе мы сосредоточимся на тех параметрах вебсайтов, которые оказывают влияние на ранжирование в поисковых системах, а также приведем рекомендации, которые помогут избежать самых распространенных технических ошибок.\u003c/p\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e7. Надежный, быстрый и удобный хостинг\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eАптайм сервера\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eАптайм сервера (от англ. uptime – время непрерывной работы) – это один из важнейших параметров, которые надо учесть при выборе хостинг-площадки для веб-сайта. Аптайм рассчитывают в процентах, как среднее время работы системы от общего времени измерения. Противоположным аптайму является «даунтайм» (от англ. downtime) – время, когда сервер не работает.\u003c/p\u003e\u003cp\u003eХорошими показателями аптайма считаются цифры в пределах 99,8-99,9 %, что примерно соответствует часу-полутора даунтайма в месяц. Этого вполне достаточно для устойчивой работы сайта, да и добиться более высоких показателей может быть сложно, так как любой сервер требует критических обновлений (после которых идет перезагрузка), а иногда тормозит или подвисает, вследствие чего непрерывная работа может прерываться.\u003c/p\u003e\u003cp\u003eЧем опасен низкий аптайм? Во-первых, если сервер «упал», теряются посетители и клиенты, которые могли бы прийти на сайт. Особенно это критично при высоком уровне платного трафика из контекстной рекламы и других рекламных сетей, когда денежные потери могут выливаться во вполне ощутимые суммы.\u003c/p\u003e\u003cp\u003eВо-вторых, если сайт будет недоступен по причине неработоспособности хостинга, поисковые роботы не смогут получить к нему доступ. При кратковременных неполадках, конечно, ничего не произойдет, но постоянные отключения приведут к понижению сайта в результатах выдачи, вплоть до полного исключения ресурса из поискового индекса.\u003c/p\u003e\u003cp\u003eЧтобы избежать негативных последствий, нужно ответственно отнестись к выбору хостинга: провести анализ предложений на рынке; проверить отзывы; разобраться в том, насколько удобный интерфейс предоставляет хостинг-компания[6] и какие дополнительные услуги будут доступны. Такая работа сэкономит много сил в дальнейшем.\u003c/p\u003e\u003cp\u003eОтслеживать работоспособность сервера можно множеством способов. Самый простой – настроить уведомления о проблемах на сайте в системе веб-статистики, которую устанавливают на сайт для сбора информации о различных аспектах его работы (подойдет, например, Яндекс-метрика). Если нужно более подробное и гибкое решение, необходимо воспользоваться веб-сервисами проверки хостинга, ссылки на которые легко найти в Сети.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eМестонахождение и скорость работы сервера\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eФизическое местонахождение сервера хоть и слабо, но может повлиять на ранжирование сайта. Особенно это актуально при поиске информации с геопривязкой, по определенному географическому региону.\u003c/p\u003e\u003cp\u003eБольшое географическое удаление сервера может вызвать проблемы со скоростью загрузки сайта и обслуживанием сервера: общаться с технической поддержкой сервера, например, придется ночью, да еще и на иностранном языке.\u003c/p\u003e\u003cp\u003eБольшое значение имеет скорость работы сервера, от которой напрямую зависит ряд аспектов, влияющих на скорость загрузки сайта. Для ускорения своих площадок хостинг-провайдерами используются различные технологии, вплоть до CDN[7] – географически распределенной сетевой инфраструктуры, позволяющей оптимизировать доставку контента пользователям. Соответственно, при продвижении нужно проанализировать предоставляемые разными компаниями возможности и выбрать самый быстрый сервер из всех доступных.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eОтказоустойчивость\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eС ростом трафика сайта нагрузка на хостинг будет расти. Также нужен запас прочности сервера на случай внезапного лавинообразного роста трафика (например, из-за рекламных акций или случайных ссылок в социальных сетях, по которым одномоментно могут перейти множество пользователей).\u003c/p\u003e\u003cp\u003eВ идеале выбранный для сайта сервер должен выдерживать даже критичную нагрузку. Проверить это можно с помощью специальных сервисов нагрузочного тестирования производительности[8].\u003c/p\u003e\u003cp\u003eЕсли у сайта слабый сервер и нет возможности увеличить его мощность, можно также оптимизировать нагрузку с помощью директивы crawl-delay[9]. Но это временная мера: проще и надежнее использовать более мощный хостинг.\u003c/p\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e8. Скорость загрузки сайта\u003c/p\u003e\u003cp\u003eСкорость загрузки является критично важным параметром при продвижении сайта.\u003c/p\u003e\u003cp\u003eДело в том, что пользователи привыкли к быстрой загрузке и их раздражает ситуация, когда сайт долго не открывается. Поисковые системы учитывают этот момент и в погоне за удовлетворенностью пользователей ставят на высокие позиции в выдаче только быстрые сайты.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eКак измеряется скорость сайта\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eПоисковые системы могут весьма точно просчитывать скорость загрузки страницы, основываясь только на ее коде и размере скачиваемых файлов. Однако для измерения скорости используется и множество других источников, например, статистика браузеров (Google Chrome, Яндекс Браузер), плагинов для браузеров и систем веб-мониторинга.\u003c/p\u003e\u003cp\u003eЧем выше будет скорость загрузки страниц, тем лучше. В общем случае время ожидания не должно превышать 3–5 секунд, а хорошие показатели составляют до 0.7 секунды для времени скачивания исходного кода документа и до 0.2 секунды для времени ответа сервера. То есть ваш сайт должен загружаться меньше чем за секунду.\u003c/p\u003e\u003cp\u003eОценить скорость загрузки помогут специальные сервисы. Самый популярный из них – Google PageSpeed Insights[10], по оценке которого нужно набирать 90+ баллов и для мобильной, и для десктопной версии сайта. Помогут и другие сервисы анализа скорости загрузки веб-ресурсов, ссылки на которые легко найти в Интернете.\u003c/p\u003e\u003cp\u003eРаботу по ускорению сайта должен выполнять профессиональный программист, результаты работы которого необходимо проверить с помощью специальных веб-сервисов и данных веб-статистики. Для общей информации приведем некоторые рекомендации, которые могут помочь выполнить задачу:\u003c/p\u003e\u003cp\u003e1. Использовать кэш браузера [11].\u003c/p\u003e\u003cp\u003e2. Включить сжатие[12].\u003c/p\u003e\u003cp\u003e3. Удалить код JavaScript, препятствующий показу страницы[13].\u003c/p\u003e\u003cp\u003e4. Оптимизировать код CSS[14].\u003c/p\u003e\u003cp\u003e5. Сократить объем ресурсов (HTML, CSS и JavaScript)[15].\u003c/p\u003e\u003cp\u003e6. Оптимизировать изображения[16].\u003c/p\u003e\u003cp\u003e7. Оптимизировать время ответа сервера[17].\u003c/p\u003e\u003cp\u003eПеречисленные рекомендации подходят для всех вебплатформ, поэтому их можно реализовать в первую очередь.\u003c/p\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e9. Оптимизация метатегов\u003c/p\u003e\u003cp\u003eМетатеги[18] (от англ. meta tags) – это html-теги, предназначенные для предоставления структурированных метаданных (дополнительных, сопроводительных данных) о веб-странице.\u003c/p\u003e\u003cp\u003eМетатегов очень много, но большинство из них для практического поискового продвижения бесполезны, поэтому в данном разделе мы рассмотрим только те теги, которые способны реально повлиять на позиции сайта в поисковых системах.\u003c/p\u003e\u003cp\u003eДля диагностики проблем с метатегами можно воспользоваться сервисами для веб-мастеров Яндекса и Гугла. В них представлена информация о проиндексированных страницах, и можно легко увидеть явные проблемы (например, разделы с отсутствующими или повторяющимися метатегами).\u003c/p\u003e\u003cp\u003eОднако о скрытых дефектах метатегов поисковые системы не рассказывают: продвигаемый сайт будет просто ранжироваться ниже конкурентов. Поэтому изучению метатегов и правил их заполнения стоит уделить особое внимание.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eТег \u003ctitle\u003e (название страницы)\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eХотя \u003ctitle\u003e[19] с технической точки зрения не метатег, а просто тег, он часто используется вместе с метатегом \u003cdescription\u003e, поэтому обсуждать его мы будем именно в этом разделе[20].\u003c/p\u003e\u003cp\u003e\u003ctitle\u003e многими исследователями считается чуть ли не вторым по важности фактором при ранжировании страницы (на первое место ставится текстовое наполнение). Такое утверждение спорно, однако тег точно нельзя недооценивать. Как правило, на его основе поисковая система формирует заголовок страницы, который пользователь видит на странице поисковой выдачи[21]. Именно от него во многом зависит, какую позицию займет страница и перейдет ли на нее пользователь.\u003c/p\u003e\u003cp\u003eПри заполнении тега нужно придерживаться следующих рекомендаций:\u003c/p\u003e\u003cp\u003e1. \u003ctitle\u003e должен отражать содержимое страницы.\u003c/p\u003e\u003cp\u003e2. В теле тега \u003ctitle\u003e должно присутствовать точное вхождение основного запроса, под который оптимизирована страница. Также в него можно включить вхождения второстепенных запросов и полезную информацию для пользователей (бренд, отзывы, цена, скидки, телефон, сведения о доставке). При этом нужно избегать переоптимизации (чрезмерного употребления) по главным и второстепенным ключевым словам.\u003c/p\u003e\u003cp\u003e3. Ключевые слова лучше размещать ближе к началу заголовка. Это влияет как на позицию в выдаче, так и на CTR (на такой заголовок больше кликают).\u003c/p\u003e\u003cp\u003e4. Текст заголовка должен быть осмысленным и привлекательным для клика. Нужно помнить, что именно его видит пользователь в результатах выдачи.\u003c/p\u003e\u003cp\u003e5. Весь заголовок рекомендуется вмещать в 70 символов, так как есть вероятность, что большее количество текста пользователь просто не увидит из-за ограничений верстки на странице выдачи поисковых систем. Приблизительно это 1–2 небольших словосочетания. Ограничениями можно пренебречь, чтобы разместить действительно важную для пользователей информацию (есть вероятность, что поисковая система покажет эту часть заголовка при вводе пользователем соответствующего запроса). При этом нужно помнить, что чем больше слов в \u003ctitle\u003e, тем меньше вес у каждого слова, поэтому чем заголовок содержательнее и короче, тем лучше.\u003c/p\u003e\u003cp\u003e6. Необходимо проанализировать заголовки успешных конкурентов, которые уже присутствуют в выдаче по нужным ключевым словам. Это не только поможет определить оптимальную длину заголовка, но и подскажет, какую информацию стоит в нем разместить.\u003c/p\u003e\u003cp\u003e7. \u003ctitle\u003e должен быть уникальным для всех страниц в пределах одного сайта.\u003c/p\u003e\u003cp\u003eДля больших сайтов часто кажется слишком трудоемким заполнение тега заголовка для всех страниц в ручном режиме. Зачастую это иллюзорное впечатление: объем усилий оказывается не таким уж большим и с лихвой окупается полученным эффектом.\u003c/p\u003e\u003cp\u003eНо если ручной режим представляется нецелесообразным, можно сгенерировать метатеги по шаблону. Подробнее мы поговорим об этом ниже.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eМетатег \u003cdescription\u003e (описание страницы)\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eМетатег \u003cdescription\u003e[22] описывает содержимое веб-страницы. Он также очень важен, так как на его основе поисковые системы зачастую формируют сниппеты, и, следовательно, от его качества напрямую зависит популярность сайта.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eСниппет – это небольшой фрагмент текста, который мы видим на странице поисковой выдачи вместе со ссылкой на сайт. Сниппеты напрямую влияют на кликабельность, и их оптимизации посвящен отдельный раздел в этой книге.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eПри формировании содержимого метатега \u003c description\u003e необходимо выполнять следующие рекомендации:\u003c/p\u003e\u003cp\u003e1. В теле \u003c description\u003e должно присутствовать точное вхождение основного запроса, под который оптимизирована страница. Также в него можно включить: вхождения второстепенных запросов и полезную информацию для пользователей (бренд, отзывы, цена, скидки, телефон, инфо о доставке и прочее). При этом нужно избегать переоптимизации (чрезмерного употребления) по главным и второстепенным ключевым словам.\u003c/p\u003e\u003cp\u003e2. Текст должен содержать призыв к действию и быть привлекательным для клика.\u003c/p\u003e\u003cp\u003e3. Желательно делать основное содержимое \u003c description \u003e короче 160 символов. Но нужно учитывать, что количество символов, которые выводятся в сниппете на странице с результатами поиска, может в любой момент измениться. Поэтому текст описания может быть и более 160 символов. Главное, чтобы это была полезная и нужная для пользователей информация. 160 символов – это 2–4 небольших предложения. Допускается, когда эти предложения взяты из текста на странице (желательно из верхней его части). Это почти гарантированно приведет к тому, что сниппет будет формироваться поисковыми системами именно на основе содержимого \u003cdescription\u003e.\u003c/p\u003e\u003cp\u003e4. \u003cdescription\u003e должен присутствовать на всех страницах и быть уникальным в пределах сайта.\u003c/p\u003e\u003cp\u003e5. Хорошим приемом повышения кликабельности сайта на странице поисковой выдачи может быть вставка в описании специальных символов и значков (самолет, телефон, решетка и прочее). О том как это сделать, можно легко найти информацию в Сети.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eШаблонизация\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eДля больших веб-проектов актуальна проблема ручного заполнения метатегов на всех страницах. Этих страниц просто слишком много, хотя выше мы отмечали, что часто эта проблема надуманная: на заполнение метатегов понадобится не так уж много времени, а затраченные усилия с лихвой окупятся хорошими позициями в поисковых системах.\u003c/p\u003e\u003cp\u003eНо если вопрос стоит остро, на помощь придут автоматические скрипты и конкатенация.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eКонкатенация – операция склеивания объектов линейной структуры, обычно строк. Например, конкатенация слов «микро» и «мир» даст слово «микромир»[23].\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eЗаниматься написанием скриптов должны программисты, это технический вопрос. Важнее другой момент: как составить тексты для заголовков и описаний?\u003c/p\u003e\u003cp\u003eУниверсальных рецептов нет, но важно понимать, что схема конкатенации – это составление шаблонов для определенных видов контента, где на место свободных полей можно подставить конкретные значения с каждой страницы.\u003c/p\u003e\u003cp\u003eДопустим, нужно заполнить метатеги для большого количества продуктовых страниц на сайте интернет-магазина парфюмерии. Для начала необходимо определить, как пользователи движутся по сайту. Пусть это происходит так: главная – категория – продукт. Эти три переменные необходимо заполнить.\u003c/p\u003e\u003cp\u003eДалее определяются дополнительные параметры и слова, которые важны для пользователей. Для этого необходимо проанализировать хвост низкочастотных запросов, который возникает при проверке основного запроса. Например, вот что мы видим при проверке в сервисе Яндекс. Wordstat[24] категории «женские духи»:\u003c/p\u003e\u003cbr/\u003e\u003cdiv style=\"text-align: center\"\u003e\u003cimg src=\"/img/58535581/i_002.png\"\u003e\u003c/img\u003e\u003c/div\u003e\u003cbr/\u003e\u003cp\u003eАнализируем таблицу и выбираем то, что волнует покупателей женских духов (цена, фото, отзывы, купить…).\u003c/p\u003e\u003cp\u003eПереходим к построению шаблона заголовка. Например, для страницы с товаром он мог бы быть таким:\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cem\u003e{название категории} {название товара} – купить в {название магазина}. Цена от {цена} р., фото, отзывы, доставка.\u003c/em\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eПосле подстановки всех переменных получим:\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cem\u003eЖенские духи Dia Woman – купить в магазине Beauty. Цена от 17 800 р., фото, отзывы, доставка.\u003c/em\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eС мета-описанием аналогично. Если на страницах сайта есть подробное описание товара – можно планировать схемы детальнее, включать больше параметров и полезной для пользователей информации.\u003c/p\u003e\u003cp\u003eРекомендуется делать схемы для каждого раздела сайта. Чем детальнее их проработать, тем лучше, хотя стоит помнить о балансе затрат и полученных результатов.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eМетатег \u003ckeywords\u003e (ключевые слова)\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eНа заре развития поисковых систем появилась красивая, но наивная идея о том, что веб-мастера будут сами подсказывать поисковым системам те ключевые слова, которым релевантна та или иная веб-страница.\u003c/p\u003e\u003cp\u003eДля реализации этой теории ввели метатег \u003ckeywords \u003e, слова из которого имели серьезное значение при ранжировании документов.\u003c/p\u003e\u003cp\u003eЧто произошло дальше, догадаться нетрудно. Веб-мастера и специалисты по продвижению начали запихивать в \u003ckeywords\u003e все ключевые слова, по которым они хотели продвинуть сайт в результатах поиска. На релевантность никто не обращал внимания: зачем эти тонкости, когда можно было в короткий срок продвинуться по всем нужным коммерческим запросам?\u003c/p\u003e\u003cp\u003eМасштаб злоупотреблений достиг такой величины, что поисковые системы вынуждены были свести влияние \u003ckeywords\u003e буквально до нуля, поэтому на данный момент заполнять этот тег бессмысленно.\u003c/p\u003e\u003cp\u003eЕсли тег все-таки заполняется содержимым (так сказать, на всякий случай), необходимо соблюдать простые правила. Содержимое \u003ckeywords\u003e должно быть уникальным в пределах сайта, все ключевые слова должны быть релевантны странице, и их должно быть немного.\u003c/p\u003e\u003cp\u003eВ противном случае поисковые системы могут воспринять содержимое метатега \u003ckeywords\u003e как веб-спам и понизить сайт в результатах поиска.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eМетатег \u003crobots\u003e\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003eДанный метатег[25] позволяет контролировать сканирование и индексирование сайта поисковыми системами. По умолчанию задаются значения «index, follow» (то же самое, что «all») – дополнительно их прописывать не нужно. Разные поисковики распознают разные значения тега, но универсальными являются два:\u003c/p\u003e\u003cp\u003e– noindex: запрещает индексирование страницы;\u003c/p\u003e\u003cp\u003e– nofollow: запрещает роботу переходить по ссылкам с этой страницы.\u003c/p\u003e\u003cp\u003eЭти значения можно комбинировать, разделяя их запятыми. Например, комбинация\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e\u003cem\u003e\u003cmeta name=«robots» content=«noindex, follow»/\u003e \u003c/em\u003eзаставит робота поисковиков перейти по всем ссылкам на странице, но не индексировать ее содержимое.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eНужно отметить, что использование данного метатега, как правило, свидетельствует о проблемах со структурой сайта. С такими проблемами еще можно мириться на огромном портале, где регулярно возникают трудноустранимые с программной точки зрения «тупики» (страницы, представляющие мало интереса для пользователей и возникающие вследствие несовершенства архитектуры сайта). Но для небольшого проекта это недопустимо.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eДанное правило является частным случаем другого, более универсального, принципа, который звучит так: «Пользователи и поисковые системы должны видеть одинаковый контент». Если на сайте возникают страницы, содержимое которых нецелесообразно индексировать поисковому роботу, необходимо задуматься о том, а стоит ли их «индексировать» пользователям сайта и какое впечатление такие страницы на них произведут? Не проще ли просто их убрать?\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eОстается добавить, что использование данного тега для управления индексированием менее предпочтительно по сравнению с правильным формированием файла robots.txt (о нем мы поговорим позже).\u003c/p\u003e\u003c/section\u003e\u003csection\u003e\u003cp\u003e10. Поиск и устранение дублей\u003c/p\u003e\u003cp\u003eИдентичный (дублированный) контент на разных страницах сайта может привести к ошибкам индексации и даже свести на нет все усилия по продвижению. Чем опасны дубликаты и почему от них стоит избавляться?\u003c/p\u003e\u003cp\u003eВо-первых, на дубли уходит часть статического веса, а неправильное распределение веса ухудшает ранжирование целевых разделов сайта.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eСтатический вес – это один из важных параметров, влияющих на продвижение сайта в целом и конкретной страницы в частности. Вес определяется количеством и качеством ссылающихся на страницу документов (в основном, html-страниц, но учитываются еще pdf и doc-файлы, а также другие распознаваемые поисковиками документы с гиперссылками).\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eВо-вторых, на дубли тратится часть драгоценного краулингового бюджета. Особенно остро эта проблема стоит для крупных информационных и e\u003commerce (онлайн-торговля) проектов.\u003c/p\u003e\u003cbr/\u003e\u003cp\u003e✍ \u003cstrong\u003e\u003cem\u003eНа заметку\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eВ Интернете триллионы веб-страниц, и каждый день появляются сотни миллионов новых веб-страниц. В этой связи перед поисковыми системами стоит серьезная проблема: как успевать обходить, скачивать и ранжировать все это огромное хозяйство.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eДля обхода страниц используются роботы. Поисковый робот («веб-паук», «краулер») – программа, являющаяся составной частью поисковой системы и предназначенная для перебора страниц Интернета и занесения информации о них в базу данных. Очевидно, что каким бы мощным и быстрым не был краулер, скачать единовременно все обновления со всех сайтов у него не получится.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eИз-за этого паук скачивает сайты постепенно, небольшими «порциями», например, по нескольку десятков или сотен страниц в день. Размер этой порции на профессиональном сленге специалистов по продвижению и называется краулинговым бюджетом.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eПо сути, бюджет – это то количество страниц сайта, которое обновится в базе поисковика за определенный период. Чем больше бюджет, тем лучше, так как при большом бюджете можно быть уверенным, что все изменения на сайте быстро попадут в базу данных поисковика.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eКраулинговый бюджет зависит от многих факторов (уровня траста, размера сайта, частоты обновления, тематики, региона) и рассчитывается по специальному алгоритму. Самостоятельно увеличить его на нужную величину довольно сложно.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eПоэтому при продвижении сайта стоит обратная задача: вместить в имеющийся бюджет все изменения, которые произошли на сайте. Для этого применяется комплекс мер, от удаления дублей до управления индексацией с помощью служебных файлов. Все эти меры мы последовательно рассмотрим на страницах данной книги.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cp\u003e\u003cstrong\u003e\u003cem\u003eОстается добавить, что получить представление о краулинговом бюджете для продвигаемого сайта можно с помощью статистики, которую предоставляют поисковые системы в панелях для веб-мастеров, или анализа логов сервера.\u003c/em\u003e\u003c/strong\u003e\u003c/p\u003e\u003cbr/\u003e\u003cp\u003eВ-третьих, из-за ошибок в алгоритмах поисковых систем после очередного обновления поискового индекса дубль может заменить в выдаче целевую страницу. Как правило, после этого позиции сайта в выдаче существенно ухудшаются.\u003c/p\u003e\u003cp\u003eНо даже если этого не произойдет, может возникнуть ряд негативных эффектов: например, падение конверсии[26] и накопление поведенческой статистики на неправильной странице. Целевая страница при этом может вообще пропасть из индекса (в самом деле, зачем держать в базе несколько копий одной и той же страницы?).\u003c/p\u003e"},"reviews":{"total_count":0,"page":1,"page_size":5,"data":[]},"pageNumber":"2","_sentryTraceData":"1b73c3afb9d145d8a5241e48b62030d7-a1c7109f89be3cfb-1","_sentryBaggage":"sentry-environment=production,sentry-release=xTuKJTr1mhPWjvl64BfSu,sentry-public_key=849376fd4c2a49839df4f34bdf204e56,sentry-trace_id=1b73c3afb9d145d8a5241e48b62030d7"},"__N_SSP":true},"page":"/online/[id]/[pageNumber]","query":{"id":"529375","pageNumber":"2"},"buildId":"xTuKJTr1mhPWjvl64BfSu","isFallback":false,"gssp":true,"scriptLoader":[]}</script></body></html>
