Центр для веб-майстрів Google

Поширені запитання служби "Інструменти для веб-майстрів"

Проблеми із сайтом і результатами пошуку

  1. Отримання допомоги
  2. Якщо ваш сайт не з'являється в результатах пошуку Google
  3. Проблемні сайти
  4. Запит на повторний розгляд вашого сайту
  5. Якщо ваш сайт "зламано"

Використання Інструментів для веб-майстрів

  1. Підтвердження вашого сайту в Інструментах для веб-майстрів
  2. Створення та подання файлів Sitemap

Оптимізація вашого сайту

  1. Geotargeting
  2. Основний домен (з частиною www або без неї)
  3. Блокування показу вмісту в результатах пошуку Google
  4. Визначення канонічної версії вашої сторінки

Проблеми із сайтом і результатами пошуку

1. Отримання допомоги

Маєте запитання щодо Інструментів для веб-майстрів? Можливо, хтось уже надав потрібну вам інформацію на нашому довідковому форумі.

У наших Інструкціях для веб-майстрів містяться вказівки щодо створення "про-гуглівських" сайтів, а в Посібнику з оптимізації пошукових систем для початківців наведено детальну інформацію щодо покращення відображення сайту в пошукових системах.

2. Якщо ваш сайт не з'являється в результатах пошуку Google

Можливо, робот Googlebot заблокований хостером вашого сайту?

Якщо ваш сайт не з'являється в результатах пошуку, можна перевірити його наявність в індексі Google, задавши пошук свого домену за допомогою атрибута site:, наприклад: site:example.com. Якщо ваш сайт не вказано в результатах – його не було проіндексовано системою Google. Це може трапитися випадково, якщо хостер сайту блокує робота Googlebot (програму Google для сканування мережі). Якщо вас сайт не проіндексовано й ви підозрюєте, що робота Googlebot заблоковано, радимо звернутися до хостера свого сайту та подати запит на підтвердження робота Googlebot за допомогою зворотного пошуку в службі DNS: спочатку за іменем у домені googlebot.com, а потім за допомогою відповідного перегляду DNS-до-IP, використовуючи це ім'я з googlebot.com.

Наприклад:

> host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.

> host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

З вашим сайтом виникають проблеми?

Google прагне надавати користувачам найкращі та найвідповідніші результати. Щоб забезпечити своєму сайту високі позиції на сторінках результатів пошуку, важливо створити системі Google належні умови для сканування та індексування вашого сайту й розмістити на сайті корисний і оригінальний вміст. Наша сторінка подання сайту на повторний розгляд пропонує декілька вдалих прийомів, які допоможуть вам уникнути поширених помилок і підвищити рейтинг свого сайту.

Проте, деякі веб-майстри використовують заборонені методи, які можуть призвести до повного видалення сайту з індексу Google або до іншого покарання. Якщо до сайту застосовано якесь покарання, він може більше не з'являтися в результатах на Google.com або будь-яких партнерських сайтах Google. Нижче перелічено деякі такі методи.

Якщо ваш сайт не з'являється в результатах пошуку, перегляньте його й усуньте вказані проблеми. Докладнішу інформацію можна отримати на сторінці Інструкції для веб-майстрів. Після того як ви внесли зміни та переконались, що сайт більше не суперечить нашим інструкціям, подайте його на повторний розгляд.

Прихований текст і посилання

Через прихований текст або посилання у вмісті ваш сайт може сприйматися як ненадійний, оскільки інформація, що подається пошуковим системам, відрізняється від тієї, яку бачать відвідувачі. Текст (як-от надмірна кількість ключових слів) можна приховати декількома способами, включаючи:

  • Використання білого тексту на білому фоні
  • Розміщення тексту за зображенням
  • Використання вкладених таблиць стилів для приховання тексту
  • Вибір нульового розміру шрифту

Приховані посилання – це посилання, призначені для сканування роботом Googlebot, але нечитабельні для людей, оскільки:

  • таке посилання містить прихований текст (наприклад, колір тексту та фону ідентичні);
  • за допомогою вкладених таблиць стилів створено мініатюрні гіперпосилання, висотою в один піксель;
  • таке посилання ховається за малим символом – наприклад, дефіс посередині абзацу.

Якщо виявиться, що ваш сайт містить прихований текст і посилання оманливого змісту, його може бути видалено з індексу Google, і він не з'являтиметься на сторінках результатів пошуку. Під час перевірки свого сайту на наявність прихованого тексту чи посилань зверніть увагу на будь-які елементи, які важко помітити відвідувачам вашого сайту. Чи призначений будь-який текст або посилання лише для систем пошуку, а не відвідувачів?

Якщо ви використовуєте текст для опису елементів, недоступних для пошукових систем (наприклад, Javascript, зображення чи Flash-файли), пам'ятайте, що багато відвідувачів, які користуються програмами для читання з екрана, переглядачами для мобільних пристроїв, переглядачами без допоміжних модулів або нешвидкісним з'єднанням, також не зможуть побачити цей вміст. Використання описового тексту для цих елементів покращить доступність вашого сайту. Перевірити доступність можна, вимкнувши Javascript, Flash-файли та зображення у своєму веб-переглядачі чи за допомогою лише текстового переглядача, як-от Lynx. Деякі поради щодо покращення доступності вашого сайту.

  • Зображення: для введення описового тексту використовуйте атрибут "alt". Окрім того, ми рекомендуємо використовувати читабельний заголовок і описовий текст навколо зображення.
  • Javascript: розмістіть вміст із Javascript у тег "no script". Якщо ви користуєтеся цим методом, переконайтесь, що вміст точно відповідає вмісту Javascript і відвідувачі, у чиїх веб-переглядачах не активовано Javascript, бачать його.
  • Відео: включіть описовий текст про відео в HTML. Розгляньте також можливість надання транскриптів.

Якщо ви все ж знайдете прихований текст або посилання на своєму сайті, видаліть їх чи зробіть видимими, якщо вони стосуються відвідувачів вашого сайту.

На початок

Маскування, приховані переадресації Javascript і вхідні сторінки (дорвеї)

Маскування

Маскування – практика представлення користувачам і пошуковим системам різного вмісту чи різних URL-адрес. Надання різних, залежних від користувацького агента, результатів може призвести до визнання вашого сайту як оманливого та його видалення з індексу Google.

Декілька прикладів маскування:

  • Надання пошуковим системам сторінки HTML-тексту й одночасне показування користувачам сторінки із зображеннями чи Flash-файлами.
  • Подання різного вмісту для пошукових систем і користувачів.

Якщо на вашому сайті містяться елементи, недоступні для сканування пошуковими системами (як-от файли мультимедіа, інші ніж Flash, JavaScript або зображення), подавати прихований вміст пошуковим системам не варто. Натомість подумайте про відвідувачів вашого сайту, які також навряд чи зможуть побачити ці елементи. Наприклад:

  • Введіть текст "alt", який описує зображення для відвідувачів, у чиїх переглядачах вимкнено зображення чи програми для читання з екрана.
  • Надайте текстовий вміст JavaScript у тег "noscript".

Переконайтеся, що в обох елементах надається той самий вміст (наприклад, у JavaScript подається той самий текст, що й у тезі "noscript"). Включення суттєво іншого вмісту в альтернативному елементі може привести до вживання Google заходів щодо сайту.

Оманливі переадресації JavaScript

Коли робот Googlebot індексує сторінку, що містить JavaScript, її буде проіндексовано, проте будь-які посилання, приховані у самому JavaScript, не переглядатимуться та не індексуватимуться. Використання JavaScript – повністю допустима практика в мережі. Натомість використання JavaScript із метою введення в оману пошукових систем забороняється. Наприклад, розміщення різного тексту в JavaScript і тегах "noscript" суперечить нашим інструкціям для веб-майстрів, оскільки при цьому відображається різний вміст для користувачів (які бачать текст, базований на JavaScript) і пошукових систем (які бачать текст тегів "no script"). До того ж, це суперечить інструкціям для веб-майстрів щодо вставлення в JavaScript посилання, яке переадресовує користувача на іншу сторінку з метою демонстрації йому сторінки, що відрізняється від тієї, яку бачить пошукова система. Якщо в JavaScript вставлено посилання-переадресацію, пошукова система індексує оригінальну сторінку та не відслідковує посилання, тоді як користувачі потрапляють у місце переадресації. Як і маскування, ця практика є оманливою, оскільки користувачам і роботу Googlebot показується різний вміст, що може привести користувача туди, куди він не мав наміру потрапити.

Зауважте, що розміщення посилань у JavaScript саме по собі не є оманливим. Перевіряючи сценарій JavaScript на своєму сайті на його відповідність нашим інструкціям для веб-майстрів, обміркуйте його мету.

Пам'ятайте: оскільки пошукові системи загалом не мають доступу до вмісту JavaScript, допустимі посилання в JavaScript, швидше за все, також будуть для них недосяжними (як і для користувачів, у чиїх переглядачах не активовано Javascript). Натомість, можна не включати посилання в JavaScript або копіювати їх у теги "noscript".

Вхідні сторінки (дорвеї)

Вхідні сторінки (дорвеї) – це переважно великі групи низькоякісних сторінок, кожну з яких оптимізовано для окремого ключового слова чи фрази. У багатьох випадках вхідні сторінки створюються для включення до рейтингу за певною фразою, після чого користувачі переводяться в єдине місце призначення.

Незалежно від того, чи розміщені вони на багатьох доменах чи в межах одного домену, вхідні сторінки дратують користувачів, а також суперечать нашим інструкціям для веб-майстрів.

Мета Google – надавати користувачам найкорисніші та найвідповідніші результати пошуку. Тому ми не схвалюємо методи, спрямовані на маніпулювання пошуковими системами та введення в оману користувачів через спрямування їх на сайти, які відрізняються від вибраних ними та надають вміст лише заради пошукових систем. Google може вживати заходів щодо сайтів із вхідними сторінками чи інших сайтів, які використовують таку оманливу практику, аж до їх видалення з індексу Google.

На початок

Схеми посилань

Рейтинг вашого сайту в результатах пошуку Google частково залежить від аналізу сайтів, які посилаються на вас. Кількість, якість і відповідність посилань впливає на ваш рейтинг. Сайти, які посилаються на вас, можуть надавати контекст про тему вашого сайту та показувати ступінь його якості й популярності. Проте, деякі веб-майстри використовують схеми обміну посиланнями та створення партнерських сторінок лише заради перехресних зв'язків, без урахування якості посилань, джерел і впливу цих зв'язків на їхні сайти в довготривалому періоді. Це є порушенням інструкцій Google для веб-майстрів і може негативно вплинути на рейтинг вашого сайту в результатах пошуку. Нижче подаються приклади схем посилань.

  • Посилання, призначені для маніпулювання рейтингом PageRank
  • Посилання на веб-спамерів або шкідливі мережеві середовища
  • Надмірні взаємні посилання чи надмірний обмін посиланнями ("Створи посилання на мене, а створю на тебе".)
  • Купівля чи продаж посилань, які ввійшли в рейтинг PageRank

Найпростіший спосіб для створення іншими сайтами відповідних посилань на ваш сайт – створити унікальний і суттєвий вміст, який зможе швидко завоювати популярність в Інтернет-спільноті. Чим корисніший вміст вашого сайту, тим імовірніше, що хтось вважатиме його важливим для своїх читачів і створить посилання на нього. Перед тим, як вирішити щось, спитайте себе: чи буде це корисним для відвідувачів моїх сторінок?

Значення має не лише кількість посилань, націлених на ваш сайт, а й якість і відповідність таких посилань. Створення якісного вмісту приносить свої плоди: посилання переважно є редакторськими голосами, поданими на вибір, а тісна спільнота блогерів – чудове місце, щоб викликати зацікавлення.

На початок

Автоматизовані запити

Загальні положення та умови Google не дозволяють надсилати в систему автоматизовані запити будь-якого типу без попереднього чіткого дозволу Google. Надсилання автоматизованих запитів поглинає ресурси та полягає у використанні будь-якого програмного забезпечення (як-от WebPosition GoldTM) для надсилання автоматизованих запитів у Google, щоб визначити, яке місце займає веб-сайт або веб-сторінка в результатах пошуку Google на різноманітні запити.

На початок

Наповнення ключовими словами

"Наповнення ключовими словами" означає практику заповнення веб-сторінки ключовими словами, з наміром маніпулювати рейтингом сайту в результатах пошуку Google. Наповнення сторінок ключовими словами викликає, як результат, негативні враження в користувачів і може зашкодити рейтингу вашого сайту. Сконцентруйтесь на створенні корисного, багатого на інформацію вмісту, що застосовує ключові слова належним чином і в контексті.

Щоб вирішити цю проблему, перегляньте, чи не містить ваш сайт непотрібних ключових слів. Як правило, це переліки чи окремі абзаци ключових слів, які часто повторюються навмання. Ретельно перевіряйте, оскільки часто ключові слова можуть бути у формі прихованого тексту чи ховатись за тегами "title" або атрибутами "alt".

На початок

Дубльований вміст

Дубльований вміст переважно стосується самостійних фрагментів вмісту одного чи декількох доменів, який повністю збігається чи є дуже подібним до іншого вмісту. Здебільшого, це не є обманливим. Приклади неумисного дубльованого вмісту подано нижче.

  • Дискусійні форуми, що можуть генерувати як звичайні, так і порожні сторінки, призначені для мобільних пристроїв
  • Елементи пам'яті, показані чи зв'язані посиланнями через численні окремі URL-адреси
  • Версії веб-сторінок "лише для друку"

Якщо ваш сайт містить сторінки із здебільшого ідентичним вмістом, існує декілька способів, за допомогою яких можна вказати системі Google потрібну URL-адресу. (Це називається "канонізацією".)

Проте, в окремих випадках вміст навмисне дублюється різними доменами, з наміром маніпулювати рейтингами пошукових систем або отримати більше трафіку. Такі оманливі дії можуть викликати погане враження в користувачів, коли відвідувач бачить майже один і той самий вміст, який повторюється в декількох результатах пошуку.

Google робить усе можливе для індексування та відображення сторінок із різною інформацією. Таке фільтрування означає, наприклад, таке: якщо ваш сайт містить дві версії кожної статті – "звичайну" та "для друку" – і жодну з них не блоковано файлом robots.txt або мета-тегом "noindex", ми виберемо одну з них для внесення до переліку. У рідкісних випадках, коли Google вважає, що дубльований вміст показано з метою маніпулювання нашими рейтингами та обманювання користувачів, в індексування та рейтинг відповідних сайтів може бути внесено певні поправки. У результаті, рейтинг такого сайту може постраждати, або ж сайт може бути взагалі видалено з індексу Google і тоді він уже не з'являтиметься в результатах пошуку.

Існують певні заходи, до яких можна вдатися, щоб проактивно вирішити питання дубльованого вмісту та мати певність, що відвідувачі побачать призначений їм вміст.

  • Подумайте про блокування сторінок від індексування: замість того, щоб дозволяти алгоритмам Google самим визначати "найкращу" версію документа, можна скерувати нас на потрібну вам версію. Наприклад, якщо ви не хочете, щоб ми індексували статті вашого сайту у версіях "для друку", заблокуйте відповідні каталоги чи скористайтесь регулярними виразами у вашому файлі robots.txt.
  • Скористайтеся переадресаціями 301: реструктуризувавши свій сайт, використайте переадресації 301 ("RedirectPermanent") у своєму файлі .htaccess для акуратної переадресації користувачів, робота Googlebot та інших павуків. (В Apache ви можете зробити це в .htaccess файлі, в IIS – через адміністративну консоль.)
  • Будьте послідовними: намагайтесь, щоб ваші внутрішні посилання були сумісними. Наприклад, не давайте посилання на http://www.example.com/page/ і http://www.example.com/page та http://www.example.com/page/index.htm.
  • Використовуйте домени вищого рівня: для того, щоб ми застосували найдоречнішу версію документа, використовуйте, де можливо, домени вищого рівня для обробки вмісту, характерного для певної країни. Нам буде легше зрозуміти, що www.example.de має вміст, сфокусований на Німеччину, у порівнянні, наприклад, із www.example.com/de або de.example.com.
  • Ретельно синдикуйте: якщо ви синдикуєте свій вміст на інші сайти, Google завжди обере версію, яка, на нашу думку, найбільше відповідає кожному з поданих користувачем запитів, що може не збігатися з потрібною вам версією. Однак, варто переконатись, що кожен сайт, на який синдиковано ваш вміст, містить зворотне посилання на вашу вихідну статтю. Ви також можете попросити тих, хто використовує ваші синдиковані матеріали, заблокувати певну версію на своїх сайтах у файлі robots.txt.
  • Використовуйте Інструменти для веб-майстрів, щоб повідомити нас, якому способу індексації свого сайту ви надаєте перевагу: ви можете повідомити Google свій основний домен (наприклад www.example.com або http://example.com).
  • Мінімізуйте повтори шаблонів: наприклад, замість того, щоб вставляти багатослівний текст про авторське право внизу кожної сторінки, розмістіть дуже короткий виклад і дайте посилання на сторінку з детальнішою інформацією.
  • Уникайте випускових заглушок: користувачам не подобається натрапляти на "порожні" сторінки, а тому уникайте, де можливо, символів-заповнювачів. Наприклад, не публікуйте сторінки, які ще не наповнено реальним вмістом. Якщо ви все ж створюєте сторінки із заповнювачами, використовуйте файл robots.txt, щоб блокувати їх від сканування.
  • Вивчіть систему керування своїм вмістом: переконайтесь, що ви знаєтесь на тому, яким чином вміст відображається на вашому веб-сайті. Блоги, форуми та пов'язані з ними системи часто подають один і той же вміст у різних форматах. Наприклад, елемент блогу може з'являтись на головній сторінці блогу, на архівній сторінці, на сторінці інших елементів із такими ж позначками.
  • Мінімізуйте подібний вміст: якщо ви маєте багато подібних сторінок, подумайте про доповнення кожної сторінки чи об'єднання їх в одну. Наприклад, якщо ви маєте туристичний сайт з окремими сторінками для двох міст, проте з однаковим наповненням вмісту, можна об'єднати ці сторінки в одну, яка розповідатиме про обидва міста, чи доповнити кожну сторінку так, щоб вона містила унікальну інформацію про кожне місто.

Дубльований вміст сайту – ще не підстава для заходів проти нього, якщо тільки не буде виявлено оманливі наміри такого дубльованого вмісту та його спробу маніпулювання результатами пошукових систем. Якщо ваш сайт містить дубльований вміст і ви не дотримувались вищевказаних порад, ми вчинимо правильно, вибравши версію вмісту для показу в наших результатах пошуку.

Якщо ви виявили, що інший сайт дублює ваш вміст, "позичивши" (незаконно привласнивши та знову опублікувавши) його, це навряд чи негативно вплине на рейтинг вашого сайту на сторінках результатів пошуку Google. Якщо вам все ж трапиться такий неприємний випадок, можна подати позовну заяву DMCA щодо права власності на вміст і вимагати видалення іншого сайту з індексу Google.

На початок

Незначна кількість або відсутність оригінального вмісту

Один із найважливіших кроків у покращенні рейтингу вашого сайту в результатах пошуку Google – забезпечити його чималим інформаційним наповненням, яке включає відповідні та доречно вжиті ключові слова, що вказують на тему вмісту сайту.

Однак, деякі веб-майстри намагаються покращити рейтинг своїх сторінок і залучити відвідувачів, створюючи багатослівні сторінки, які містять лише незначну кількість оригінального вмісту або взагалі не мають такого. Google вживатиме заходів проти доменів, які намагаються підвищити свій рейтинг, просто показуючи "позичені" чи іншим чином автогенеровані сторінки, які не становлять жодної цінності для користувачів. Приклади подано нижче.

  • Слабкі партнерські сайти: такі сайти отримують доходи за клік (pay-per-click, PPC) за рахунок скерування відвідувачів на сайти партнерських програм, надаючи користувачеві незначну додаткову інформацію чи послуги, або й узагалі не надаючи їх. Такі сайти переважно не мають жодного оригінального вмісту та можуть бути лише сайтами-близнюками чи шаблонами без будь-якого унікального наповнення.
  • Вхідні сторінки (дорвеї): сторінки, створені лише для пошукових систем.
  • Автогенерований вміст: програмно генерований вміст. Він часто містить довільні абзаци тексту, які не мають жодного змісту для читача, проте включають ключові слова пошуку.
  • "Позичений" вміст: деякі веб-майстри використовують вміст, взятий з інших сайтів, які мають кращу репутацію, вважаючи, що збільшення обсягу веб-сторінок за допомогою довільного та недоречного вмісту – вдала стратегія на тривалий період. Лише "позичений" вміст, навіть із високоякісного джерела, не надасть користувачам жодної додаткової інформації, якщо до нього на вашому сайті не додано корисних послуг або власного вмісту. Варто затратити час на створення оригінального вмісту – це виділить ваш сайт із-поміж інших. Відвідувачі повернуться до вас, а результати пошуку будуть корисними.

Ваш сайт може бути партнерським, доки ви не створите щось значуще для своїх користувачів і не нагромадите цінний вміст, що дасть користувачеві підставу відвідати ваш сайт. Ви можете вести, наприклад, огляди продуктів, рейтинги та порівняння продуктів.

На початок

Парковані домени

Паркований (попередньо зареєстрований) домен – це сторінка-заповнювач для домену, веб-сайт якого ще не створено. Здебільшого це зовсім законна дія – наприклад, поки створюється сайт, веб-майстер може розмістити повідомлення "У процесі розробки".

Однак, деякі веб-майстри реєструють домени та паркують їх із метою заробити на цьому гроші. Це робиться, головним чином, шляхом наповнення сторінок рекламою, з надією отримати доходи за клік (pay-per-click, PPC).

Такі парковані сторінки не є корисними для шукачів, а тому ми здебільшого вилучаємо їх із наших результатів пошуку. Якщо ви володієте паркованими доменами, активуйте їх і наповніть корисним вмістом, щоб вони були придатними для індексування та відображення в результатах пошуку.

На початок

Оплачені посилання

Google, як і більшість інших пошукових систем, використовує посилання для визначення репутації. Рейтинг сайту в результатах пошуку Google частково базується на аналізі інших сайтів, які посилаються на нього. Аналіз посилань – дуже зручний спосіб визначення важливості сайту, що значно покращив якість пошуку в мережі. У такому рейтингу враховується як кількість, так і, що важливіше, якість посилань.

Однак, деякі оптимізатори систем пошуку (SEO) та веб-майстри застосовують практику купівлі-продажу посилань, включених у рейтинг PageRank, нехтуючи якістю посилань, джерелами та впливом таких дій на їхні сайти в довготривалому періоді. Купівля чи продаж посилань, включених у рейтинг PageRank, є порушенням інструкцій Google для веб-майстрів і може негативно вплинути на рейтинг сайту в результатах пошуку.

Не всі оплачені посилання є порушенням наших інструкцій. Купівля та продаж посилань – звичайне явище в монетизації веб-сайту, якщо це робиться з метою реклами, а не для маніпулювання результатами пошуку. Посилання, куплені для реклами, мають бути відповідно позначені. Це можна зробити різними способами, як-от:

  • додавши атрибут rel="nofollow" до тегу <a>
  • переадресувавши посилання на проміжну сторінку, заблоковану для пошукових систем у файлі robots.txt

Google робить усе можливе, щоб нейтралізувати посилання, призначені для маніпулювання результатами пошукових систем, надмірні обміни посиланнями та купівлю посилань, включених у рейтинг PageRank. Якщо вам трапився сайт, який купує чи продає посилання, включені в рейтинг PageRank, повідомте нас. Ми використаємо вашу інформацію для вдосконалення нашого алгоритму виявлення таких посилань.

На початок

3. Проблемні сайти

Якщо ви виявили в мережі інформацію, яку слід видалити (наприклад закриту інформацію, незаконний вміст або зламані посилання), скористайтесь такими рекомендаціями.

  • Якщо сайт є спамом, повідомте про це! Ми серйозно ставимося до спаму та вивчаємо повідомлення про його наявність. Про спам можна повідомити на адресу: https://www.google.com/webmasters/tools/spamreport. Ці повідомлення передаються безпосередньо нашій команді, яка займається веб-спамом, і використовуються для розробки масштабних заходів для боротьби зі спамом. Якщо ви ще не маєте облікового запису в службі "Інструменти для веб-майстрів", можна надіслати повідомлення про спам тут: http://www.google.com/contact/spamreport.html.

  • Якщо ви вважаєте, що якийсь сайт купує чи продає посилання, включені в рейтинг PageRank, повідомте нас. Купівля чи продаж посилань, включених у рейтинг PageRank, є порушенням інструкцій Google для веб-майстрів і може негативно вплинути на рейтинг сайту в результатах пошуку.

  • Якщо ви вважаєте, що певний вміст потрібно видалити з індексу Google, оскільки він порушує авторське право, подайте позовну заяву DMCA. На відміну від запитів на видалення спаму й особистої інформації, запит DMCA має подавати власник вмісту.

  • Якщо ви вважаєте, що сайт заражено шкідливими чи підозрілими програмами,повідомте нас про це для вжиття необхідних заходів.

  • Якщо вилучення вмісту не входить у жодну із зазначених категорій, але ви вважаєте, що його слід видалити, зв'яжіться з веб-майстром сайту. Тільки-но веб-майстер видалить сторінку чи змінить її вміст, результати пошуку Google відобразять таку зміну відразу після наступного сканування та індексування сайту.

  • У випадку внесення веб-майстром таких змін і потреби прискорити видалення кешованих копій або у випадку невнесення веб-майстром жодних змін і наявності на сторінці особистої, конфіденційної інформації подайте свій запит за допомогою інструмента видалення URL-адрес в Інструментах для веб-майстрів.

  • Щоб повідомити Google про підозру порушення авторських прав, дискредитацію чи інші порушення юридичного характеру, зв'яжіться з нами.

На початок

4. Запит на повторний розгляд вашого сайту

Якщо ваш сайт не з'являється в результатах пошуку Google, або ці результати гірші за попередні (хоча ви вважаєте, що він не порушує наші інструкції для веб-майстрів), зверніться до Google із запитом про повторний розгляд вашого сайту.

Окрім того, якщо ви нещодавно придбали домен, який, на вашу думку, міг порушувати наші інструкції до його придбання вами, можете скористатись формою запиту на повторний розгляд, щоб повідомити про придбання сайту та його відповідність нашим інструкціям. Запит на повторний розгляд вашого сайту.

На початок

5. Якщо ваш сайт "зламано"

Ми прагнемо зробити веб-пошук наших користувачів безпечним, для чого постійно працюємо над виявленням небезпечних сторінок і покращенням системи захисту наших користувачів. Створюючи переліки потенційно небезпечних сайтів, Google використовує автоматичні алгоритми та відгуки користувачів. До двох основних типів небезпечних сторінок у наших переліках відносяться сторінки, призначені для фішингу та поширення шкідливих програм. Ці переліки не можуть повністю захистити користувачів від усіх ризикованих веб-сайтів, до того ж завжди існує можливість помилкового зарахування безпечного сайту до ризикованих. Проте, ми регулярно оновлюємо переліки, щоб вони завжди були максимально актуальними.

Фішинг

Фішинг, або ж шахрайство (спуфінг) – це тип атаки, коли сторінка містить запит на отримання оманливим шляхом особистої чи фінансової інформації користувача. Докладніше про фішинг можна дізнатися на сайті Antiphishing.org.

Якщо ви вважаєте, що ми помилково додали до свого переліку сторінку, яка не є фішинговою, надішліть нам повідомлення про відсутність фішингу. Також повідомте нас, якщо знайдете фішингову сторінку, якої немає в нашому переліку.

Шкідливі програми

Шкідливі програми – це такий тип програмного забезпечення, який створюється для отримання оманливим шляхом особистої інформації користувачів і використання їхніх комп'ютерів для власної користі. Сторінки, призначені для поширення таких програм, містять шкідливий код, який може завантажуватися та встановлюватися на вашому комп'ютері без вашого відома. Докладніше про небезпечний веб-вміст, зокрема про віруси та інше шкідливе програмне забезпечення, а також про захист свого комп'ютера від нього – на сайті StopBadware.org.

Щоб перевірити, чи ваш сайт не ідентифіковано як такий, що містить або поширює шкідливе програмне забезпечення, спробуйте знайти його на панелі управління Інструментів для веб-майстрів. Інструменти для веб-майстрів. (Примітка: щоб отримати доступ до цієї інформації, необхідно підтвердити своє право власності на сайт). Також ми відсилаємо повідомлення веб-майстрам сайтів, які були вражені шкідливими програмами, на такі електронні адреси:

  • abuse@
  • admin@
  • administrator@
  • contact@
  • info@
  • postmaster@
  • support@
  • webmaster@

Ідентифікація сайту як шкідливого частково базується на рекомендаціях, запропонованих StopBadware.org. Проте, Google використовує власні критерії, процедури та інструменти для виявлення сайтів, які містять або поширюють шкідливе програмне забезпечення. Інколи шкідливий код додається на безпечні сайти третьою стороною. У цьому випадку ми також надсилаємо попередження. Якщо ви вважаєте, що ваш сайт було помилково ідентифіковано як шкідливий, або якщо ви внесли відповідні зміни, і тепер цей сайт не містить і не поширює шкідливі програми та є захищеним від включення в нього таких програм, надішліть запит на повторну перевірку свого сайту (див. нижче).

Запит на перегляд сайту щодо наявності шкідливих програм

Перевіривши свій сайт і впевнившись, що він не містить шкідливих програм, подайте запит на його перегляд. Зверніть увагу на те, що перед поданням запиту на перегляд сайту необхідно підтвердити своє право власності на нього.

  1. На домашній сторінці служби "Інструменти для веб-майстрів" виберіть потрібний сайт.
  2. У повідомленні Частини цього сайту можуть поширювати шкідливі програми натисніть Докладніше.
  3. Натисніть Запит на перегляд.

Якщо перегляд вашого сайту підтвердить, що він не містить і не поширює шкідливих програм, відмітку про шкідливість вашого сайту буде видалено з результатів пошуку.

На початок

Використання Інструментів для веб-майстрів

1. Додавання та підтвердження свого сайту в Інструментах для веб-майстрів

Додавання та підтвердження сайту

До свого облікового запису можна додати до 500 сайтів, включно із сайтами новин та для мобільних пристроїв. Ми попросимо вас підтвердити свій сайт. Це робиться для перевірки вашого права власності на сайт, до того, як надати вам певну інформацію про нього чи дозволити використовувати наші інструменти. Підтвердження жодним чином не впливає на рейтинг сторінок у PageRank або відображення сайту в результатах пошуку Google. (Також існують особливі вказівки для додавання блогів із Blogger і сайтів, створених із допомогою Google Sites.)

Якщо для створення блогів використовується Blogger, можна додавати та підтверджувати сайти за допомогою активації Інструментів для веб-майстрів безпосередньо на панелі управління Blogger.

Щоб додати та підтвердити сайт:

  1. Увійдіть в Інструменти Google для веб-майстрів за допомогою свого облікового запису Google.
  2. Натисніть кнопку Додати сайт і введіть URL-адресу сайту, який потрібно додати. Обов'язково вводьте повну URL-адресу, наприклад http://www.example.com/
  3. Натисніть Продовжити. Відкриється сторінка Підтвердження сайту.
  4. (Додатково) У полі Назва введіть назву вашого сайту (наприклад, Мій блог).
  5. Виберіть спосіб підтвердження.
    • Мета-тег: ми попросимо вас додати на домашню сторінку свого сайту мета-тег з унікальним значенням. Це найпростіше рішення, якщо редагувати HTML-файл вашої домашньої сторінки легше, ніж завантажувати нові файли. Окрім того, це рішення надає вам змогу легко підтверджувати свої сайти, створені за допомогою Google Sites.
    • HTML-файл: ми попросимо вас створити файл із певним іменем і завантажити його в певний каталог на своєму веб-сервері. Цей файл може бути порожнім. Google цікавить лише його місцезнаходження, а не вміст.

Які види сайтів можна додавати?

Ось перелік типів URL-адрес, які можна додавати як сайти:

  • example.com
  • www.example.com
  • bar.example.com
  • foo.bar.example.com
  • www.example.com/foo
  • www.example.com/foo/bar
  • foo.bar.example.com/catalog/dresses

На рівні сайту найкраще використовувати дані та звіти Інструментів для веб-майстрів. Наприклад, якщо ваш сайт www.example.com містить окремі частини для різних країн, рекомендується додати кожен із цих підсайтів або підпапок як окремий сайт. Наприклад, якщо на вашому туристичному сайті є окремі сторінки для Ірландії, Франції та Іспанії, можна додати такі сайти до свого облікового запису Інструментів для веб-майстрів:

  • http://www.example.com
  • http://www.example.com/france
  • http://www.example.com/ireland
  • http://www.example.com/spain

Інструменти для веб-майстрів підтримують стандарт системи Internationalizing Domain Names in Applications (IDNA) щодо додавання сайту до облікового запису. Просто введіть звичним чином ім'я свого домену, і він відобразиться належним чином на сторінці Інструментів для веб-майстрів. Якщо ввести, наприклад, http://bücher.example.com у вікні Додати сайт, він відобразиться правильно. Це стосується лише хостів (у цьому прикладі – http://bücher.example.com). Тому ми рекомендуємо створювати свої URL-адреси лише за допомогою символів ASCII, які не вимагають зміни алфавітних знаків.

Якщо у вас виникають труднощі з підтвердженням свого сайту за допомогою вищевказаних способів,

Помилки підтвердження

Якщо під час спроби підтвердити ваш сайт сталася помилка, знайдіть її у переліку нижче, щоб дізнатися про можливі причини та рішення.

Загальні помилки підтвердження

  • Ми виявили помилку, перевіряючи назву домену вашого сайту.

    Ми спробували отримати доступ до вашого файлу підтвердження, але не змогли отримати доступ до вашого домену через помилку DNS. Можливо, не працював ваш сервер, або ж існує проблема DNS-маршрутизації до вашого домену. Переконайтеся, що ваш домен діє належним чином і повторіть спробу.

  • Ми виявили затримку DNS, перевіряючи назву домену вашого сайту.

    Ми спробували отримати доступ до вашого файлу підтвердження, але не змогли отримати доступ до вашого домену через помилку DNS. Можливо, не працював ваш сервер, або ж існує проблема DNS-маршрутизації до вашого домену. Переконайтеся, що ваш домен діє належним чином і повторіть спробу.

  • Нам не вдалося підтвердити ваш файл через затримку сервера.

    Нам не вдалося підтвердити ваш файл, оскільки відбулася затримка сервера. Можливо, ваш сервер не працює чи зайнятий, а тому відповідає повільно. Переконайтеся, що ваш сервер відповідає та повторіть спробу.

Помилки підтвердження HTML-файлу

  • Нам не вдалося знайти ваш файл підтвердження. Переконайтеся, що він відповідно названий і завантажений у відповідне місце.

    Ми шукали ваш файл підтвердження, але не змогли знайти його. Перевірте нижчевказане та повторіть спробу.

    • Чутливість до регістру: чи використовували ви великі та малі літери, як показано на сторінці?
    • Розширення файлів: чи призначено файлу розширення .html? Інколи текстові редактори автоматично додають до файлу розширення .txt. У такому випадку повторно назвіть файл, щоб його розширенням було .html.
    • Розташування: чи завантажили ви файл у каталог, який знаходиться в переліку біля кнопки "Підтвердити"?

    Іншою можливою причиною цієї помилки може бути введення неправильної назви сайту під час додавання його до свого облікового запису. Виходить, ви завантажили файл підтвердження у відповідне місце, а ми шукаємо його в іншому. Переконайтесь, що показаний нами сайт – ваш. Якщо ні, видаліть цей сайт і додайте свій.

  • Нам не вдалось отримати доступ до файлу підтвердження через обмеження у файлі robots.txt.

    Ми спробували отримати доступ до файлу підтвердження, але не змогли зробити це через обмеження в robots.txt. Це може трапитись із декількох причин. Наприклад, ваш файл robots.txt може повністю забороняти доступ для робота Googlebot; може забороняти доступ до каталогу, в якому розташовано ваш файл підтвердження; або забороняти доступ до самого файлу підтвердження. Перевірте свій файл robots.txt на наявність цих чи інших причин, які забороняють Google доступ до вашого файлу підтвердження. У разі потреби змініть свій файл robots.txt і повторіть спробу. Зауважте, що обробка нового файлу robots.txt може тривати навіть цілий день.

  • Ваш сайт не показує код статусу 4xx HTML для неіснуючих URL-адрес

    Якщо ви використовуєте підтвердження HTML, важливо, щоб неіснуюча URL-адреса показувала код статусу 4xx. Ми не можемо підтверджувати сайти, налаштовані на показування інших кодів статусу (таких як 2xx або 5xx) для неіснуючих URL-адрес, оскільки це дозволить будь-кому підтверджувати право власності на ваш сайт. Ви можете випробувати наш метод підтвердження мета-тегу чи змінити налаштування свого сервера.

    Такі налаштування створюють ризик для безпеки підтвердження сайтів, а тому ми не можемо підтвердити ваш сайт. Якщо ваш сервер налаштовано показувати статус 200 ("знайдено") у заголовку сторінок 404 ("не знайдено") і ми дозволили вам підтвердити свій сайт із такими налаштуваннями, інші можуть скористатись цим і також підтвердити своє право на ваш сайт. Щоб гарантувати, що ніхто не скористається з цих налаштувань для перегляду статистики чужих сайтів, ми підтверджуємо лише сайти, які показують статус 404 у заголовку сторінок 404.

    Якщо ваш сервер налаштовано показувати інший статус (не 404) для неіснуючих сторінок, спробуйте наш метод підтвердження мета-тегу чи змініть налаштування свого сервера.

    Можна змінити налаштування свого веб-сервера на показування статусу 404 у заголовку сторінок 404 і продовжувати надсилати спеціальну сторінку помилки (див. Інформацію Apache та Інформацію IIS). Налаштувавши свій веб-сервер відповідним чином, спробуйте підтвердити сайт ще раз, і ми повторно перевіримо ваші налаштування.

Помилки мета-тегу підтвердження

  • Нам не вдалось знайти мета-тег підтвердження. Мета-тег підтвердження має міститись у розділі <HEAD> сторінки.

    Якщо ви бачите цю помилку, перевірте вказане нижче.

    • Чи міститься мета-тег на відповідній сторінці? Ми шукаємо його на домашній сторінці вашого сайту. Ось сторінка, яку показує ваш сервер, коли хтось робить запит про ваш сайт (наприклад http://www.example.com/). Ця сторінка часто називається index.html або index.htm, але може мати й іншу назву, залежно від налаштувань вашого сервера.
    • Чи міститься мета-тег на правильному місці на сторінці? Ми шукаємо його в розділі HEAD сторінки. Приклад правильного розташування наведено нижче.
      <HTML>
      <HEAD>
      <TITLE>Your Title</TITLE>
      <META name="verify-v1" content="String_we_ask_for"> </HEAD> <BODY>
    • Якщо ви користуєтеся веб-редактором або редактором WYSIWYG для редагування своєї сторінки, переконайтесь, що вибрано параметр "Редагувати HTML", або ви редагуєте код джерела сторінки.
  • Ваш мета-тег підтвердження має бути <META name="verify-v1" contents="String_we_ask_for">. Знайдений нами мета-тег – <META name="verify-v1" contents="Incorrect_string">.

    Ми знайшли мета-тег підтвердження, але вміст був неправильний. Переконайтесь, що вміст відповідає нашому запиту.

На початок

2. Створення та подання файлів Sitemap

Про файли Sitemap

Загалом, існує два типи файлів sitemap. Перший тип файлу sitemap – це сторінка HTML із переліком сторінок вашого сайту (часто за розділами), призначена допомогти користувачам знайти потрібну інформацію.

Файли Sitemap XML, які переважно називають файлами Sitemap (з великої літери), – це спосіб надати Google інформацію про ваш сайт. Саме про такий тип файлу Sitemap йдеться у цій статті.

Найпростішими словами, файл Sitemap – це перелік сторінок вашого веб-сайту. Створення та подання файлу Sitemap допомагає гарантувати, що Google знає про всі сторінки на вашому сайті, включно з URL-адресами, які важко виявити під час звичного процесу сканування Google.

Файли Sitemap особливо корисні в таких випадках.

  • На вашому сайті розміщено динамічний вміст.
  • Ваш сайт містить сторінки, які важко знаходити роботу Googlebot під час процесу сканування, наприклад сторінки, які особливо насичені AJAX чи Flash.
  • Ваш сайт новий і на нього поки небагато посилань. (Googlebot сканує мережу, переходячи за посиланнями від сторінки до сторінки, тому, якщо на ваш сайт небагато посилань, нам буде важко його виявити).
  • Ваш сайт має великий архів сторінок вмісту, які містять небагато взаємних посилань, або ж не з'єднані взагалі.

Ви також можете використовувати файл Sitemap для надання Google додаткової інформації про свої сторінки, зокрема про:

  • частоту змінення сторінок на вашому сайті. Наприклад, ви можете оновлювати свою сторінку продукту щоденно, а сторінку "Про себе" – лише раз на декілька місяців;
  • дату останнього оновлення кожної сторінки;
  • відносну важливість ваших сторінок на сайті. Наприклад, ваша домашня сторінка може мати відносну важливість 1,0, сторінки категорій – 0,8, окремі елементи блогу чи сторінки продукту – 0,5. Ця пріоритетність лише вказує на важливість певної URL-адреси стосовно інших URL-адрес на вашому сайті та не впливає на розміщення ваших сторінок у результатах пошуку.

Файли Sitemap надають Google додаткову інформацію про ваш сайт, доповнюючи наші звичні методи сканування мережі. Ми сподіваємося, що вони допоможуть нам сканувати більшу частину вашого сайту протягом коротшого часу, але не можемо гарантувати, що URL-адреси вашого файлу Sitemap буде додано до індексу Google. Сайти ніколи не караються за подання файлів Sitemap.

Google дотримується протоколу Sitemap Protocol 0.9, описаного на сайті sitemaps.org. Протокол Sitemap – діалект XML для узагальнення інформації файлу Sitemap, потрібної для мережевих сканерів. Файли Sitemap, створені для Google за допомогою Sitemap Protocol 0.9, сумісні з іншими пошуковими системами, які приймають стандарти sitemaps.org.

Хоча стандартний файл Sitemap діє для більшості сайтів, ви також можете створити та подати спеціальні файли Sitemap для певних типів вмісту. Ці формати файлу Sitemap притаманні Google і не використовуються іншими пошуковими системами. Серед форматів файлу Sitemap такі:

  • файли Sitemap для відео
  • файли Sitemap для мобільних пристроїв
  • файли Sitemap для новин
  • файли Sitemap для пошуку коду
  • файли Sitemap для карт

На початок

Створення файлу Sitemap

Використання каналу RSS/Atom як файлу Sitemap

Google підтримує канали RSS (Real Simple Syndication) 2.0 і Atom 1.0. Якщо у вас є блог із каналом RSS або Atom, подайте URL-адресу каналу як файл Sitemap. Більшість програмного забезпечення блогів створює канал для вас. Якщо у вашого сайту немає каналу, можна використати Feedburner для його створення та публікації. Зауважте, що канал надає інформацію лише про існуючі URL-адреси.

Створення файлу Sitemap на основі текстового файлу

Файл Sitemap має містити перелік URL-адрес вашого сайту (до 50 000 URL-адрес). Якщо у вас великий сайт із більш ніж 50 000 URL-адресами, потрібно створити декілька файлів Sitemap і подати файл індексу Sitemap.

Можна надіслати Google простий текстовий файл, який містить одну URL-адресу на рядок. Наприклад:

http://www.example.com/file1.html
http://www.example.com/file2.html

Для забезпечення кращих результатів, дотримуйтесь наведених нижче вказівок.

  1. Потрібно вказувати URL-адреси повністю, оскільки Google намагається сканувати їх саме так, як подано.
  2. Кожен текстовий файл може містити не більше 50 000 URL-адрес. Якщо сайт містить понад 50 000 URL-адрес, поділіть перелік на декілька текстових файлів і подайте їх окремо.
  3. Текстовий файл потрібно створити з кодуванням UTF-8. Це можна вказати під час збереження файлу (наприклад, у програмі "Блокнот" ці можливості перелічено в меню "Кодування" діалогового вікна "Зберегти як").
  4. Текстовий файл не може містити іншу інформацію, окрім переліку URL-адрес.
  5. Текстовий файл не може містити інформацію для верхнього та нижнього колонтитулів.
  6. Немає обмежень для імені текстового файлу. Google рекомендує призначити файлу розширення .txt, щоб визначити його як текстовий файл (наприклад, sitemap.txt).

Текстовий файл потрібно завантажити на свій сервер. Створивши цей файл, можна подати його як файл Sitemap. Цей процес, хоча й здійснюється вручну, найпростіший і, ймовірно, найкращий, якщо ви не вмієте писати сценарії чи керувати своїм веб-сервером.

Якщо у вас багато веб-сайтів, можна спростити процес створення та подання файлів Sitemap, створюючи один або декілька файлів Sitemap, які включають URL-адреси для всіх ваших підтверджених сайтів, і зберігаючи їх в єдиному місці. Усі сайти потрібно підтвердити в Інструментах для веб-майстрів.


На початок

Подання файлу Sitemap

Подаючи файл Sitemap у Google вперше, подайте його за допомогою Інструментів Google для веб-майстрів. Це дозволить Google повідомляти вам корисну інформацію щодо статусу та статистики.

Перебуваючи у своєму обліковому записі, можна дізнатись про проблеми з файлами Sitemap чи вказаними в них URL-адресами.

Далі описано процес додавання файлу Sitemap, який містить URL-адресу для немобільного вмісту (годиться для більшості сайтів). Створення файлів Sitemap для мобільного вмісту потребує додаткових дій.

Створивши файл Sitemap в одному з підтримуваних форматів, виконайте вказані нижче дії.

  1. Завантажте файл Sitemap на свій сайт. У вашому обліковому записі Інструментів для веб-майстрів мають бути такі підтверджені сайти:
    • сайт, на якому розташовано файл Sitemap
    • сайт або сайти, на чиї URL-адреси є посилання у файлі Sitemap
  2. На домашній сторінці Інструментів для веб-майстрів натисніть потрібний сайт.
  3. У вкладці Налаштування сайту натисніть Файли Sitemap.
  4. У текстовому полі вкажіть шлях до свого файлу Sitemap (наприклад, якщо ваш файл Sitemap знаходиться за адресою http://www.example.com/sitemap.xml, введіть sitemap.xml).
  5. Натисніть Подати файл Sitemap.

Неможливо передбачити чи гарантувати те, коли ваші URL-адреси буде проскановано чи додано до нашого індексу, та чи це станеться взагалі. У майбутньому ми плануємо розширити межі покриття сайтів і скоротити терміни індексування, поступово вдосконалюючи наші методи та вивчаючи потреби веб-майстрів.

Якщо файл Sitemap було змінено, його можна подати повторно, використовуючи Інструменти Google для веб-майстрів або через запит HTTP.

Примітка.Повідомити Google та інші пошукові системи про свій файл Sitemap також можна, вказавши його розміщення у файлі robots.txt. Проте, ми все ж таки рекомендуємо подавати файл Sitemap через свій обліковий запис Інструментів для веб-майстрів. Це дозволить уникнути проблем під час його обробки та дасть можливість отримувати додаткову інформацію про статистику сайту.

На початок

Оптимізація вашого сайту

1. Geotargeting

Якщо цільовою аудиторією вашого сайту є користувачі конкретного географічного місця, можна використовувати наш інструмент налаштування географічної цілі для надання інформації, яка допоможе нам визначити, як відображається ваш сайт у результатах пошуку в конкретній країні, а також покращити наші результати пошуку для географічних запитів. Ці дані доповнюють нашу поточну інформацію. Налаштування географічної цілі не впливатиме на вашу появу в результатах пошуку, якщо тільки користувач не використовує розширений пошук для обмеження кола пошуку до конкретної країни.

Цю властивість можна використовувати лише для сайтів з базовим доменом верхнього рівня, як-от .com або .org. Сайти з доменами кодів країн вищого рівня (наприклад .ie) вже прив'язанні до географічної території (в даному випадку Ірландії).

Якщо в Інструменти для веб-майстрів не введено жодної інформації, ми й надалі встановлюватимемо географічний зв'язок, який базуватиметься, головно, на домені вищого рівня (наприклад .co.uk або .ca) та IP-адресі веб-сервера, що обслуговує цей вміст.

Визначення географічної цілі.

  1. На домашній сторінці Інструментів для веб-майстрів натисніть потрібний сайт.
  2. У вкладці Налаштування сайту натисніть Параметри.
  3. У розділі Географічна ціль виберіть бажаний параметр.

На початок

2. Встановлення основного домену

Основним є той домен, який використовується для індексування сторінок вашого сайту (інколи його ще називають канонічним доменом). Посилання можуть вказувати на ваш сайт за допомогою версій URL-адрес із частиною www або ж без неї (наприклад, http://www.example.com і http://example.com). Основний домен – це та версія, яку ви хочете застосовувати для свого сайту в результатах пошуку.

Отримавши ім'я вашого основного домену, ми використовуватимемо цю інформацію в усіх наступних сеансах сканування вашого сайту й для оновлення індексу. Наприклад, якщо ви вкажете http://www.example.com як основний домен вашого сайту, і ми знайдемо посилання на ваш сайт у форматі http://example.com, воно буде вважатись ідентичним (і таким, що його замінює) до посилання http://www.example.com. Окрім того, ми враховуватимемо ваші побажання при відображенні URL-адрес у результатах пошуку. Якщо основний домен не визначено, ми вважатимемо версії з частиною www і без неї окремими посиланнями на різні сторінки.

Щоб встановити основний домен, виконайте такі дії.

  1. На домашній сторінці Інструментів для веб-майстрів натисніть потрібний сайт.
  2. У вкладці Налаштування сайту натисніть Параметри.
  3. У розділі Основний домен виберіть потрібний параметр.

Можливо, треба буде повторно підтвердити право власності на свої сайти. Оскільки встановлення основного домену впливає як на сканування, так і на індексування, ми повинні переконатись, що саме ви є власником обох версій. Переважно обидві версії вказують на той самий сайт, але тут також бувають винятки. Як правило, після підтвердження вами однієї з версій домену, ми легко можемо підтвердити іншу, знайшовши HTML-файл підтвердження чи мета-тег. Проте якщо ви видалили цей файл або мета-тег, потрібно буде знову виконати всю процедуру підтвердження.

Примітка. Визначивши основний домен, можна скористатися переадресацією 301, щоб переадресувати трафік зі свого неосновного домену. У цьому випадку інші пошукові системи та відвідувачі знатимуть, яка з версій є основною.

На початок

3. Запобігання появі вмісту в результатах пошуку

Якщо ви не хочете, щоб певні сторінки чи вміст з'являлися в результатах пошуку Google, можете скористатися рядом параметрів.

  • Якщо вам потрібно зберігати конфіденційний вміст на своєму сервері, зберігайте його в захищеному паролем каталозі. Googlebot та інші павуки не зможуть отримати доступ до цього вмісту. Це найпростіший і найефективніший спосіб уникнути сканування та індексування вмісту вашого сайту роботом Googlebot чи іншими павуками. Якщо ви користуєтеся веб-сервером Apache, можна змінити файл .htaccess для захисту паролем каталогу свого сервера. У мережі є багато інструментів, які допоможуть вам зробити це.

  • Користуйтеся файлом robots.txt для контролю доступу до файлів і каталогів свого сервера. Файл robots.txt є наче електронним написом "Вхід заборонено". Він повідомляє Googlebot та іншим сканерам, які файли та каталоги вашого сервера не потрібно сканувати.

    Щоб скористатися файлом robots.txt, потрібно отримати доступ до кореневої папки хосту (якщо ви не знаєте, зверніться до свого веб-хостера). Якщо ви не маєте доступу до кореневої папки домену, можете обмежити доступ до певних сторінок за допомогою мета-тегу "robots".

    Слід зазначити, що навіть якщо ви користуєтеся файлом robots.txt, щоб блокувати сканування вмісту вашого сайту павуками, інші сайти все ж можуть містити посилання на нього. У результаті, URL-адреса сторінки та, можливо, інша загальнодоступна інформація, як-от текст прив'язки до посилань на сайт або назва з каталогу Open Directory Project, будуть з'являтися в результатах пошуку Google. Окрім цього, хоча всі авторитетні роботи дотримуватимуться директив із файлу robots.txt, деякі можуть розуміти їх по-різному. Файл robots.txt не є примусовим і деякі спамери та інші зловмисники ігноруватимуть його. Через це рекомендується захищати конфіденційну інформацію за допомогою пароля (див. вище).

    Створити файл robots.txt можна за допомогою інструмента для створення файлу robots.txt в Інструментах для веб-майстрів, а перевірити його – за допомогою інструмента перевірки файлу robots.txt.

  • Користуйтеся мета-тегом "noindex", щоб запобігти появі вмісту в результатах пошуку. Виявивши на сторінці мета-тег noindex, Google повністю вилучить цю сторінку з результатів пошуку, навіть якщо інші сторінки містять посилання на неї. Якщо такий вміст все ще перебуватиме в нашому індексі, його буде видалено під час наступного сканування. (Щоб прискорити видалення, скористайтеся інструментом для видалення URL-адрес в Інструментах Google для веб-майстрів.) Проте, інші пошукові системи можуть сприймати цю директиву по-різному. У результаті, посилання на таку сторінку все ще може з'являтися в їхніх результатах пошуку.

    Оскільки для виявлення тегу "noindex" вашу сторінку потрібно сканувати, імовірність того, що Googlebot може не побачити та не виконати вказівку мета-тегу "noindex", дуже мала (таким прикладом може бути несканування сторінки від часу, як ви додали цей тег).

    Щоб заборонити всім роботам індексувати сторінки з вашого сайту, потрібно внести в розділ <head> вашої сторінки такий мета-тег:

    <meta name="robots" content="noindex">

    Щоб дозволити іншим роботам індексувати сторінку вашого сайту, заборонивши лише роботам Google індексувати цю сторінку, вставте:

    <meta name="googlebot" content="noindex">

На початок

4. Зазначення канонічної версії вашої сторінки

Канонічна сторінка – це основна версія групи сторінок із дуже схожим вмістом.

На сайтах часто є декілька сторінок, які містять перелік аналогічних груп продуктів. Наприклад, на одній сторінці можуть відображатися продукти, відсортовані в алфавітному порядку, а на інших сторінках – ті ж самі продукти, відсортовані за ціною чи популярністю. Наприклад:

http://www.example.com/product.php?item=swedish-fish&trackingid=1234567&sort=alpha&sessionid=5678asfasdfasfd
http://www.example.com/product.php?item=swedish-fish&trackingid=1234567&sort=price&sessionid=5678asfasdfasfd

Якщо Google знатиме, що ці сторінки мають ідентичний вміст, ми зможемо індексувати лише одну версію для відображення в наших результатах пошуку. Наші алгоритми виберуть сторінку, яка, на нашу думку, найкраще відповідає запиту користувача. Проте, тепер можна вказати канонічну сторінку для пошукових систем, додавши елемент <link> з атрибутом rel="canonical" до розділу <head> неканонічної версії сторінки. Додавання цього посилання й атрибуту дозволяє власникам сайту визначити набір ідентичного вмісту та підказати Google: "Усі ці сторінки мають ідентичний вміст, а ця сторінка – найкорисніша. Установіть для неї пріоритет у результатах пошуку".

Як вказати канонічну сторінку?

Щоб визначити канонічне посилання на сторінку http://www.example.com/product.php?item=swedish-fish, створіть елемент <link> відповідно до зразка:

<link rel="canonical" href="http://www.example.com/product.php?item=swedish-fish"/>

Скопіюйте це посилання в розділ <head> неканонічної версії сторінки, наприклад http://www.example.com/product.php?item=swedish-fish&sort=price.

Якщо ви публікуєте вміст на обох сторінках http://www.example.com/product.php?item=swedish-fish і https://www.example.com/product.php?item=swedish-fish, можна визначити канонічну версію сторінки. Створіть елемент <link>:

<link rel="canonical" href="http://www.example.com/product.php?item=swedish-fish"/>

Додайте це посилання до розділу <head> сторінки https://www.example.comproduct.php?item=swedish-fish.

Чи вміст групи сторінок має бути схожим до вмісту в канонічній версії?

Так. Атрибут rel="canonical" потрібно використовувати лише для встановлення основної версії багатьох сторінок з ідентичним вмістом (допускаються незначні відмінності, як-от порядок сортування).

Наприклад, якщо на сайті є група сторінок для однакової моделі балеток, які відрізняються лише кольором зображеного взуття, доцільно, як канонічну, визначити сторінку, на якій показано найпопулярніший колір. Після цього збільшується ймовірність того, що Google відобразить цю сторінку в результатах пошуку.

Чи можна використати rel="canonical" для визначення канонічної url-адреси на цілком іншому домені?

Ні. Щоб переміститися на цілком інший домен, доцільніші тимчасові переадресації (301). Google на даний момент враховуватиме пропозиції канонізації в межах піддоменів (або в межах домену), але не у різних доменах. Тому власники сайтів можуть вказати канонічну сторінку на www.example.com із групи сторінок на example.com чи help.example.com, але не на example-widgets.com.

На початок