Чому сайт не відображається в Google: 9 причин

Якщо ваш сайт не відображається в Google або не піднімається в результатах пошуку, причина зазвичай одна з чотирьох. Google не проіндексував сторінки; їх блокує технічний сигнал на кшталт noindex, robots.txt або хибного canonical; ви цілитеся в запити, за якими поки не можете виграти; або сторінки, що вже в топі, корисніші й мають кращі посилання. Перевіряйте саме в такому порядку. Спершу — індексація.

Порядок важливий, бо способи виправлення зовсім різні. Якщо проблема в забутому тегу noindex, новий контент не допоможе. Якщо сторінка проіндексована, але висить на п'ятій сторінці видачі, правки в robots.txt теж нічого не дадуть. У цьому посібнику розбираємо кожну причину: як її підтвердити і що виправляти насамперед.

Сайт не індексується чи просто не ранжується?

Це різні проблеми. «Не проіндексовано» означає, що Google не зберіг сторінку, тож жоден запит її не покаже. «Не ранжується» означає, що сторінка є в індексі, але стоїть надто низько, щоб її хтось побачив. Витратьте п'ять хвилин, щоб з'ясувати, який у вас випадок, перш ніж щось змінювати.

Посібник для початківців із SEO від Google пропонує швидку перевірку: введіть у пошук site:yourdomain.com. Якщо з'явилися хоч якісь результати, ваш сайт є в індексі. Для окремої сторінки шукайте site:yourdomain.com/page-url або вставте URL в інструмент перевірки URL-адреси в Search Console. Він покаже, чи проіндексована сторінка, який canonical обрав Google і коли Googlebot востаннє її сканував.

Google працює у три етапи: сканування, індексування і показ у результатах. На сторінці Як працює Пошук прямо сказано, що Google «не гарантує, що скануватиме, індексуватиме чи показуватиме вашу сторінку, навіть якщо вона відповідає Основним вимогам Google Пошуку». Виконання вимог робить сторінку придатною до показу. Позицій воно не обіцяє.

Чому сайт не в топі Google: поширені причини

Більшість сайтів, які не ранжуються, мають одну або кілька проблем із наведених нижче. Скористайтеся таблицею, щоб зіставити симптом із ймовірною причиною.

Якщо сайт раніше ранжувався, а потім втратив трафік, діагностика інша. У такому разі пройдіть кроки з посібника про падіння трафіку сайту.

Чи блокує Google технічна проблема?

Технічні блокування — найпоширеніша причина, чому сторінки зовсім немає в Google, і зазвичай їх виправити найшвидше. Технічні вимоги Google називають три умови, за яких сторінка може потрапити в індекс: Googlebot не заблоковано, сторінка повертає HTTP-код 200 і має контент, придатний для індексування.

Перевірте, чи не лишився noindex

Розробники часто додають noindex на тестову версію сайту, і подекуди він переживає запуск. У WordPress те саме робить налаштування «Попросити пошукові системи не індексувати цей сайт». Пошукайте у вихідному коді сторінки:

<meta name="robots" content="noindex">

Також перевірте HTTP-заголовок X-Robots-Tag: він може застосовувати noindex, нічого не показуючи в HTML.

Перевірте robots.txt і canonical

Правило Disallow: /, що лишилося з часів розробки, не дає Google сканувати весь сайт. Блокування файлів CSS чи JavaScript може завадити Google коректно рендерити сторінки. Безпечні правила описано в нашому посібнику з robots.txt. Далі перевірте тег canonical. Якщо всі сторінки вказують canonical на головну, на HTTP-адресу чи на тестовий домен, Google може проіндексувати не ту URL-адресу, яку ви хочете. Як це виправити, читайте в посібнику з тегу canonical.

Прочитайте звіт про індексування сторінок

Звіт про індексування сторінок у Search Console показує причину для кожної непроіндексованої URL-адреси. Серед прикладів — «URL-адресу позначено тегом noindex», «Заблоковано у файлі robots.txt», «Помилка soft 404», «Помилка сервера (5xx)» і «Дублікат: Google вибрав іншу канонічну сторінку, ніж користувач». На тій самій сторінці довідки попереджають: «Не очікуйте, що всі URL-адреси вашого сайту буде проіндексовано». Важливо, чи проіндексовані ключові сторінки. Відфільтруйте звіт за сторінками послуг, товарів і категорій.

Якщо на важливих сторінках звіт показує «Проскановано, але наразі не проіндексовано», Google їх завантажив і вирішив не зберігати. Зазвичай це вказує на якість контенту або дублювання, а не на технічне блокування. Способи виправлення — у нашому посібнику про статус «Проскановано, але наразі не проіндексовано».

Чи не надто новий мій сайт, щоб ранжуватися?

Новий сайт часто не ранжується просто тому, що Google його ще не знайшов або поки йому не довіряє. Google знаходить сторінки здебільшого через посилання. У Посібнику для початківців із SEO сказано, що «переважну більшість нових сторінок, які Google знаходить щодня, він виявляє за посиланнями». Сайт, на який ніхто не посилається, може довго чекати, поки його виявлять.

Надсилання XML-карти сайту в Search Console допомагає, але Google зазначає, що карта сайту необов'язкова і що спершу варто подбати, аби люди знали про ваш сайт. Щодо термінів той самий посібник каже, що одні зміни набувають чинності за кілька годин, а інші — за кілька місяців, тож зазвичай варто почекати кілька тижнів, перш ніж оцінювати, чи спрацювала зміна.

Для нового сайту почніть із такого:

• Підтвердьте домен у Search Console і надішліть карту сайту.
• Отримайте кілька справжніх посилань: профіль компанії в Google, галузеві каталоги, партнери, постачальники й місцеві медіа.
• Поставте посилання на кожну важливу сторінку з навігації або з інших сторінок сайту.
• Будьте готові, що спершу сайт ранжуватиметься за назвою бренду, а за конкурентними запитами — пізніше.

Чи не цілитеся ви в запити, за якими не можете виграти?

Дуже поширена причина, чому сторінка проіндексована, але її не видно, — вона націлена на широку конкурентну фразу. Головна сторінка місцевого сантехніка, оптимізована під «сантехнік», змагається з каталогами, національними брендами й локальною видачею самого Google. А от «аварійний сантехнік Київ Оболонь» чи «ремонт бойлера Київ в день звернення» — боротьба, яку невеликий сайт справді може виграти.

Відповідайте пошуковому наміру

Введіть цільовий запит у пошук і подивіться, що ранжується. Якщо в топ-10 самі посібники, а ваша сторінка продажна (або навпаки), Google уже вирішив, чого хочуть користувачі. Ваша сторінка має бути того самого типу, що й результати, тільки кращою. На сторінці «Як працює Пошук» зазначено, що результати залежать від релевантності, а також від місцезнаходження, мови й пристрою користувача. Саме тому місцевий бізнес ранжується по-різному в різних містах.

Використовуйте звіт «Ефективність»

У Search Console → «Ефективність» відсортуйте запити за кількістю показів. Запити з великою кількістю показів, але середньою позицією 8–20 — ваші найшвидші перемоги. Google уже пов'язує з ними сторінку, тож кращі заголовки title, підзаголовки й контент можуть підняти їх на першу сторінку.

Чи достатньо корисний ваш контент?

Якщо сторінки проіндексовані й націлені на реалістичні запити, але все одно поступаються конкурентам, чесно порівняйте контент. Рекомендації Google щодо корисного контенту, створеного для людей, пропонують запитати себе: чи дає сторінка оригінальну інформацію чи аналіз, чи показує досвід із перших рук і чи виходить за межі того, що вже написано на інших сторінках.

Типові проблеми на сайтах малого бізнесу:

• Порожні сторінки послуг. Три речення і форма зворотного зв'язку не переможуть сторінку конкурента, де описано ціни, процес роботи, територію обслуговування і є розділ FAQ.
• Майже однакові сторінки. Двадцять сторінок для різних міст, які відрізняються лише назвою міста, зазвичай залишаються непроіндексованими або ранжуються погано.
• Текст, «замкнений» у зображеннях. Посібник для початківців від Google радить подавати ключову інформацію текстом, а не графікою.
• Невідомо, хто стоїть за сайтом. Немає автора, адреси, відгуків, сторінки «Про нас».

Ті самі рекомендації застерігають від масового створення сторінок на теми, у яких ви не розбираєтеся, і від «широкої автоматизації для створення контенту на багато тем». Десятки написаних ШІ статей рідко розв'язують проблему з позиціями і можуть погіршити індексацію.

Чи гальмують сайт слабкі внутрішні та зовнішні посилання?

Так. Через посилання Google знаходить сторінки й визначає, які з них важливі. Сторінка, до якої можна дістатися лише через карту сайту і на яку немає внутрішніх посилань, дає слабкий сигнал. Сайту майже без посилань з інших ресурсів важко конкурувати за щось, окрім назви бренду.

Почніть із внутрішніх посилань, бо їх ви повністю контролюєте:

• Поставте посилання на ключові сторінки послуг чи товарів із головної та з основної навігації.
• Пов'яжіть статті блогу з відповідною сторінкою послуги за допомогою описового анкора, а не «натисніть тут».
• Виправте сторінки-сироти й посилання, що ведуть через ланцюжки редиректів.

Для зовнішніх посилань важливіша релевантність, ніж кількість. Посилання від місцевої торгово-промислової палати, постачальника чи галузевої асоціації вартує більше, ніж сотні записів у каталогах. Купівля посилань порушує правила Google щодо спаму і може обернутися серйозними проблемами (див. наступний розділ).

Чи можуть причиною бути санкції або заходи вручну?

Для невеликих сайтів це рідкість, але виключити цю причину можна за дві хвилини. Заходи вручну означають, за словами Google, що «співробітник Google, який перевіряв сайт, визначив, що його сторінки не відповідають правилам Google щодо спаму». Згідно з довідкою про звіт «Заходи вручну», коли до сайту застосовано такий захід, «весь сайт або його частина не показуватиметься в результатах пошуку Google», і Google повідомляє про це в цьому звіті та в центрі повідомлень Search Console.

Відкрийте Search Console → «Безпека та заходи вручну». Якщо звіт порожній, заходів вручну до вас не застосовано. Втрата позицій після основного оновлення (core update) — це не санкції. Це означає, що системи Google тепер віддають перевагу іншим сторінкам, і відповідь тут — кращий контент, а не запит на повторну перевірку. Зламаний сайт теж може випасти з видачі, тож перевірте звіт «Проблеми безпеки» на тому самому екрані.

Як крок за кроком з'ясувати, що не так із сайтом?

Рухайтеся від найдешевших і найнадійніших перевірок до найповільніших і найменш певних. Кожен крок або виключає причину, або її знаходить.

1. Перевірте індексацію. Виконайте пошук site: і перевірте п'ять найважливіших URL-адрес у Search Console.
2. Виключіть блокування. Перевірте noindex, правила robots.txt, теги canonical і HTTP-статус кожної ключової сторінки.
3. Прочитайте звіт про індексування сторінок. Згрупуйте непроіндексовані URL-адреси за причинами й виправте ті, що стосуються ключових сторінок.
4. Перевірте рендеринг. У перевірці URL-адреси перегляньте проскановану сторінку й переконайтеся, що основний текст і посилання відображаються без залежності від JavaScript, який Google не може виконати.
5. Перевірте заходи вручну та проблеми безпеки.
6. Перегляньте вибір запитів. Для кожної ключової сторінки оберіть один реалістичний основний запит і порівняйте сторінку з поточним топом видачі.
7. Покращте контент і посилання. Розширте порожні сторінки, об'єднайте дублікати, додайте внутрішні посилання й отримайте кілька релевантних зовнішніх.
8. Зачекайте й виміряйте. Дайте змінам кілька тижнів, а потім порівняйте покази й середню позицію у звіті «Ефективність».

На сайті із сотнями сторінок кроки 2–4 важко виконати вручну. Безкоштовний SEO-аудит від SEORecheck сканує ваші сторінки в реальному браузері й позначає теги noindex, блокування в robots.txt, конфлікти canonical, коди помилок, слабкі чи дубльовані сторінки та контент, що з'являється лише після виконання JavaScript, — з прикладами URL-адрес. Як виглядає звіт, можна подивитися в прикладі звіту.

Головне

• Спершу з'ясуйте, чи сайт не проіндексовано, чи він проіндексований, але ранжується низько. Способи виправлення різні.
• Технічні блокування (noindex, robots.txt, хибні canonical, коди статусу, відмінні від 200) — найпоширеніша причина повної відсутності сайту в Google і найшвидша у виправленні.
• Новим сайтам потрібні посилання, щоб Google їх знайшов і почав довіряти. Карта сайту допомагає, але сама по собі недостатня.
• Цільтеся в конкретні запити, що відповідають пошуковому наміру сторінок у топі, а не в широкі високочастотні фрази.
• Слабкий, дубльований чи шаблонний контент часто лишається непроіндексованим або поступається кориснішим сторінкам.
• Перевірте звіт «Заходи вручну», але не поспішайте підозрювати санкції. Більшість проблем із позиціями мають звичайні причини.
• Оцінюйте зміни за тижні, а не за дні.