SEO для великого бізнесу: що бачать AI-боти

Перш ніж писати про SEO для великого бізнесу, я захотів подивитися на сайти найбільших компаній України так, як їх бачить ChatGPT. 24 жовтня 2026 року я надіслав на сайти 50 великих брендів ті самі запити, що надсилають AI-боти: спершу robots.txt, потім головна сторінка, один раз від імені звичайного браузера і по разу від імені кожного бота. Запити йшли з української адреси.

У robots.txt AI-ботів майже ніхто не закриває. Один сайт із 42, і той проти одного бота. Натомість у п'яти брендів захист сайту відмовляє AI-ботам, коли Googlebot з тієї самої адреси спокійно проходить. Це рішення ухвалили не у відділі маркетингу, а в налаштуваннях захисту, які SEO-фахівець зазвичай навіть не відкриває.

Ось і вся різниця між SEO для невеликого сайту і для великого бізнесу. На великому сайті те, що вирішує видимість, лежить у чужому відділі. Агенція для великого бізнесу потрібна саме для того, щоб це знайти і довести виправлення до кінця.

Коротко

• Доступ AI-ботів вирішується не в robots.txt. У robots закритий 1 сайт із 42 (EVA, і лише для одного бота CCBot). Але 5 із 40 головних відмовляють AI-ботам за назвою, пропускаючи Googlebot: Сільпо, Kernel, SOCAR, Подорожник і MAKEUP.
• Три бренди пускають «живих» AI-агентів, але закриті від ботів, що навчають моделі. У Сільпо, Kernel і SOCAR GPTBot і ClaudeBot отримують 403, а ChatGPT-User, Claude-User і Perplexity-User проходять. Robots.txt у всіх трьох відкритий.
• Чотири головні без JavaScript майже порожні. ДТЕК, Ощадбанк і Укргазбанк віддають по 7 слів, Дарниця 46. AI-боти не виконують JavaScript, тож бачать саме це.
• В американських гігантів те саме, тільки масштабніше. У першій сотні Fortune 500 robots.txt закриває AI-ботів у 2 компаній із 79, а захист на вході відповідає їм інакше у 18 із 73.
• Перше питання будь-якій агенції: хто в нас відповідає за захист сайту і CDN, і як ви працюватимете з цією людиною?

Що таке enterprise SEO і до чого тут розмір бізнесу

Справа не в розмірі бюджету. Я бачив проєкти за $1 000 на місяць із проблемами великого бізнесу і проєкти за $10 000 без них.

Справа в тому, скільки людей можуть зламати видимість сайту в пошуку і навіть про це не дізнатися. На сайті з 50 сторінок маркетолог сам пише title і сам публікує сторінку. На сайті з 80 тисяч адрес трьома мовами title береться з шаблону, яким володіє продуктова команда. Сторінку збирає фреймворк, за який відповідають розробники. Правила CDN належать службі безпеки, а юристи можуть заборонити блок із питаннями й відповідями. Кожен із них впливає на видачу, і ніхто з них не підпорядковується SEO-фахівцю.

Я розрізняю чотири ознаки. Якщо в проєкту є дві з них, це вже enterprise:

Останній рядок і пояснює, чому така робота дорога. Аудит — проста частина. Складна — провести виправлення через чужий спринт.

Що бачать AI-боти на сайтах найбільших компаній України

Опишу замір докладно: це найкорисніше в статті, і його можна повторити на своєму сайті за вечір.

Я взяв 50 великих українських брендів із різних галузей: рітейл і електроніка, банки, зв'язок, логістика, агро, фарма, мережі АЗС. Для головного сайту кожної компанії я:

• прочитав robots.txt і перевірив за ним 11 AI-ботів: GPTBot, OAI-SearchBot, ChatGPT-User, ClaudeBot, Claude-SearchBot, PerplexityBot, Google-Extended, Applebot-Extended, CCBot, Bytespider і meta-externalagent;
• запитав головну сторінку від імені Chrome, потім від імені 7 AI-ботів і Googlebot, з однієї адреси, з паузою в півтори секунди;
• порахував, скільки тексту головна віддає до запуску JavaScript, і перевірив у цьому вихідному HTML базові речі: один H1, мікророзмітку, hreflang, canonical;
• перевірив, чи є файл /llms.txt.

Той самий скрипт я прогнав по першій сотні Fortune 500, по 33 SEO-агенціях з американської видачі і по нашому сайту.

Одне застереження, без якого цифри читати не можна. Мої запити йшли з назвами ботів, але не з IP-адрес OpenAI чи Anthropic. Добрий захист перевіряє, чи бот справжній, і ріже підробку. Це правильна безпека, а не заборона AI. Тому я окремо рахую випадки, коли Googlebot з тієї самої адреси пройшов, а AI-боти ні. Це вже правило проти AI-ботів за назвою. Остаточно все перевіряється за логами сервера, і логи — перше, що агенція має попросити у великого клієнта.

Вирішує захист сайту, а не SEO

П'ять брендів, у яких Googlebot проходить, а AI-боти отримують відмову:

Robots.txt у всіх п'яти відкритий. У Сільпо, Kernel і SOCAR видно ту саму картину: закриті боти, що збирають тексти для навчання моделей, а відкриті агенти, що заходять на сторінку на запит живого користувача. Так виглядає ввімкнений у CDN перемикач «блокувати AI-ботів». Із 1 липня 2025 року Cloudflare вмикає таке блокування за замовчуванням для нових доменів, про це тоді писав MIT Technology Review.

Чи це погано? Не обов'язково. Закрити навчання і лишити пошук — розумна середина. Погано, коли про це ніхто не знає. Ahrefs у травні 2025 року перевірив близько 140 мільйонів сайтів і знайшов блок GPTBot у robots.txt у 5,89 % із них. Гарне дослідження, але автори прямо пишуть, що фаєрволи й блокування за IP не вимірювали. А великі компанії вирішують саме там.

У Fortune 100 цей шар ще помітніший. З заголовків відповідей видно, хто ухвалив рішення: IBM, Nike та American Express стоять за Akamai, Lockheed Martin — за Amazon CloudFront, Berkshire Hathaway — за Sucuri. На Lockheed Martin наш Googlebot пройшов, а GPTBot і ChatGPT-User отримали відмову. Жодного рядка про це в robots.txt немає, а robots.txt — перший файл, який відкриває будь-який SEO-аудит.

Порожні головні: що бот читає без JavaScript

У грудні 2024 року Vercel розібрав трафік своєї мережі й написав, що жоден великий AI-краулер не виконує JavaScript. Виняток — Gemini, бо він ходить через інфраструктуру Googlebot. Google відмалює ваш React-застосунок. ChatGPT прочитає лише те, що сервер віддав до запуску скриптів.

У Fortune 100 таких головних дев'ять, у Comcast, Broadcom і Deere по 4 слова. Головна — не та сторінка, яку AI цитує найчастіше, тож панікувати через цю таблицю не треба. Але головна зазвичай зібрана на тому самому фреймворку, що й решта сайту. Якщо вона йде порожньою, наступними я перевірив би картки послуг, тарифи й сторінки підтримки: саме їх AI і цитує.

З H1 картина схожа. У 16 із 40 українських головних його немає у вихідному HTML, серед них Rozetka, АЛЛО, Prom.ua, ПриватБанк, Київстар, Vodafone і Укрпошта. Частина сайтів додає заголовок уже в браузері. Для Google це нормально, для ботів, які не рендерять сторінку, заголовка немає.

llms.txt: українці попереду американців

Файл /llms.txt знайшовся в 11 із 50 українських брендів: Rozetka, Епіцентр, monobank, ПриватБанк, АТБ, Сільпо, EVA, MOYO, Intertop, Райффайзен і Dnipro-M. У Fortune 100 теж 11, але зі ста. Сам llms.txt трафіку не дає, зате показує, що хтось у компанії вже думає про AI-пошук. Кумедно, що в Сільпо llms.txt є, а GPTBot на головну не пускають. Гарна ілюстрація того, що сайтом великої компанії керує більше ніж один відділ.

Агенції роблять у себе те, що продають

Цього я не очікував. 33 агенції охайніші і за американських гігантів, і за українські бренди за всіма базовими перевірками: у 25 із 28 рівно один H1, у 23 розмітка організації, у 15 із 33 є llms.txt, і жодна не закриває AI-ботів у robots.txt.

Наймати їх лише за це не варто: чистий сайт на 300 сторінок мало що каже про роботу з 80 тисячами. Але він добре показує розрив, який агенція для великого бізнесу має закрити. Те, що легко тримати в порядку на маленькому сайті, важко втримати на великому, бо шаблони чіпають десятеро людей.

Наш seoquick.com.ua я прогнав тим самим скриптом. Усі десять ботів отримали відповідь 200, robots.txt відкритий, llms.txt є, один H1, розмітка організації, hreflang на три мови і 1 695 слів до JavaScript. Полагодити свій сайт було недорого. У цьому і сенс.

Перевірити ваш сайт так само?

Надішліть домен. Я прожену ті самі перевірки по ключових шаблонах і скажу, яких AI-ботів ви пускаєте, яких ні і в якому відділі це вирішили. Ви отримаєте сирі результати, а не презентацію.

Безкоштовно і ні до чого не зобов'язує.

Записатися на дзвінок

Як повторити перевірку самостійно

Для першого погляду агенція не потрібна. Три команди в терміналі покажуть більшу частину того, що знайшов мій скрипт. Замініть домен на свій.

Перша: чи згадує robots.txt AI-ботів узагалі.

curl -s https://www.example.com/robots.txt | grep -i -E "gptbot|oai-searchbot|chatgpt-user|claudebot|perplexitybot|google-extended|ccbot"

Друга: чи відповідає захист AI-боту так само, як браузеру. Порівняйте коди відповіді.

for ua in "Mozilla/5.0 Chrome/130" \
  "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" \
  "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.2; +https://openai.com/gptbot)" \
  "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)"; do
  curl -s -o /dev/null -w "%{http_code}  $ua\n" -A "$ua" https://www.example.com/
done

Третя: скільки тексту на сторінці до JavaScript.

curl -s -A "Mozilla/5.0 Chrome/130" https://www.example.com/ \
  | sed -e 's/<script[^>]*>.*<\/script>//g' -e 's/<[^>]*>/ /g' | wc -w

Остання команда груба і рахує частину меню та підвалу. Але якщо на сторінці, яка в браузері виглядає повною, виходить менше 100 слів, ви бачите те саме, що AI-бот. Проженіть її на головній, на шаблоні категорії чи товару і на статті з довідки. Якщо три числа сильно різняться, перше завдання для розробників у вас уже є.

Чого ці команди не покажуть: що отримують справжні боти зі своїх справжніх адрес. Для цього потрібні логи сервера або CDN, відфільтровані за User-Agent і перевірені за IP. Це перше, що варто попросити у своїх розробників, і перше, що агенція має попросити у вас.

Якими інструментами я це роблю (з розкриттям)

SEOquick — партнер SE Ranking і Semrush, посилання в цьому розділі реферальні: якщо ви оформите підписку через них, ми отримаємо комісію, для вас ціна не змінюється. Ми платимо за обидва сервіси й користуємося обома щодня, тож ось що кожен робить у такій роботі.

Для великого проєкту, найімовірніше, знадобляться обидва: один як щоденний робочий інструмент, другий як друга думка щодо цифр. Ми порівняли їх на 26 реальних сайтах із даними Search Console у статті SE Ranking чи Semrush. Жоден не замінить ваші логи й Search Console, але обидва набагато кращі за здогадки.

Що агенція має зробити за перші 90 днів

Коли я читаю пропозицію будь-якої агенції, нашої теж, я шукаю роботи саме в такому порядку. Якщо план починається з контент-календаря, агенція продає проєкт для маленького сайту за ціною великого.

Тижні 1–3: логи, а не краулер

Краулер на кшталт Screaming Frog показує, куди може дійти краулер. Логи сервера показують, що насправді запитували Googlebot, GPTBot і ClaudeBot, як часто і що отримали у відповідь. На великому сайті це дуже різні списки. Vercel нарахував близько 35 % відповідей 404 у запитах ChatGPT і Claude у своїй мережі проти 8 % у Googlebot. AI-боти витрачають візити на мертві адреси, і лише логи показують, на які.

Спитайте агенцію, хто отримає доступ до логів, у якому вигляді і скільки часу у вашій компанії займає таке вивантаження. Якщо агенція жодного разу не просила логи у служби безпеки, ви дізнаєтеся це на другому тижні.

Тижні 2–4: мапа того, хто володіє входом на сайт

Фаєрвол, CDN, захист від ботів, ліміти запитів, гео-правила. Треба записати кожен шар між запитом і сторінкою, хто ним володіє і що він робить із Googlebot, Bingbot і AI-ботами. А потім домовитися про політику свідомо: яких AI-ботів пускаємо, яких ні і чому.

Другий місяць: що віддає сервер

Текст, title, H1, мікророзмітка і внутрішні посилання мають приходити із сервера на тих шаблонах, що важливі. Це робота розробників, тож в агенції потрібна людина, яка напише завдання мовою ваших програмістів і перевірить його на тестовій версії сайту, а не просто надішле PDF.

Другий–третій місяць: по одному ринку за раз

hreflang, мовні папки, яка версія має ранжуватися в якій країні. У 26 із 40 українських головних є hreflang: у нас майже всі великі сайти двомовні, а часто й тримовні. Перш ніж пропонувати нове, агенція має показати сторінки, що ранжуються не тією мовою або не в тій країні.

Третій місяць: шаблони, а не сторінки

На великому сайті ніхто не оптимізує 40 тисяч карток товару. Оптимізують один шаблон і дані, що його наповнюють. Я розбирав, як Wise побудував програмні сторінки і як влаштовані огляди на Rtings.com. В обох випадках вирішальною була модель даних, а не тексти.

Увесь час: авторитет, бо текст більше не дефіцит

Це моє особисте переконання. У LinkedIn я нещодавно писав (перекладаю): «якщо хороший контент доступний кожному, головним активом стають посилання і згадки». Для великого бренду це означає регулярний digital PR, а не пакет посилань. На одному з моїх проєктів ми випускали 12 пресрелізів на тиждень. За моїм розрахунком, публікації замінили посилання й медіа приблизно на $3,7 млн на рік. Вдалий реліз приносив понад 55 посилань і згадок, слабкий — однаково 5–10.

І про поведінку користувачів, бо AI вчиться і на ній. У статті про GEO я писав: «GEO — це не спроба обдурити AI. Це доказ для AI, що люди обирають вас.» На сайті американського клієнта з ніші схуднення ми переписали title і H1 під людей, і всього за місяць трафік виріс зі 100 тисяч до 200 тисяч.

Червоні прапорці в пропозиції агенції

• Головний результат — кількість ключових слів. «Просунемо 500 запитів» нічого не означає на сайті, де один шаблон відповідає за 40 тисяч із них.
• Ані слова про логи. План для великого сайту, побудований лише на краулері, — це здогадки про те, що роблять боти.
• Тексти раніше за технічний доступ. Тридцять нових статей на місяць на сайті, де картки товарів ідуть AI-ботам порожніми, — гроші не на тому поверсі будівлі.
• AI-видимість окремим допродажем. Якщо GEO — рядок у кінці кошторису, агенція не пов'язала його з рендерингом, захистом і мікророзміткою, а саме там він і відбувається.
• Звіт у позиціях, а не в сторінках і грошах. Позиції за 500 запитами скачуть щодня. Керівництву важливо, які шаблони виросли чи просіли і скільки це коштувало.
• Не названо людину, яка говоритиме з розробкою. Якщо кожна правка йде PDF-файлом у відділ маркетингу, там вона і лишиться.

Скільки коштує SEO для великого бізнесу

Українські агенції ціни на таку роботу майже не публікують, а американські — небагато. Ось що вдалося знайти в американських агенцій на їхніх же сторінках або в добірках, які стоять у видачі Google США за запитом «enterprise seo agency»:

AI-огляд Google за цим запитом називає типову вилку $7 000–25 000+ на місяць. Чому iPullRank в одному місці коштує $15 000, а в іншому $50 000? Найімовірніше, одна цифра — програма, а друга — мінімальний контракт, і автори добірок переписують ту, яку знайшли першою. Тому ціну варто брати письмово в самої агенції.

В Україні та сама робота коштує дешевше, але порядок цифр визначає не країна, а склад команди. Якщо потрібен один SEO-фахівець з аудитом раз на квартал, це одна сума. Якщо потрібні SEO, розробник, контент, PR і відео в одній команді, яка сама проводить правки через ваших програмістів, — зовсім інша. Ми рахуємо такі проєкти під задачу і збираємо команду під клієнта.

Хто пише добірки «найкращих агенцій»

Я прочитав 13 добірок «найкращих enterprise SEO-агенцій» з перших сторінок американського Google. 11 із них написали самі SEO-агенції. Усі 11 включили до списку себе, 9 поставили себе першими. Дві добірки — від українських агенцій, і обидві на першому місці у власному списку. Про те, що автор є у своєму ж рейтингу, чесно пишуть лише 4 з 11.

Цікавіше інше. Над усіма добірками Google показує AI-огляд зі своєю таблицею агенцій: WebFX, ResultFirst, SEO Brand, Loopex Digital і Workshop Digital. З тих, кого добірки називають найчастіше (iPullRank, Graphite, Seer Interactive, Siege Media), до таблиці не потрапив ніхто. Джерела під оглядом — здебільшого сторінки послуг агенцій, де прямо написано, що агенція робить, для кого і на якому масштабі.

Щоб перевірити, чи це не випадковість, я вивантажив дані по цих агенціях із модуля AI Search у SE Ranking: як часто сайт агенції цитують як джерело в AI-відповідях (AI Overviews, AI Mode, ChatGPT, Perplexity і Gemini, США) і як часто згадують бренд. Зріз за жовтень 2026 року.

WebFX цитують більше, ніж усіх інших разом, і саме його AI-огляд називає першим. Graphite, якого хвалять 7 добірок із 13, процитовано 17 разів. Три агенції, яких немає в жодній добірці, — ResultFirst, Workshop Digital і SEO Brand — потрапили до таблиці AI завдяки своїм сторінкам послуг. Похвала колег і цитування в AI — дві різні валюти.

AI обрав не тих, кого хвалять колеги, а тих, хто найзрозуміліше описав себе сам. Для вашого бізнесу висновок той самий: сторінка, яка просто й однозначно каже, хто ви і що робите, працює на AI-пошук сильніше за будь-який рейтинг.

Що ми робили на великому масштабі

Я в SEO з 2008 року, SEOquick працює з 2012-го. Наші найбільші проєкти зовсім не схожі на щомісячний звіт по 20 запитах:

Логотипів із Fortune 100 у нас немає. Є звичка, про яку ця стаття: ми спершу міряємо, потім пишемо, спершу лагодимо свій сайт, а коли роботі потрібен розробник, відеопродюсер чи PR-автор, він у тій самій команді, що й SEO-фахівець, а не у вхідних чужої агенції.

Як обрати: питання на першому дзвінку

Добірки сходяться в критеріях: досвід на масштабі (10 добірок із 13), кейси (9), готовність до AI-пошуку (7), звітність до грошей (7). Усе правильно, і все легко заявити. Ці питання підробити важче:

• «Хто в нас відповідає за захист сайту і CDN, і як ви з ним працюватимете?» Якщо відповідь «перевіримо robots.txt», шукайте далі.
• «Що бачить GPTBot на трьох наших головних шаблонах?» Серйозна агенція захоче перевірити, а не вгадувати.
• «Як правка потрапить у наш спринт?» Попросіть приклад завдання, яке агенція писала розробникам іншого клієнта.
• «Які з ваших цифр будуть у договорі?» Якщо ви бачили ціну в добірці, попросіть агенцію її підтвердити.
• «Хто конкретно працюватиме над нашим проєктом і чим іще він зайнятий?» Імена, а не посади.
• «Чого ви не робитимете в перші 90 днів?» Відповідь покаже, чи є в агенції план, чи лише меню послуг.

Якщо у вас на руках уже є пропозиція, я прочитаю її за цим списком. Це найкорисніше, що я можу для вас зробити до того, як ви щось підпишете.

Питання

Чи треба закривати сайт від AI-ботів?

Це рішення бізнесу, а не налаштування за замовчуванням. Закрити ботів, що навчають моделі, як-от GPTBot, і пустити агентів, які відкривають сторінку на запит живої людини (ChatGPT-User, Claude-User, Perplexity-User), — розумна середина. Так сьогодні і роблять Сільпо, Kernel і SOCAR. Нерозумно не знати, що у вас налаштовано. Перевіряйте захист на вході, а не лише robots.txt.

Агенція чи своя команда?

Великій компанії зазвичай потрібні обидві. Свій фахівець відповідає за пріоритети і внутрішні погодження. Агенція приносить людей, яких компанія не тримала б у штаті: аналіз логів, JavaScript SEO, міжнародне просування, digital PR.

Скільки чекати на результат?

Технічні правки на шаблонах дають ефект за один-три місяці після викатки, а викатка у великій компанії сама по собі займає від тижня до кварталу. Тому перші 90 днів — це здебільшого доступи, логи і перші завдання у спринті.

Читайте також

• Як обрати SEO-агенцію
• Скільки коштує SEO-просування
• Найкращі B2B SEO-агенції
• Договір із SEO-агенцією
• Кейс digital PR
• GEO і видимість в AI
• Технічний аудит сайту

Скрипти й сирі результати заміру — наші, від 24 жовтня 2026 року; ціни — зі сторінок агенцій і з перелічених добірок на ту саму дату. Якщо проженете перевірку на своєму сайті й побачите щось дивне, напишіть мені. Я таке збираю.