Коротка вiдповiдь
Meta-ExternalFetcher — це завантажувач Meta для зовнішнього вмісту в контексті її продуктів.
Гiд по ШI-краулерах
Meta-ExternalFetcher: правильно налаштувати robots.txt
Meta-ExternalFetcher — це завантажувач Meta для зовнішнього вмісту в контексті її продуктів.
Факти про краулер
Факти про Meta-ExternalFetcher
Токен user-agent
Meta-ExternalFetcher
Оператор
Meta
Група KI-Console
Живі запити
Зазвичай з являється, коли ШI-запит користувача або шлях цитування доходить до сторiнки.
robots.txt
Обмежено для запитiв користувача
Документацiя
Вiдкрити джерельну документацiюЩо таке Meta-ExternalFetcher?
Meta-ExternalFetcher слід відрізняти від meta-externalagent. Його спостерігають як завантажувач зовнішніх адрес, а не як класичний SEO-сканер.
Призначення i SEO-сенс
У KI-Console цей бот належить до групи «живий запит». Візит може бути повʼязаний із конкретною продуктовою або користувацькою дією.
Видимiсть i приватнiсть
Блокування Meta-ExternalFetcher може зменшити те, як системи Meta бачать, iндексують, використовують для навчання або отримують ваш публiчний контент. Дозвiл покращує технiчний доступ, але нiколи не гарантує сканування, рейтинг, цитату чи позитивну ШI-вiдповiдь.
Meta публікує документацію про свої сканери, але user-agent можна підробити, а завантажувач може поводитися інакше, ніж самостійний сканер. Важливі рішення підкріплюйте журналами та закономірностями IP-адрес.
robots.txt для Meta-ExternalFetcher
Використовуйте точний токен Meta-ExternalFetcher у robots.txt. Приватнi шляхи блокуйте окремо, якщо доступною має бути лише частина сайту.
Дозволити :bot
User-agent: Meta-ExternalFetcher
Allow: /Заблокувати :bot
User-agent: Meta-ExternalFetcher
Disallow: /Чіткі відповіді
Що скептично налаштовані власники вебсайтів запитують найперше
KI-Console не продає магічну видимість. Ми робимо ваш вебсайт читабельнішим для ШІ-систем і показуємо докази там, де це дозволяють логи.
Що таке Meta-ExternalFetcher?
Meta-ExternalFetcher це краулер або керуючий robots.txt-токен оператора Meta. Факти вище показують призначення, поведiнку robots.txt i точнi правила дозволу або блокування.
Як заблокувати Meta-ExternalFetcher у robots.txt?
Використайте User-agent: Meta-ExternalFetcher i Disallow: /. robots.txt це директива для сумлiнних краулерiв, а не технiчна перепона доступу.
Чи зменшує блокування Meta-ExternalFetcher видимiсть у ШI?
Це може зменшити видимiсть у системах Meta, якщо вони бiльше не можуть сканувати, iндексувати, навчатися на вашому контентi або отримувати його. Ефект залежить вiд типу бота i продукту.
Перевірте свій вебсайт
Дізнайтеся, які сигнали ШІ працюють прямо зараз
Спершу запустіть безкоштовне сканування. З обліковим записом ви можете верифікувати домен, зберігати історію, генерувати файли та документувати візити краулерів із часом.