Как попасть в ответы Perplexity: роботы, настройки сайта и содержание

Yakiv Romanchuk, основатель JW2D · Опубликовано

Коротко

Чтобы появляться в ответах Perplexity, сайт должен быть доступен для PerplexityBot — робота, который, по словам Perplexity, нужен, чтобы показывать сайты и ссылки на них в результатах поиска. Perplexity советует разрешить его в robots.txt и пишет, что он не собирает контент для обучения базовых моделей ИИ. Дальше решает содержание: в исследовании GEO, которое проверяли и на Perplexity, заметность страницы в ответах повышали цитаты, статистика и ссылки на источники.

Два робота Perplexity

Робот Что делает (по данным Perplexity) robots.txt
PerplexityBot Показывает сайты и ссылки на них в результатах поиска Perplexity; не собирает контент для обучения базовых моделей ИИ Соблюдает robots.txt; Perplexity советует его разрешить
Perplexity-User Заходит на страницу, когда пользователь задаёт вопрос, чтобы ответить и дать ссылку; не используется для сбора данных и обучения Как правило, игнорирует robots.txt, потому что запрос сделал пользователь

Perplexity публикует IP-адреса обоих роботов (perplexitybot.json и perplexity-user.json), чтобы их можно было разрешить в файрволе или CDN, и предупреждает, что изменения могут учитываться до 24 часов.

Технический чек-лист

  1. robots.txt. Убедитесь, что PerplexityBot не запрещён — ни по имени, ни общим правилом «запретить всех ботов».
  2. Файрвол и CDN. Защита от ботов может блокировать роботов, даже если robots.txt их разрешает. Если вы используете Cloudflare или похожий сервис, проверьте настройки ботов и опубликованные Perplexity IP-адреса.
  3. Содержание в HTML-тексте. По нашей практике, текст, который появляется только после выполнения скриптов или только на картинках, ИИ-роботы читают менее надёжно.
  4. Поисковые индексы. Держите сайт в индексе Google и Bing: отвечающие системы и их пользователи опираются на открытый интернет, и хорошая индексация помогает везде.

Какой контент цитируют

Исследование, в котором впервые описали generative engine optimization, проверяло методы и на тестовом наборе, и на работающем Perplexity.ai. Авторы сообщают, что лучше всего работало добавление цитат, статистики и ссылок на источники — на Perplexity рост достигал 37% по одной из метрик видимости, — а набивка ключевыми словами почти ничего не давала.

На практике это значит:

  • Отвечайте на вопрос в первых предложениях страницы или раздела.
  • Используйте цифры: цены, сроки, размеры, даты.
  • Ссылайтесь на источники: исследования, официальную документацию, данные.
  • Цитируйте экспертов, в том числе своих сотрудников, с именем и должностью.
  • Держите факты о компании одинаковыми на сайте, в каталогах и профилях (наша практика).

Как проверить, цитирует ли вас Perplexity

Perplexity показывает источники рядом с каждым ответом. Задайте ему вопросы, которые задают ваши клиенты, на их языках, и запишите, есть ли ваши страницы среди источников и кого цитируют вместо вас. Повторяйте каждый месяц с тем же списком, чтобы видеть динамику.

Источники

  1. Perplexity Docs. Perplexity Crawlers
  2. Aggarwal P. et al. GEO: Generative Engine Optimization. arXiv:2311.09735, KDD 2024

Частые вопросы

Как попасть в Perplexity?

Разрешите PerplexityBot в robots.txt и в файрволе или CDN, сделайте содержание доступным текстом и чётко отвечайте на вопросы клиентов с фактами и источниками.

Обучается ли Perplexity на моём сайте?

Perplexity пишет, что PerplexityBot не собирает контент для обучения базовых моделей ИИ, а Perplexity-User не используется для сбора данных и обучения.

Нужно ли блокировать Perplexity-User?

По данным Perplexity, этот робот, как правило, игнорирует robots.txt, потому что запрос делает пользователь. Блокировка также лишит пользователей возможности получить вашу страницу как источник.

Когда вступят в силу изменения в robots.txt?

Perplexity пишет, что системе может понадобиться до 24 часов, чтобы учесть изменения.

Какой контент Perplexity цитирует чаще?

В исследовании GEO, где были и тесты на Perplexity, больше всего видимости получали страницы с цитатами, статистикой и ссылками на источники; набивка ключевыми словами не помогала.

Хотите, чтобы ИИ рекомендовал ваш бизнес?

Проверим, что ChatGPT, Gemini и Perplexity отвечают о вашей нише сегодня, и покажем, с чего начать.

Другие статьи