Сотрудник поиска Google Джон Мюллер ответил на вопрос, как вызовы API для извлечения данных влияют на краулинговый бюджет.
Речь шла о сайте, который связывается с API на клиентском сайте для получения данных. Специалист спросил, учитываются ли эти URL в бюджете сканирования, и может ли использование директивы disallow привести к каким-либо проблемам.
Джон Мюллер ответил, что если эти вызовы включены в процесс рендеринга страницы, то они будут учитываться в бюджете сканирования. Google необходимо просканировать их, чтобы отобразить страницу.
Сканирование данных API/URL можно заблокировать с помощью директивы disallow (если на это расходуется большое количество ресурсов), но важно убедиться, что это не повлияет на рендеринг контента.
Если для успешного рендеринга необходимы эти данные, то эти URL нельзя закрывать от сканирования. Если же это какие-то вспомогательные данные, такие как рисунки, диаграммы и т.п., то риски минимальны.
Прослушать полный ответ Мюллера можно посмотреть, начиная с отметки 46:14.
[embedded content]
Источник: Twitter
Ozon запустил тестирование инструмента на базе искусственного интеллекта, который позволяет визуализировать одежду на виртуальных моделях. Продавцам достаточно загрузить фото одежды…
ИИ-помощник Aria, встроенный в браузер Opera, теперь может кратко пересказывать текстовые веб-страницы. Новый инструмент позволяет быстро сокращать новостные статьи, посты…
Преступники часто пытаются получить доступ к аккаунтам граждан на Госуслугах. Главная цель – оформить кредиты и микрозаймы на карту на чужие имена…
Объем рынка нативной рекламы по итогам первого квартала 2024 года достиг 2 млрд руб. Такую оценку сделали платформа управления интернет-рекламой…
Стартовал прием заявок на Всероссийский конкурс сайтов и приложений «Рейтинг Рунета-2024». Участвовать могут и создатели, и владельцы проектов. Для приложений…
VK объявляет о приобретении 40% компании Intickets.ru (Интикетс). Это облачный сервис для контроля и управления продажей билетов на мероприятия. Сумма…