Бингбот
Оригинальный автор(ы) | Майкрософт |
---|---|
Тип | Веб-сканер |
Веб-сайт | Часто задаваемые вопросы о Бинг-боте |
Bingbot — это робот, сканирующий веб-страницы (тип интернет-бота ), развернутый Microsoft в октябре 2010 года для обеспечения Bing . [1] Он собирает документы из Интернета для создания поискового индекса для Bing (поисковой системы) . Он работает так же, Googlebot робот как . [2]
Поведение
[ редактировать ]Типичная строка пользовательского агента для Bingbot: «Mozilla/5.0 (совместимо; bingbot/2.0; +http://www.bing.com/bingbot.htm)» . Это появляется в журналах веб-сервера , чтобы сообщить веб-мастеру, кто запрашивает файл. Каждый веб-мастер может использовать включенный идентификатор агента «bingbot», чтобы запретить или разрешить доступ к своему сайту (по умолчанию доступ разрешен). [3] Если они не хотят предоставлять доступ, они могут использовать стандарт исключения роботов, чтобы заблокировать его (полагаясь на предполагаемое хорошее поведение bingbot) или использовать другие средства, специфичные для сервера (полагаясь на то, что веб-сервер выполнит блокировку). [4]
Ссылки
[ редактировать ]- ^ «Активность сканирования BingBot растет?» . Проверено 16 июля 2016 г.
- ^ Шеной, Аравинд; Прабху, Анирудх (26 июля 2016 г.). Знакомство с SEO: ваше краткое руководство по эффективным практикам SEO . Апресс. ISBN 978-1-4842-1854-9 .
- ^ Команда IntroBooks. Объяснение алгоритма Microsoft Bing . Вводные книги.
- ^ Зиглер, МГ (17 июля 2009 г.). «Не обращайте внимания на этого страшного MSNbot, это всего лишь дружелюбный BingBot, если только он не атакует!» . ТехКранч . Проверено 22 октября 2023 г.