Примеры употребления "краулерам" в русском

<>
Переводы: все65 crawler65
Информацию по спискам разрешенных IP-адресов и строкам пользовательских агентов для краулеров Facebook см. в руководстве по краулерам Facebook. We've provided information on IP whitelists and User Agent strings for Facebook's crawlers in our Facebook Crawler guide.
2. Доступ для краулера Facebook 2. Facebook Crawler access
После загрузки URL краулер ищет следующее: When a URL is loaded, the crawler will look for:
Перенаправьте краулер Facebook на старый URL Redirect Facebook's crawler to the old URL
Предоставить доступ краулеру можно двумя способами. There are two ways to give the crawler access:
5. Доступ к материалам для краулера Facebook 5. Ensure Facebook Crawler Can Reach Your Content
Ваши страницы должны быть доступны для краулера. Your pages should be visible to the crawler.
(Краулер Facebook поддерживает только материал, не заголовки HTTP.) (Facebook's crawler only supports content, not HTTP headers.)
Используется для ограничения периодичности скрапинга материалов краулерами Facebook. Use this to rate limit the Facebook content crawlers.
1. Исключите краулер Facebook из запроса на перенаправление HTTP. 1. Exempt the Facebook crawler from your HTTP redirect
Убедитесь, что краулер Facebook имеет доступ к вашем сайту Make sure the Facebook Crawler can access your site
Для идентификации краулера используются следующие строки запросов программного агента: The Facebook crawler can be identified by either of these user agent strings:
Добавьте IP-адреса, используемые краулером, в список разрешенных, что гораздо безопаснее. Whitelist the IP addresses used by the crawler, which is more secure:
Выполните следующую команду, чтобы получить актуальный список IP-адресов, используемых краулером: Run this command to get a current list of IP addresses the crawler uses.
Краулер Facebook выполняет повторный скрапинг объектов (и обновляет их) в следующих случаях: The Facebook crawler will re-scrape (and therefore update) objects:
Вы увидите метатеги, скрапинг которых выполняет краулер, а также ошибки и предупреждения. It will show which meta tags the crawler scrapes as well as any errors or warnings.
При необходимости наш краулер может пройти всю цепочку перенаправления, чтобы разрешить канонический URL. If needed, our crawler will follow a chain of redirects to resolve the canonical URL.
О том, как распознать краулер Facebook, читайте в нашем руководстве «Рекомендации по публикации». You can learn how to recognize Facebook's crawler in our Sharing Best Practices Guide.
При необходимости краулер также может пройти всю цепочку перенаправления, чтобы найти канонический URL. If required, the crawler will also follow a chain of redirects to find the canonical URL.
В нем вы увидите теги, скрапинг которых выполнил краулер, а также ошибки и предупреждения. This will show the tags the crawler scraped as well as any errors or warnings.
Примеры употребления слов в разных контекстах предоставляются исключительно в лингвистических целях, т. е. для изучения употребления слов в одном языке и вариантов их перевода на другой. Все образцы собраны автоматически из открытых источников с помощью технологии поиска на основе двуязычных данных. Если вы обнаружили орфографическую, пунктуационную или иную ошибку в оригинале или переводе, используйте опцию "Сообщить о проблеме" или напишите нам

В этом разделе вы можете посмотреть, как употребляются слова и выражения в разных контекстах на реальных примерах. Все примеры собраны из уже переведенных текстов: официальных документов, сайтов, журналов и диалогов из фильмов. Раздел Контексты поможет в изучении английского, немецкого, испанского, русского и других языков. Здесь вы сможете найти примеры с фразовыми глаголами, устойчивыми выражениями и многозначными словами в разнообразных по стилю и тематикам текстах Примеры можно отсортировать по переводам и тематикам, а также сделать уточняющий поиск по найденным примерам.

Изучайте иностранные языки, смотрите перевод миллионов слов и выражений, проверяйте их употребление на реальных примерах благодаря нашей технологии поиска на основе двуязычных данных!