Гусеничный не ползут всего несколько страниц, ползет все остальное

Вопрос задан: 11 месяцев назад Последняя активность: 11 месяцев назад
up 0 down

У меня есть установка на гусеничном ходу в мое приложение и он прекрасно работает, но есть проблема с только пару адресов. Он не сканировал эти страницы, единственное различие, которое я вижу между этой парой страниц и другими страницами, которые ползали в них есть много суба ссылок на этих страницах, около 800-1000.

Можете ли вы помочь с любыми настройками, которые можно обновлять, чтобы увидеть, если они будут получать пополз.

Я использую этот искатель, который совместит с ES 5.6.3.

Благодарю.

1 ответ

Возможно, для Вашего проекта будут необходимы бесплатные векторные карты. На нашем сайте представлены карты для всех стран.

Реклама

up 0 down

Проверьте значение конфигурационного http.content.limit, его значение устанавливается 65536 в архетипе. Это может объяснить, почему вам не хватает внешних ссылок на больших документов. Установка в -1 будет гарантировать, что весь документ обрабатывается, независимо от его размера.