Индексирование сайта

Индексирование сайта

Индексирование сайта:  Загрузить все вэб-страницы из указанного домена или по ссылке.

Запуск индексирования сайта
Начальная ссылка (должна начинаться с
http:// https:// ftp:// smb:// file://)
empty
Список URL-адресов
Ссылка на карту сайта

загрузить все файлы в этом домене
загрузить файлы только по ссылкам указанным в URL-адресе
не больше чем документов

Подсказки

  • Ограничение скорости индексирования

    No more that four pages are loaded from the same host in one second (not more that 120 document per minute) to limit the load on the target server.

  • Цель балансировки

    Второе индексирование по другому хосту увеличивает пропускную способность индексирования до 240 документов в минуту с балансировкой нагрузки по всем хостам.

  • Высокая скорость индексирования

    'Медленное индексирование' не ограничено по одному хосту (или сайту) скорость индексирования которого может быть увеличена на неограниченное, когда число удалённых хостов высока. Это можно сделать с помощью запуска расширенного индексирования.

  • Управление планировщиком

    Расписание индексирования может быть изменено или удалено, используя управление API.