Параллельная обработка
Почему большая задача обрабатывается эффективнее
Внутри одной задачи домены обрабатываются параллельно — по несколько одновременно. Поэтому чем больше доменов загружено в задачу, тем быстрее идёт обработка в пересчёте на один домен: параллельные слоты постоянно заняты, и конвейер работает на полную мощность.
Что из этого следует
- Крупный список выгоднее набора мелких задач: внутри задачи домены идут параллельно, а обращения к источникам данных группируются в пакеты. В «Подборе домена» разница ещё заметнее — там задачи выполняются строго по одной, и десять мелких будут ждать друг друга в очереди.
- Задача из одного домена не использует параллельность вовсе — это самый медленный способ проверки в пересчёте на домен.
- Число параллельных доменов зависит от раздела и нагрузки сервиса и управляется автоматически — ничего настраивать не нужно.
Рекомендация: собирайте домены в крупные задачи в пределах вашего лимита «Доменов в задаче» (виден на дашборде).