Паралельна обробка

Чому велика задача обробляється ефективніше

У межах однієї задачі домени обробляються паралельно — по кілька одночасно. Тож що більше доменів завантажено в задачу, то швидше йде обробка на кожен домен: паралельні слоти залишаються зайнятими і конвеєр працює на повну потужність.

З цього випливає

  • Один список з 1000 доменів завершується помітно швидше, ніж 10 задач по 100 доменів, запущені одна за одною: маленькі задачі чекають одна одну в черзі, а всередині великої задачі домени виконуються паралельно.
  • Задача з одним доменом не використовує паралелізм взагалі — це найповільніший спосіб перевірки в перерахунку на домен.
  • Кількість паралельних доменів залежить від розділу і поточного навантаження сервісу та керується автоматично — налаштовувати нічого не потрібно.
Рекомендація: збирайте домени у великі задачі в межах ліміту «Доменів на задачу» (показано на дашборді).