Нужно разработать решение "под ключ" для автоматической проверки индексации большого количества страниц (от 1 миллиона URL) в поисковой системе Google.
Основные требования:
1. Без использования Google Search Console API (лимит слишком мал).
2. Система должна работать максимально быстро и стабильно, с минимальным риском блокировки.
3. Желательно автоматизация процесса (загрузка списка URL, запуск проверки, выгрузка результатов).
4. Результат проверки — таблица (CSV, Excel или Google Sheets) с пометкой, проиндексирована страница или нет.
5. Инструкции по запуску и использованию решения.
Желательно:
1. Возможность масштабирования (если нужно будет проверить ещё больше URL).
2. Возможность повторных проверок (например, раз в месяц).
3. Предложения по оптимизации скорости и снижению риска блокировки.