Добавить новость
ru24.net
Работа
Февраль
2025
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26
27
28

Доработать парсеры на ноде

0
Парсеры начали работать нестабильно из-за Cloudflare. Один парсер сломался, второй работает нестабильно, приходится делать кучку перезапросов. Больше не помогают "белые" прокси и хранение куков. Возможно они просто неправильно используются. Возможно следует использовать fingerprints. В общем, нужен человек, который хорошо соображает в ноде и парсинге, и имел опыт с cloudflare и соблюдает сроки или дает регулярную обратную связь при нарушении сроков.

Сервер на Ubuntu, скрипт на ноде c puppeteer и stealth плагином.

* ИИ программистам: Чат жпт за вас эту задачу не решит.



Moscow.media
Частные объявления сегодня





Rss.plus




Спорт в России и мире

Новости спорта


Новости тенниса
WTA

Мирра Андреева поднялась на четвертую позицию в гонке за чемпионство WTA.






Аня Чиповская, Лянка Грыу и другие гости запуска коллаборации театра Пушкина и ресторана «Savoy»

Как живут дети генсека Андропова: Миллионные долги перед налоговой, кредиторами и коммунальными службами

«Проигрывание психотравм»: каким мужчинам не стоит давать второй шанс

«Рожали на продажу»: многодетные матери поставили торговлю детьми на поток, им грозит «административка»