Добавить новость
ru24.net
Все новости
Декабрь
2024
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30
31

Разработка парсера бк

0
Требуется написать парсер, а также адаптировать написанные разработчиком парсер, если сайты будут меняться.
Среднее время реализации парсера при должной подготовке 1-3 дня.

Основная задача состоит в том, чтобы парсить данные стабильно, быстро и незаметно для сайтов, язык разработки python.

Вам предстоит исследовать сайт – выяснить как фронтенд взаимодействует в бэкендом, найти полезные эндпоинты, которые отдают данные. Наилучший вариант – если вы найдете как подписаться на пуши ( например по вебсокету или graphql) если они есть.
Также достаточно хороши эндпоинты отдающие интересующие нас данные как текущие снимки состояний или инкрементальные обновления через pull.

Подробное ТЗ составлено.

#####
По простому: основная работа не столько найти как доставать данные, сколько разобрать формат и отправить его в редис в нужном нам формате.
#####
Пожалуйста не отзывайтесь если у вас мало времени на реализацию этой задачи(она действительно довольно трудоемкая).



Moscow.media
Частные объявления сегодня





Rss.plus




Спорт в России и мире

Новости спорта


Новости тенниса
WTA

Определилась соперница Арины Соболенко во втором круге турнира WTA-500 в Брисбене






"На Новый год придет климатический кошмар": Вильфанд дал неожиданный прогноз на 31 декабря

Вильфанд пообещал москвичам "волшебную" новогоднюю ночь с морозами и снегом

В Москве прекратили реализацию орловских пельменей из-за сальмонеллы

Больше всего недвижимости было выкуплено девелоперами в центре столицы в 2024 году