Есть несколько парсеров на Python. 3 самописных и 3 с rapidapi.com (по сути тоже готовые).
Нужно их доработать, а именно настроить запись в Apache Kafka, а из кафки разбор в ClickHouse.
Возможно, потребуются небольшие доработки по парсерам. Но в целом они простые - просто получаем гет запросами данные с веба и записываем куда нужно.
От исполнителя ожидаем: 1. Понимание и опыт работы с Apache Kafka и ClickHouse 2. Знания по настройке этих систем 3. Хорошие знания в Python 4. Свободное время для выполнения заказа
Подробное ТЗ по каждому парсеру пришлю исполнителю.
Потом нужно будет написать на FastApi API для работы с фронтом. Если сработаемся и будет желание, отдам этот проект вам.
В Чехове сотрудники Росгвардии задержали подозреваемого в незаконном обороте наркотиков в крупном размере
«Грузовичкоф» на передовой новых коллабораций с блогерами: выступление Наталии Поникаровской на конференции The Trends
В Чехове сотрудники Росгвардии задержали подозреваемого в незаконном обороте наркотиков в крупном размере
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Москве и Московской области 650 тысяч пенсионеров старше 80 лет получают пенсию в повышенном размере
Las Vegas GP F1 qualifying: George Russell takes pole, Lewis Hamilton only 10th
Exclusive: Sumit Kaul on joining the new season of Tenali Rama as Girgit; says ‘It will be a challenge for me to live up to the expectations of audience’
Michail Antonio reveals he was barred from entering the UK after passport blunder in nightmare international break
Sky Sports commentator stunned by ‘one of the strangest reactions to a goal I’ve ever seen’ by Watford fans
Филиал № 4 ОСФР по Москве и Московской области информирует:
Отделение СФР по Москве и Московской области оплатило свыше 243 тысяч дополнительных выходных дней по уходу за детьми с инвалидностью
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Москве и Московской области 650 тысяч пенсионеров старше 80 лет получают пенсию в повышенном размере
Bloody - участник и технический партнер Red Expo-2024
Суд обязал Водоканал Нижнего Тагила заплатить за нанесенный двум рекам ущерб
Five new Steam games you probably missed (November 25, 2024)
The community behind the PC port of Ocarina of Time have been secretly working on a native version of Star Fox 64
Your League of Legends rank will reset less in 2025, and creepy XP-boosting flowers will now grow around your corpse thanks to the new theme coming in season 1
Rejoice, roguelike nerds: Shiren the Wanderer: The Mystery Dungeon of Serpentcoil Island is coming to Steam
«Грузовичкоф» на передовой новых коллабораций с блогерами: выступление Наталии Поникаровской на конференции The Trends
Bloody - участник и технический партнер Red Expo-2024
Филиал № 4 ОСФР по Москве и Московской области информирует:
В Москве и Московской области 650 тысяч пенсионеров старше 80 лет получают пенсию в повышенном размере
В Италии прошел второй этап проекта «Культурная миссия в Италии»
Дерматолог Мадина Байрамукова: почему нужно насторожиться при избыточном росте волос
Врач-гигиенист клиники «Мегастом» Инна Гришина: как понять, что зубная паста вам не подходит
Филиал № 4 ОСФР по Москве и Московской области информирует:
Отделение СФР по Москве и Московской области оплатило свыше 243 тысяч дополнительных выходных дней по уходу за детьми с инвалидностью
Иммунный активатор под окном: доктор Садыков рассказал о свойствах шиповника