Ищу консультанта, который поможет определить оптимальные решения для создания системы автоматического парсинга и анализа данных о коммерческой недвижимости с сайтов ЦИАН и Авито. Задача включает в себя сбор данных, их обработку и анализ для поиска недооценённых объектов коммерческой недвижимости.
Что мне нужно узнать:
1) Какие готовые решения для парсинга ЦИАН и Авито существуют на рынке, и насколько они подходят для моей задачи.
2) Какими инструментами и технологиями лучше всего реализовать сбор данных и их анализ.
3) Оценка бюджета на разработку с нуля и возможность использования готовых решений для оптимизации затрат.
4) Как организовать автоматический сбор данных с периодичностью раз в 4 часа.
5) Какие существуют варианты для хранения и обработки больших объёмов данных (Google Sheets, Airtable или другие).
что важное я хочу получить:
Советы по выбору инструментов для парсинга.
Оценку времени и бюджета для разработки решения или использования готового сервиса.
Возможности интеграции с аналитическими инструментами
Идеи для упрощения процесса и повышения эффективности.