Разработать бота-краулера для парса всех каналов в телеграм в бд MySQL

25.11.2024 09:53

«Фрилансим»

Что это - канал чат группа бот или как они там делятся, далее буду писать просто канал, подразумевая любой тип

Парсить:

URL канала

Название канала

Описание канала

Дата создания канала

Ссылку на картинку канала (аватар)

ID канала

Верифицирован канал или нет

10 последних постов с канала

url последнего поста - там последние цифры в урле - это количество постов...

Дата последнего поста...

Все похожие каналы - добавляем в списко для дальнейшего обхода (только уник значения)

Далее просто цифирки...

Количествово Подписчики — количество пользователей, которые подписаны на канал

Просмотры постов - Среднее значение просмотров одного поста, вычисляется в зависимости от количества публикаций на канале (При этом не учитываются удаленные посты)

Коэффициент вовлеченности (Это соотношение среднего числа просмотров одного поста к количеству подписчиков)

Упоминания - Общее количество упоминаний канала за все его существование. Эта метрика показывает, как часто другие каналы ссылались на этот канал в своих постах

Постов в день - Среднее количество публикаций канала в день за последние 30 дней (Определяем по формуле, сумма постов за последние 30 дней, разделенная на 30)

Реакции - Среднее количество реакций на один пост за последние 30 дней (Определяем по формуле: сумма реакций на посты, деленная на количество постов за последние 30 дней), не на всех каналах включены

Комментарии - Среднее количество комментариев на один пост за последние 30 дней (Определяем по формуле: сумма комментариев постов, деленная на количество постов за последние 30 дней), не на всех каналах включены

Репосты - Среднее количество репостов одного поста за последние 30 дней (Определяем по формуле: сумма репостов постов, разделенная на количество постов за последние 30 дней. Мы учитываем все распространения постов, которые делают пользователи)

Эти все данные собирает сервис https://telemetr.io/ru/channels/1006503122-durov/invite-links, значит и мы сможем)

предварительный список такой

но если можно еще получить какие то данные було бы супер - нам нужно макисмум инфы о каналах...

может есть инфа что канал удален или все что угодно, но относящееся к каналу именно...

как т

Moscow.media

Частные объявления сегодня

Rss.plus

Все новости за 24 часа

Ru24.pro

В Солнечногорске сотрудники Росгвардии почтили память коллег, погибших при исполнении служебного долга

Лучшие студенческие энергетические отряды «Россети Центр» и «Россети Центр и Приволжье» награждены в Москве

В Подмосковье сотрудники Росгвардии задержали гражданку, находившуюся в федеральном розыске

Life24.pro

Компания «КЕНГУРУ.ПРО» приняла участие в благоустройстве набережной Махачкалы

Андрей Губин завершил карьеру из-за проблем со здоровьем

Как Майли Сайрус нашла баланс между жизнью и карьерой?

Что посмотреть в Майкопе за один день: маршрут по главным достопримечательностям

Today24.pro

Best Black Friday office chair and desk deals: November 28

Lucas County Dogs for Adoption: 11/28

The Evolution of Graphic Design: What Today’s Designers Offer

Derek Chisora unveils plan for shock career change once he’s retired from boxing – but plans dream 50TH fight first

News24.pro

Каршеринг BelkaCar награжден премией «Бренд года в России 2024»

StarLine на Международном полимерном симпозиуме

Восход Луны над Колчимским камнем

Сегодня утром в Новосиле горел жилой дом

Game24.pro

Riot is flexing its anticheat Vanguard by placing a bounty of up to $100,000 for anyone brilliant enough to find and report gaps in the system

Meet weird avians, save a kidnapped goddess, and explore a gorgeous lantern world inspired by Persian art in this very funny new indie adventure game

Suicide Squad: Kill the Justice League is $3.50 on Steam, letting you poke around one of 2024's most interesting failures for the price of a cheeseburger

Plug In Digital перевыпустит Serial Cleaner на iOS и Android

Ua24.pro

Секретар Миколаївської міськради у робочий час у нетверезому стані рекламував свій бізнес

Russia24.pro

Интересные каналы в Telegram. Лучшие каналы в Telegram.

Продвижение Песни в Мою Волну музыкального стриминга Яндекс Музыка.

Estet Fashion Week 2024: итоги 26-го сезона международной Недели моды, прошедшей в Москве

Лучшие студенческие энергетические отряды «Россети Центр» и «Россети Центр и Приволжье» награждены в Москве

Другие проекты от SMI24.net

News-life

«Краснодар» сыграет со «Спартаком» в центральном матче 17-го тура чемпионата России

Time to Cashmere

Интересные каналы в Telegram. Лучшие каналы в Telegram.

Лучшие студенческие энергетические отряды «Россети Центр» и «Россети Центр и Приволжье» награждены в Москве

Ru24.net

Обвиняемые частично признали вину в хищении 200 млн руб через «Пушкинские карты»

Новогодний хит! от MYAKESH Слушайте «Новогоднюю»!

Делегация России покинула Пхеньян после стратегических переговоров с Ким Чен Ыном

В Петербурге в декабре проведут фестиваль сербского кино

News.tennis

Казахстанская теннисистка из топ-30 WTA одержала победу на турнире в России

Джокович объяснил, почему выбрал Энди Маррея своим тренером

Хачанов намерен вернуться в топ-10 рейтинга ATP в следующем году

Бублик проиграл на турнире в Санкт-Петербурге

29ru.net

В Петербурге в декабре проведут фестиваль сербского кино

WSJ: Китай стал изучать опыт России по противодействию западным санкциям

"Это не ваша земля": Муфтий-отщепенец Дамир Мухетдинов отказал русским в праве на Россию

Обвиняемые частично признали вину в хищении 200 млн руб через «Пушкинские карты»

Музыкальные новости

Poisk-music.ru

VK Музыка подвела итоги года: MACAN, Miyagi & Эндшпиль, Баста и другие артисты — в топе прослушиваний за 2024-й

Продвижение Музыки. Продвижение Песен. Раскрутка Песни.

“Пока, неудачница. Живи теперь на эти отнятые у меня деньги”, – Волочкова рассказала как мать продала ее квартиру и забрал деньги себе

«В туалете будешь смотреть?»: Лепс пристыдил зрителя на концерте в Челнах

Ria.city

Интересные каналы в Telegram. Лучшие каналы в Telegram.

Лучшие студенческие энергетические отряды «Россети Центр» и «Россети Центр и Приволжье» награждены в Москве

Продвижение Песни в Мою Волну музыкального стриминга Яндекс Музыка.

Росавиация: рейсы из России на Кубу будут длиться дольше из-за дозаправки

Rss.plus

Новогодний хит! от MYAKESH Слушайте «Новогоднюю»!

Водитель Mitsubishi насмерть сбил женщину на севере Москвы

"С 1 декабря все станет бесплатным": "Пятерочка", "Магнит" и "Ашан" подтвердили решение

В Солнечногорске сотрудники Росгвардии почтили память коллег, погибших при исполнении служебного долга

Auto.russia24.pro

Из пункта М в пункт П // «Ъ» напоминает, сколько времени уходило в разные времена на дорогу из Москвы в Петербург по воде, по земле и по воздуху

Баскетболисты МБА-МАИ обыграли «Автодор» в матче Единой лиги ВТБ

Водитель Mitsubishi насмерть сбил женщину на севере Москвы

Алексей Тузов для Известий: Эксперт спрогнозировал рост цен на авто из-за увеличения утилизационного сбора

Putin.russia24.pro

Путин передал часть функций по развитию фонда "Сколково" властям Москвы

Посол ФРГ назвал основную мысль Шольца в телефонном разговоре с Путиным

Путин уточнил порядок прохождения контроля транспортных средств

Нехаммер допустил визит в Москву и Киев при снижении боевой активности

Health.russia24.pro

В Петербурге и Ленобласти вырос спрос на антидепрессанты на 17%

Подросток попал в больницу из клуба из-за отравления неизвестным веществом

Из клуба — в больницу: в Москве подросток госпитализирован из-за отравления

Спрос на антидепрессанты в Петербурге и Ленобласти увеличился на 17%

Zelensky.russia24.pro

Βмecтο угля мοжeм тοпить муcοpοм – пapтия Зeлeнcκοгο пοдбaдpивaeт «гpοмaдян»

Sport.russia24.pro

Баскетболисты МБА-МАИ обыграли «Автодор» в матче Единой лиги ВТБ

Гран-при за танец, ставший эталоном

Кубок России (жен). 1/2 финала. «Ленинградка» на тай-брейке уступила московскому «Динамо», «Динамо» из Казани встретится с «Локомотивом»

ЦСКА спас ничью в матче с "Рубином" в РПЛ, благодаря голу Лукина на 96-й минуте

Person.russian.city

Сергей Собянин. Главное за день

Собянин: Ежегодно реставрируется около 500 объектов культурного наследия

Собянин рассказал о памятниках архитектуры, которые реставрируют в Москве

Сергей Собянин объявил о начале приема заявок на архитектурную премию Москвы

Ecology.russia24.pro

Вадим Петров поздравил ВООП со 100-летием и предложил новую парадигму восстановления экосистем

Вешенка, дрожалка, булгария: какие грибы можно встретить в Москве зимой

Количество электромобилей в Москве может вырасти до 320 тыс к 2030 году

В Hybrid Platform появилась функция создания кастомных метрик

29ru.net

В Петербурге в декабре проведут фестиваль сербского кино

В Росавиации сообщили, что авиавласти Кубы отменили извещения о дефиците топлива

"Это не ваша земля": Муфтий-отщепенец Дамир Мухетдинов отказал русским в праве на Россию

Что изменится в российских законах в декабре: новые правила и запреты

Severodvinsk.ws

В Архангельске определили чемпионов Поморья по настольному теннису

Школьники из Архангельской области – в числе победителей и призеров Национальной технологической олимпиады Junior

В Архангельске представили выставку «Мечта о Севере. Снегурочка»

События Архангельской области признали лучшими в финале премии Russian Event Awards – 2024

Sevpoisk.ru

«Динамика будет сдержанной». Пока где-то «вторичка» дорожает, в Симферополе она дешевеет, но это не точно

В рейтинге качества жизни российских городов Ростов обвалился сразу на 17 мест

Россияне активно воруют масло из магазинов по всей стране

В России массово воруют масло: за неделю заведено около 50 дел

103news.com

Главный тренер ульяновской футбольной «Волги» Михаил Белов: «Команда на 100% реализовала свой потенциал»

Новогодний хит! от MYAKESH Слушайте «Новогоднюю»!

Первая Снежная Битва Под Бородино

В Ярославле дали прогноз погоды на новогоднюю ночь

Агрегатор новостей 24СМИ