Добавить новость
Главные новости Москвы
Москва
Август
2024

Скрипт для скачивания содержимого страницы с сайта mid.ru

0
Нужно создать скрипт на NodeJs 18 скачивающий html содержимое страницы https://mid.ru/ru/foreign_policy/news/ для последующего парсинга новостей
1. Должен быть выполнен в виде Typescript класса. У класса должен быть метод - getContent(): strng, возвращающий html с новостями. Этот метод должен генерировать исключение в случае таймаута получения страницы.
2. Простой способ скачивания этого url не работает. Создатели сайта сделали защиту от ботов. Нужно полностью эмулировать работу браузера для получения содержимого
3. Код должен работать на VPC сервере с Ubuntu 20 без UI интерфейса. Т.е. браузер там не установлен
4. Код будет запускаться на VPC сервере внутри России



Москва на Moscow.media
Частные объявления сегодня





Rss.plus




Спорт в Москве

Новости спорта


Новости тенниса
Зарина Дияс

Зарина Дияс сыграла драматичный матч за выход в финал турнира в Таиланде






Два брата хотели разбогатеть на торговле героином в Брянске

Стали известны имена первых победителей экстремального забега «Полюс холода — Оймякон»

«Сильно похудела». Умерла известная актриса

Сбербанк назвал три главные мошеннические схемы на 2025 год с использованием ИИ