Доработать софт-парсер на селениуме
В данный момент есть парсер, который собирает нужные данные с форума-донора, заносит в БД и публикует на форуме-реципиенте
Парсер написан на :
Python 3.9+
selenium
Нужно доработать ряд моментов:
1. На форуме-доноре аккаунты с которых идёт парсинг быстро ловят бан из-за аномального поведения софта - он постоянно выполняет новый вход на форум-донор хаотически. Это видно по статистике входов на сервисе рукапча. Софт входит по 20+ раз в час и это триггерит алгоритмы. Так быть не должно.
Нужно чтобы софт один раз зашел и начал парсить не выходя из аккаунта.
2. Скорость. С прошлым исполнителем была задача настроить работу софта в два потока: один поток парсит, второй параллельно публикует посты. Но по факту все идёт очень медленно. Есть догадки почему. Обсудим уже непосредственно с исполнителем. То есть нужна оптимизация софта.
3. Убрать в переносимой информации ВСЕ упоминания форума-донора (ссылки, название на русском и английском языках)
Работа принимается после тестирования в течении трех дней
Тг @egermaster33
Moscow.media
Частные объявления сегодня
Свыше 6,5 тысячи жителей Москвы и Московской области получили справки о статусе предпенсионера в клиентских службах регионального Отделения СФР и МФЦ
Отделение СФР по Москве и Московской области предостерегает: не поддавайтесь на уловки мошенников!
Радио Romantika рекомендует open-air «Легенды мирового рока»
Мытищинское предприятие ООО «Водомер» получило Диплом победителя в региональном конкурсе «100 лучших товаров России»
Практиканты СЛД «Вязьма» филиала «Московский» компании «ЛокоТех-Сервис» успешно совмещают работу и учебу
Доктор Юзуп рассказала, как реакция организма на продукты может рассказать о скрытых заболеваниях
Анекс сделал заявление по Таиланду: теперь рейсы на Пхукет будут выполняться из 14 городов России, а в Паттайю из 4-х
Отечественные грузовые шины прошли испытания в рамках ралли-марафона «Шелковый путь–2024»
Boeing ‘humiliated’ over upstart rival SpaceX rescuing stuck astronauts | Reporter Replay
America ramps up hunt for Hamas boss Yahya Sinwar to try to stop all-out Middle East war
Eleven sensational Premier League transfers that could yet be done including huge deals for Man Utd and Chelsea
Deontay Wilder Rules Out Incredible Comeback Fight Offer: “Not Interested”
Депутаты хотят заставить кикшеринг платить за пользование улицами и тротуарами Екатеринбурга
В Челябинской области задержали автомобилиста, сбившего двух молодых пешеходов на обочине
Житель Сургута поверил в байки о "расследовании ФСБ" и перевел мошенникам почти 14 миллионов рублей
Drive Zone Online 1.0.0 (502)
Clair Obscur: Expedition 33 creative director speaks about the dark fantasy RPG's stunning Unreal Engine 5 graphics: 'It’s a key foundation for the studio to really look for the latest technology'
Выживач Tiles of Survive доступен в Google Play 27 стран
Мафия-НН: В уютном ресторанчике в центре города встретились девять одноклассников, чтобы отпраздновать Новый Год и провести веселый вечер
Як встановити ручки на планці для дверей
Радио Romantika рекомендует open-air «Легенды мирового рока»
Социальный фонд оказывает помощь эвакуированным жителям Курской области
Свыше 6,5 тысячи жителей Москвы и Московской области получили справки о статусе предпенсионера в клиентских службах регионального Отделения СФР и МФЦ
С начала 2024 года более 2,5 тысячи многодетных мам в Московском регионе досрочно вышли на пенсию
В Петербурге мужчине дали условный срок за сбыт алкоголя
Радио Romantika рекомендует open-air «Легенды мирового рока»
Свыше 6,5 тысячи жителей Москвы и Московской области получили справки о статусе предпенсионера в клиентских службах регионального Отделения СФР и МФЦ
В Москве показали макет вагона высокоскоростного поезда «Белый кречет»
Фигурантов дела о превышении полномочий при госконтракте арестовали в Москве
Исторический пикник и экскурсии проведут 1 сентября в Воронцовском парке
Юрист Койтов выразил уверенность в том, что Александр Алиев будет наказан
Москвичи и гости столицы смогут посетить масштабный модный показ под открытым небом
Дарья Касаткина завершила участие на US Open
Ига Свёнтек жёстко раскритиковала WTA из-за загруженного календаря
Российский теннисист Медведев вышел в третий круг US Open
Хуберт Хуркач одолел Тимофея Скатова на старте Открытого чемпионата США — 2024
Жители Реутова могут экологично утилизировать излишки урожая
"Изверги же не скрывали довольных лиц, чувствуя себя хозяевами жизни" (ц)
Собянин вручил награды Москвы за вклад в развитие отечественного кинематографа
Собянин: На Рязанском проспекте будет создана новая площадка Киностудии Горького
Музыкальные новости
«Сумасшедшие вещи»: Тимати рассказал, как строит отношения с женщинами
Крымские каникулы: «Голоса Градского» представили уникальную концертную программу
Театр «Градский Холл» реорганизуют и переименуют
Социальный фонд оказывает помощь эвакуированным жителям Курской области
Радио Romantika рекомендует open-air «Легенды мирового рока»
Свыше 6,5 тысячи жителей Москвы и Московской области получили справки о статусе предпенсионера в клиентских службах регионального Отделения СФР и МФЦ
Соцфонд проиндексирует пенсии работающим пенсионерам в феврале
«Постоянные споры, недопонимания и противоречия»: Влад Череватый рассказал в «УТРО.ТНТ» о взаимоотношениях с Олегом Шепсом в новом сезоне «Экстрасенсы. Реванш»
В Сбере назвали изменение климата одним из главных рисков в следующие 10 лет
Владимирские туристы могут путешествовать по древнейшему городу Верхневолжья с новым цифровым аудиогидом МТС
Амбассадор фонда без кистей рук установил мировой рекорд в дисциплине стронгмен
Отечественные грузовые шины прошли испытания в рамках ралли-марафона «Шелковый путь–2024»
Travel-эксперт Тариел Гажиенко: о чем нужно помнить, если вы отправились в путешествие на авто
StarLine на Международном Евразийском форуме «Такси»
Депутат МГД Александр Козлов: Первый этап создания конкорса на МЦД 2 Щербинка завершен
В Кремле заверили, что участие Монголии в МУС не создает угрозу для визита Путина
Песков: участие Монголии в МУС не создает угрозу для визита Путина
Bloomberg: Монголия заверила, что не будет выполнять ордер МУС на арест Путина
В Арктике разворачивается «гонка вооружений». США пытаются препятствовать сотрудничеству РФ и КНР
Суд признал законной блокировку сайта независимого саратовского издания
Гастроэнтеролог Садыков рассказал, как на здоровье ЖКТ влияет привычка грызть ногти
Тайны кошачьего массажа: знак привязанности или сигнал тревоги?
Глава СК Бастрыкин заинтересовался доступностью для инвалидов центра Новосибирска
Форум «Активное долголетие в Подмосковье» прошел в Одинцове
В Киеве обвинили Зеленского в краже денег у пенсионеров
Поражением 3:4 по буллитам завершился для СКА предсезонный турнир имени Пучкова, с таким же счётом «Спартак» обыграл «Динамо» на Кубке мэра Москвы
Спортсмены из Химок стали призерами областного турнира по автокроссу
Отечественные грузовые шины прошли испытания в рамках ралли-марафона «Шелковый путь–2024»
Айрат Даллас: самые полезные виды спорта для женщин
Лукашенко заявил, что не позволит белорусской армии воевать за пределами страны
Додон призвал восстановить сотрудничество между Минском и Кишиневом
Лукашенко заявил, что не прикажет военным идти воевать за пределы страны
На 99%: чем опасен возможный разворот Минска от Москвы в сторону Запада?
Собянин вручил награды Москвы за вклад в развитие отечественного кинематографа
Собянин: Территории четырех столичных больниц в этом году будут благоустроены
Собянин принял участие в подписании договора на поставку электропоезда «Белый кречет»
Собянин: территории четырёх московских больниц благоустроят в 2024 году
Мастер-классы от Московского зоопарка для школьников и дошколят провели на Крымском Валу
В Арктике разворачивается «гонка вооружений». США пытаются препятствовать сотрудничеству РФ и КНР
В Сбере назвали изменение климата одним из главных рисков в следующие 10 лет
Платформа VOX стала эксклюзивным оператором рекламы на площадках АНО «Национальные приоритеты»
Жители Реутова могут экологично утилизировать излишки урожая
Мастер-классы и соревнования ждут молодежь на форуме-фестивале «Москва 2030» в сентябре
"Изверги же не скрывали довольных лиц, чувствуя себя хозяевами жизни" (ц)
Портативный ТСД корпоративного класса Saotron RT-T70
В Арктике разворачивается «гонка вооружений». США пытаются препятствовать сотрудничеству РФ и КНР
КНР и РЖД связывают три буквы — СМП. Арктический экспресс принял эстафету у китайских моряков и повёл по железным дорогам России контейнеры с Севморпути
Беспроводной сканер штрих-кодов SAOTRON P05i промышленного класса
Часть Симферполя без света, Евпатория и часть Ялты без воды
В ДТП под Симферополем погибли два человека
Книжная выставка
«Без меня народ не полный…»
к 125-летию со дня рождения А.П.Платонова,
русского и советского писателя, поэта и публициста, драматурга.
Художник из Симферополя Виктор Нефедов создаст в Нальчике граффити на площади 260 квадратных метров
Москвичи и гости столицы смогут посетить масштабный модный показ под открытым небом
Юрист Койтов выразил уверенность в том, что Александр Алиев будет наказан
Более 1400 музыкантов примут участие в этапе ПФО II Всероссийского фестиваля «Душа баяна»
Исторический пикник и экскурсии проведут 1 сентября в Воронцовском парке