Cheap AI “video scraping” can now extract data from any screen recording
Recently, AI researcher Simon Willison wanted to add up his charges from using a cloud service, but the payment values and dates he needed were scattered among a dozen separate emails. Inputting them manually would have been tedious, so he turned to a technique he calls "video scraping," which involves feeding a screen recording video into an AI model, similar to ChatGPT, for data extraction purposes.
What he discovered seems simple on its surface, but the quality of the result has deeper implications for the future of AI assistants, which may soon be able to see and interact with what we're doing on our computer screens.
"The other day I found myself needing to add up some numeric values that were scattered across twelve different emails," Willison wrote in a detailed post on his blog. He recorded a 35-second video scrolling through the relevant emails, then fed that video into Google's AI Studio tool, which allows people to experiment with several versions of Google's Gemini 1.5 Pro and Gemini 1.5 Flash AI models.
Read full article
Comments
Новости России
Москва В Тверской области прошёл благотворительный концерт «Культура в помощь Донбассу»
Moscow.media Частные объявления сегодня
Лидер российского рынка медицинского оборудования признан лучшим предпринимателем года
Рэпер Machine Gun Kelly сообщил о заболевании у дочери от Меган Фокс
От метро «Купчино» до поселка Шушары в 2025 году поедут новые трамваи «Невский»
Тravel-эксперт Тариел Гажиенко: советы новичкам, как правильно подготовиться к путешествию
I had a bitter divorce with my ex-husband. I didn't expect his new wife to become one of my best friends years later.
Arsenal ‘pushing hardest’ for Julian Alvarez transfer but face battle with Premier League rivals for ex-Man City star
Half the world population could be diabetic or insulin resistant by 2050
EuroMillions jackpot rolls over to £185,000,000 after no one claims ticket
Капитан полиции спас жилой дом от пожара в Орле
До середины июня ограничивается движение на развязке на трассе Ростов-на-Дону – Азов
Управляйте климатом и безопасностью своего авто с помощью смартфона
Алмазы в Whiteout Survival: где собирать, как приумножать и на что тратить
Началась предзагрузка Crystal of Atlan на PC и смартфонах
Five new Steam games you probably missed (May 26, 2025)
В Тверской области прошёл благотворительный концерт «Культура в помощь Донбассу»
В Рязани с успехом прошёл благотворительный концерт «Культура в помощь Донбассу»
IX Открытый Московский фестиваль конного искусства и спорта
В Тверской области пройдет благотворительный концерт «Культура в помощь Донбассу»
Новосибирский экскурсовод рассказала, чем и кому интересен Новосибирск
Замминистра обороны Цивилева совершила рабочую поездку в войска ЛВО
Суд ограничил доступ к видео на YouTube с ответами на ЕГЭ 2025 года
Дешевле в 2 раза: пожилых людей, доживших до 70 лет, ждёт приятный сюрприз с 1 июня
Новосибирское УФАС признало недобросовестными поставщиками сразу две компании
Забайкальцы могут стать участниками Всероссийского Парада Семьи
В Тверской области прошёл благотворительный концерт «Культура в помощь Донбассу»
Синнер начал выступление на «Ролан Гаррос» с победы
Рафаэль Надаль подвел итоги своей карьеры на церемонии «Ролан Гаррос»
Справится ли Калинская с соперницей? Калинская — Боузкова: прогноз и ставка
Елена Рыбакина вышла в третий круг Открытого чемпионата Франции — 2025
Отчётность о парниковых газах в России застопорилась на уровне труб
Собянин: Отражена атака трех беспилотников на Московский регион
"Она вернется в Россию": в Сети высмеяли Каллас за заявления о Черном море
Музыкальные новости
Певец Эдуард Шарлот отправлен в колонию-поселение в Тольятти
Бизнес Элджея летит в пропасть: убытки и долги тянут рэпера на дно
Хабенский выступит на ВДНХ под музыку Моцарта, Вивальди и «Queen»
Киркоров перевезет прах матери из Болгарии в Москву
В Тверской области прошёл благотворительный концерт «Культура в помощь Донбассу»
В Тверской области пройдет благотворительный концерт «Культура в помощь Донбассу»
IX Открытый Московский фестиваль конного искусства и спорта
В Рязани с успехом прошёл благотворительный концерт «Культура в помощь Донбассу»
Синнер начал выступление на «Ролан Гаррос» с победы
Маск назвал преодоление бюрократии в США чрезвычайно сложной задачей
Роскосмос показал спутниковый снимок снега в Новосибирске
Бизнес-центры на взлете // Почему растут ставки аренды офисов в Москве
В Туапсе росгвардейцы задержали мужчину по подозрению в попытке хищения бензина с АЗС
«Автокод» внедрил сервис проверки и оплаты штрафов ГИБДД по госномеру авто
Собянин рассказал, каким будет новый пешеходный мост на остров Балчуг
IX Открытый Московский фестиваль конного искусства и спорта
Президент Лаоса извинился, что не смог приехать на День Победы в Москву
Путин попросил Собянина сделать транспорт доступным для инвалидов
Выиграть миллион на «Юмор FM» помогает улыбка
Президент Лаоса извинился перед Путиным за отсутствие на Дне Победы в Москве
Спортивные протезы: зачем они нужны и почему это важно
Косметолог Мадина Осман: как сохранить молодость кожи в зоне декольте
В 2025 году Отделение СФР по Москве и Московской области оплатило больничные и декретные 2 400 индивидуальным предпринимателям
«Абсолют Страхование» и Spirit. Fitness запустили страховую подписку для клиентов фитнес–клуба
Зеленский заявил, что в Киеве работают над получением ракет Taurus
Спортивные протезы: зачем они нужны и почему это важно
Кадет Пермского президентского кадетского училища Росгвардии стал победителем регионального этапа Всероссийского чемпионата пилотирования дронов
Команда росгвардейцев победила в XIX Международном турнире по дзюдо среди полиции и армии
«Абсолют Страхование» и Spirit. Fitness запустили страховую подписку для клиентов фитнес–клуба
Собянин рассказал о предстоящем открытии иммерсивного музея
Собянин рассказал, каким будет новый пешеходный мост на остров Балчуг
Собянин: Москва отбила атаку 33 вражеских дронов без потерь и ущерба
Собянин: ПВО Минобороны продолжает отражать атаки вражеских беспилотников
Агроном предложил этим летом высадить на огороде экзотические культуры
Олигархи и зелёные технологии - анализ Станислава Кондрашова
Впервые "Атом" был представлен широкому кругу автомобилистов
«Турбозавры» подвели итоги творческого конкурса «Экозавр-25»
Собянин: Отражена атака трех беспилотников на Московский регион
В Тверской области прошёл благотворительный концерт «Культура в помощь Донбассу»
Прихожане Владимирского храма посетили Донской монастырь в Москве
"Она вернется в Россию": в Сети высмеяли Каллас за заявления о Черном море
Архангельские гребцы завоевали две медали на первенстве России в Краснодаре
Как джин и виски из Саранска вывели предприятие Евгения Сидорова в лидеры индустрии
Жара накроет регионы России
В суд направлено уголовное дело о незаконной охоте с причинением крупного ущерба на территории Ненецкого автономного округа
Акция «Поздравь библиотеку с праздником».
Выставка-призыв «Курение – зло, откажись от него»
Мы служим книге, чтобы книга служила людям
Запущен новый поезд, соединяющий Таганрог и Симферополь
Неизвестный напал на игумена Евмения во время презентации книги в Москве
Забайкальцы могут стать участниками Всероссийского Парада Семьи
Инна Щеглова оказалась в семёрке худших мэров РФ
Новая неделя экологических игр началась в Подмосковье
