AI-агент для мониторинга новостей: как он устроен и сколько стоит в работе

01

Какую задачу решает агент

Отрасль живёт новостями: изменения правил, тендеры, сделки конкурентов, новые продукты. Человек, который следит за этим вручную, тратит на чтение заметную часть утра и всё равно что-то пропускает - особенно в выходные и в отпуске. Агент делает то же самое по расписанию, не устаёт и не отвлекается. Его задача не «искать всё подряд», а отдать человеку короткий список того, что действительно стоит прочитать, с одной-двумя строками пересказа.

02

Откуда он берёт материалы

Источники бывают трёх видов: сайты профильных изданий и ведомств, общие новостные ленты и телеграм-каналы. С профильными сайтами всё просто - там почти всё по теме, агент берёт всё новое. Общие ленты огромные, поэтому из них он забирает только материалы с ключевыми словами. Публичные телеграм-каналы агент тоже читает - без вступления в них с вашего аккаунта. Список источников, ключевых и стоп-слов лежит в обычной Google Таблице, и владелец правит его сам.

03

Как отсеивается шум

Сначала работают простые правила: стоп-слова выкидывают рекламу, вакансии и всё, что не относится к теме. Потом агент склеивает дубли - одна и та же новость часто выходит в пяти источниках с разными заголовками. Сравнивать заголовки дословно бесполезно, поэтому они сравниваются по основам слов: «запустили», «запуск» и «запустит» считаются одним и тем же. После этого в работе остаётся в несколько раз меньше материалов, и только они уходят нейросети.

04

Что делает нейросеть

Нейросеть получает то, что осталось после правил, и по каждому материалу отвечает на три вопроса: подходит ли он под темы заказчика, к какой рубрике из заранее заданного списка относится и в чём его суть в одно-два предложения. Темы рубрик описаны словами в той же таблице. Поэтому, если в сводку попадает лишнее или пропадает нужное, правится формулировка рубрики, ключевые или стоп-слова - а не код агента.

05

Цифры с работающего проекта

На одном из моих проектов агент в первые недели обходил шесть источников. По журналу сервера за сутки он просматривал 105-130 материалов, а в утреннюю сводку попадало от 5 до 28 - в зависимости от новостного дня. Дату публикации он определяет у материала, иначе в сводку попадали бы старые новости. Нейросеть подключена через API: за первые три недели работы, вместе с настройкой и пробными запусками, она обошлась меньше чем в доллар. Сводка приходит в Telegram к 8:30 по Москве, а всё отобранное параллельно пишется в таблицу с рубриками и ссылками.

06

Как агент живёт на сервере

Агент запускается по расписанию каждые полчаса и сам решает, пора ли собирать сводку. Такой подход переживает перезагрузки сервера и сбои сети: если запуск сорвался, следующий через полчаса всё доделает. В таблице есть служебный лист, где видно, сколько материалов дал каждый источник. Если сайт поменял вёрстку и перестал отдавать новости, это заметно в тот же день, а не через месяц, когда кто-то спросит, почему сводки стали короче.

07

Что ещё можно отдать такому агенту

Та же схема подходит для отзывов о компании на разных площадках, для цен и наличия у конкурентов, для разбора входящих писем и заявок по категориям. Принцип один: агент собирает поток, правила отбрасывают очевидно лишнее, а нейросеть решает, что из оставшегося подходит под ваши темы, раскладывает по полкам и пересказывает. Если задачу можно описать словами «что взять, что выкинуть и куда положить», её можно автоматизировать.

Все статьи