Скан интернета для ИИ-агента: доступ к закрытым площадкам без ключей
Твой ИИ-агент умеет рассуждать, но он слеп: он не видит, что вышло у конкурента вчера, что обсуждают в комментариях под залетевшим роликом и что написано в свежем видео на сорок минут. Здесь лежит инструкция, как за две команды дать ему глаза. Инструмент бесплатный, с открытым кодом, и он снимает ту стену, из-за которой люди платят по подписке за каждый источник отдельно.
Что это и почему это работает
Один инструмент вместо десяти подписок.
Инструмент называется Agent Reach. Это утилита командной строки с открытым кодом, которая подключает твоего ИИ-агента к живому интернету. Она не изобретает свой способ доступа, она собирает под одной командой набор проверенных утилит, каждая из которых умеет читать свою площадку, и объясняет агенту, как ими пользоваться. Поэтому агент после установки просто получает возможность сходить и посмотреть, вместо того чтобы отвечать из памяти.
Разница с обычным поиском внутри чата принципиальная. Встроенный поиск отдаёт агенту короткую выжимку из выдачи, а здесь агент забирает исходник целиком: полный текст статьи, расшифровку сорокаминутного видео, ленту постов автора. На таком материале разбор получается предметным, потому что агент читает то же самое, что читал бы ты, только за секунды.
Что нужно до установки
Три вещи, без них дальше не поедет.
- Агент с доступом к терминалу. Подходит Клод Код или любой другой агент, который умеет выполнять команды на твоём компьютере. Обычное окно чата в браузере не подойдёт, потому что там нет терминала.
- Питон версии 3.10 или свежее. Проверяется одной командой, она ниже. Если питона нет, поставь его с официального сайта, установщик обычный.
- Полчаса времени и готовность один раз увидеть чёрное окно с текстом. Дальше всё делает агент, руками ты вводишь только две строки.
Установка за две команды
Первая ставит сам инструмент, вторая подтягивает всё остальное.
Вторая команда делает основную работу: она скачивает и настраивает набор утилит под каждую площадку и прописывает агенту инструкцию, как их вызывать. Занимает от одной до нескольких минут, в зависимости от скорости интернета. После неё агент уже умеет ходить в сеть, отдельно ничего включать не надо.
Ключи и куки от площадок хранятся у тебя на диске в файле ~/.agent-reach/config.yaml с правами доступа только для владельца. Это важный момент по безопасности: данные не уезжают на чужой сервер, инструмент работает с ними локально. Файл этот никому не показывай и в общие папки не клади.
Что ты получаешь под капотом
Одна команда ставит сразу весь набор.
Твиттер и Х
Чтение и поиск по ленте через утилиту bird с авторизацией по куки. Ключ разработчика и платная подписка на интерфейс не нужны.
Ютуб и видео
Утилита yt-dlp достаёт описание, метаданные и субтитры более чем с полутора тысяч сайтов. Именно отсюда берётся расшифровка чужого ролика целиком.
Поиск по смыслу
Семантический поиск Exa через mcp-porter. Ищет по смыслу запроса, а не по совпадению слов, и работает без ключа.
Статьи и страницы
Jina Reader превращает любую страницу в чистый текст без рекламы и меню. Агент читает суть, не тратя контекст на мусор.
Гитхаб
Официальная утилита gh для поиска по репозиториям, чтения кода и обсуждений. Полезна, когда проверяешь, живой ли инструмент, о котором все говорят.
Профессиональные сети
Отдельные модули под Линкедин и азиатские площадки Сяохуншу и Boss Zhipin. Здесь чаще всего нужна авторизация по куки, читай раздел про поломки.
Промпт 1. Разбор чужого залетевшего ролика
Самая частая задача: понять, почему у него получилось.
Ролик разбирается по расшифровке, а глазами ты смотришь только картинку. Агент забирает текст целиком и раскладывает его на части, из которых ролик собран. Дальше ты забираешь механику и собираешь своё на своей теме.
Промпт 2. Что реально залетает в нише прямо сейчас
Замена ручного листания ленты по часу в день.
Последняя строка промпта здесь важнее остальных. Без прямого запрета агент охотно дорисовывает правдоподобные просмотры, и ты принимаешь решение по вымышленным числам. С запретом он честно помечает пробелы, и решение остаётся твоим.
Промпт 3. Длинное видео в конспект за минуту
Час эфира конкурента превращается в страницу с фактами.
Промпт 4. Живой отчёт по своей теме раз в неделю
Чтобы не начинать каждый раз с чистого листа.
Правило про одиночный факт стоит там не для красоты. Один источник это гипотеза, и выносить её в ролик как утверждение опасно ровно до того момента, пока в комментариях не найдётся человек, который знает тему лучше.
Где ломается и что с этим делать
Четыре места, на которых спотыкаются все.
- Куки протухают. Доступ к закрытым площадкам живёт на твоей авторизации, и через какое-то время она перестаёт работать. Симптом: вчера читало, сегодня пусто. Лечение: обновить куки в файле настроек, это делается заново той же процедурой, что и в первый раз.
- Субтитров у видео может не быть вовсе. Тогда расшифровки не будет, и агент обязан сказать об этом прямо. Именно поэтому в промптах выше стоит отдельная строка про этот случай, без неё агент начнёт пересказывать по названию.
- Слишком частые запросы приводят к временной блокировке. Площадки считают частоту обращений. Работай пачками по несколько ссылок, а не сотнями подряд, и делай паузы. Это дешевле, чем восстанавливать доступ.
- Площадки меняют свою кухню, и отдельный модуль ломается на неделю. Это нормальная жизнь открытого проекта. Проверь свежие обсуждения в репозитории, чаще всего решение там уже описано, а починка приезжает обновлением.
Границы, которые стоит держать в голове
Коротко и по делу, чтобы не было сюрпризов.
- Читать открытое и анализировать чужой контент для своей работы нормально. Собирать личные данные людей и складывать их в свою базу это уже другая история, и она регулируется законом.
- У каждой площадки есть свои правила пользования, и автоматический доступ в них где-то разрешён, где-то ограничен. Ответственность за это лежит на том, кто запускает инструмент.
- Чужой ролик остаётся чужим. Забирай механику, каркас и приём, а видео и текст пусть остаются у автора.
- Аккуратнее с рабочей учётной записью. Если площадка посчитает активность подозрительной, ограничение прилетит именно на тот аккаунт, чьи куки стоят в настройках.
Что сделать сегодня
Порядок действий на ближайший час.
- Проверь питон одной командой и поставь инструмент двумя, всё это есть выше.
- Возьми один чужой ролик, который тебя зацепил на этой неделе, и прогони его через первый промпт.
- Из блока ПЕРЕНОС выбери один вариант и сними по нему ролик сегодня же, пока разбор свежий.
- Через неделю вернись к четвёртому промпту и поставь его себе как еженедельную привычку.
Инструмент даёт тебе материал, а дальше всё решает то, что ты с ним сделаешь. Разбор без выпущенного ролика превращается в приятное чтение и ничего не меняет. Поэтому третий пункт стоит именно там, где стоит.
Читать дальше в блоге
Эту тему я разбираю подробно в статье рабочий список нейросетей для контента. Там же лежат остальные разборы про нейросети.
Я собрал систему, по которой обычный человек запускает блог с нуля и набирает аудиторию без съёмок, монтажа и команды. Внутри разбор, с которого стартовал сам.
Открыть разбор: с чего начать→