Treg WebAccess: бесплатный поиск в интернете

ИИ-агенту часто нужно не только сгенерировать ответ, но и найти свежие сведения на сайте, прочитать документацию или извлечь данные со страницы. Treg WebAccess добавляет такие возможности через единый слой для агентов: он принимает задачу, обращается к веб-провайдерам и возвращает найденные материалы в удобном для дальнейшей работы виде.

Что такое Treg WebAccess

Treg WebAccess — это сценарий для доступа ИИ-агента к вебу в составе открытого проекта Treg. Он помогает искать информацию, читать страницы, составлять карту сайта и извлекать отдельные поля по заданной схеме. Вместо того чтобы вручную выбирать сервис для каждого запроса, агент обращается к Treg, а тот подбирает подходящий источник среди подключённых провайдеров.

Для обычного чтения страниц Treg использует получение содержимого без локального браузера, профиля пользователя и его cookies. Текст можно вернуть в Markdown, а для сайтов с большим числом разделов — сначала найти нужные URL, затем загрузить только подходящие страницы. Это помогает не передавать в контекст агента лишнюю навигацию и разметку.

Какие задачи можно поручить агенту

• Искать страницы по запросу и отдельно находить свежие новости.
• Загружать содержимое указанной публичной страницы.
• Составлять список страниц сайта и отбирать нужные по теме.
• Извлекать со страницы структурированные сведения по описанию или JSON-схеме.
• Обращаться к специальным источникам для данных из соцсетей, магазинов, каталогов приложений, отзывов и карт.

Последняя группа задач отличается от обычного веб-поиска: вместо HTML-страницы агент получает поля вроде названия товара, цены, рейтинга или текста публикации. Такие запросы выполняются через отдельные сервисы и могут тарифицироваться.

Как выбирается источник и что значит «бесплатно»

По документации Treg, поиск в интернете и чтение страниц сначала направляются к TinyFish. Если провайдер возвращает пустой результат или не может открыть страницу, запрос может перейти к следующему источнику — например, к Crawl4AI или AnyAPI. При маршрутизации учитываются успешность ответов, скорость и стоимость провайдеров.

Бесплатный запрос может перейти на платный резервный сервис

Бесплатный режим относится к ответу TinyFish на веб-поиск и чтение страниц. Если он не справился, следующий провайдер может вернуть результат за плату; некоторые сервисы также берут деньги за неудачную попытку. Поэтому переход на резервный источник не всегда бесплатен. В настройках маршрутизации можно ограничить максимальную стоимость одного запроса, а перед использованием других каталогов — посмотреть цену конкретной операции.

Иными словами, надпись «бесплатный веб-доступ» не означает, что любые данные из интернета, любые резервные запросы и все функции Treg предоставляются без оплаты. Поиск и чтение страниц через TinyFish доступны бесплатно; работа через другие сервисы и получение данных платформ может стоить денег. Для уже подключённого ключа своего провайдера применяется его собственная тарификация.

Сравнение провайдеров

В Web Arena можно отправить один поисковый запрос или URL нескольким выбранным провайдерам и сопоставить их ответы, скорость и стоимость. Режим Battle запускает сравнение параллельно, а Waterfall проверяет источники по очереди. В каталоге Treg также отображаются цены и измеренная статистика по доступным операциям. Это помогает подобрать источник под конкретную задачу, не полагаясь только на название сервиса.

Подключение к ИИ-агенту

WebAccess распространяется как навык для агентов, а Treg также предоставляет CLI и MCP-интерфейс. Навык добавляется из GitHub-команды:

npx skills add superdesigndev/treg --skill web-access

После установки агенту потребуется настроить подключение к Treg: войти в сервис и передать ему токен по инструкции проекта. Для работы с доступными через каталог провайдерами не всегда нужно создавать отдельный аккаунт у каждого поставщика. Если используется платный источник или собственная подписка, фактическая стоимость зависит от выбранного маршрута и подключённых ключей.

Открытый исходный код

Исходный код Treg, клиентские инструменты и навык WebAccess доступны в репозитории проекта на GitHub. Treg можно развернуть самостоятельно; hosted-версия доступна на сайте проекта. Перед самостоятельным размещением стоит ознакомиться с лицензией и инструкциями именно в репозитории.

Ограничения и сценарии использования

Treg WebAccess подходит для поиска по открытым источникам, чтения документации, предварительного изучения рынка и извлечения опубликованных данных. Он не превращает закрытые страницы в общедоступные: авторизация пользователя не переносится в запрос, а платный доступ и ограничения сайтов не обходятся. Если провайдер не может получить страницу, Treg может попробовать другой источник, но успешное чтение не гарантируется.

Инструмент полезен, когда агенту нужен актуальный материал из сети и важно иметь единый способ поиска и чтения через разные источники. При этом перед массовыми или многошаговыми запросами нужно проверить цены провайдеров и задать предел расходов для маршрута.