Источник данных (Data Source)

Раздел инструментов для сбора информации из внешних источников. Компоненты позволяют интегрировать данные сторонних API, сканировать веб-страницы и получать свежие новости или контент из RSS-лент.

API Request — внешние запросы. Выполняет HTTP-запросы к сторонним сервисам. Поддерживает прямые URL или команды curl, позволяя настраивать методы (GET, POST), заголовки и тело запроса. Возвращает ответ в формате Data.

Mock Data — тестовые данные. Генерирует фиктивную информацию (текст Lorem Ipsum или таблицы с клиентами) для проверки логики потока без обращения к реальным источникам.

URL — веб-краулер. Извлекает содержимое веб-страниц по ссылкам. Поддерживает рекурсивный обход страниц на заданную глубину, очистку от HTML-тегов и экспорт данных в виде текста или таблиц DataFrame.

Web Search — универсальный поиск. Комбинированный инструмент, включающий поиск в DuckDuckGo, агрегатор Google News и читалку RSS-лент. Идеален для предоставления языковой модели актуального контекста из интернета.