Web Scraper
Web Scraper — это приложение в каталоге сообщества osFoundry. Автоматизированный веб-скрейпинг со структурированным извлечением данных. Задайте URL и схемы колонок — скрейпер скачивает страницы по расписанию, извлекает структурированные данные с помощью вашего собственного LLM API-ключа и сохраняет результаты в БД на каждый инстанс. Поддерживает обнаружение sitemap, отслеживание изменений, маршрутизацию через прокси и JS-рендеринг через Playwright.
Подробности
- Рабочая область: osfoundry
- Категория: DATA
- Цена: Free
- Доступ: Community
Возможности
- Automated web scraping with structured data extraction. Define URLs and column schemas
- The scraper fetches pages on a schedule
- Extracts structured data using your own LLM API key
- Stores results in a per-instance database. Supports sitemap discovery
- Change detection
- Proxy routing
Как использовать Web Scraper в osFoundry
Установите Web Scraper в свою рабочую область одним кликом, затем сделайте форк в osStudio, чтобы настроить промпты, инструменты или конфигурацию под ваш стек. Любой участник вашей рабочей области сможет продолжить с того места, где вы остановились.
Другие приложения от сообщества
- CRM — Управление взаимоотношениями с клиентами: контакты, сделки и отслеживание воронки продаж.
- Kanban Board — Проектная kanban-доска в стиле Trello с карточками, досками, видами календаря и таблицы и свойствами на доску. На базе Focalboard (отдельный персональный сервер). Встроенный SQLite на постоянном томе.
- Служба поддержки — Сортировка тикетов и входящие сообщения службы поддержки с отслеживанием SLA.
- Page Builder — Визуальный drag-and-drop конструктор страниц с секциями, темами, SEO и публикацией
- Website Builder — Многостраничный конструктор сайтов с CMS-коллекциями, глобальной навигацией, футером, темами и публикацией
- Витрина магазина — Витрина интернет-магазина с каталогом товаров, корзиной и оформлением заказа.