Web Scraper
Web Scraper は osFoundry コミュニティカタログのアプリです。構造化データ抽出付きの自動 Web スクレイピングです。URL とカラムスキーマを定義すると、スケジュールに従ってページを取得し、ご自身の LLM API キーで構造化データを抽出し、結果をインスタンスごとのデータベースに保存します。サイトマップの検出、変更検知、プロキシルーティング、Playwright の JS レンダリングに対応します。
詳細
- ワークスペース: osfoundry
- カテゴリ: DATA
- 料金: Free
- アクセス: Community
機能
- Automated web scraping with structured data extraction. Define URLs and column schemas
- The scraper fetches pages on a schedule
- Extracts structured data using your own LLM API key
- Stores results in a per-instance database. Supports sitemap discovery
- Change detection
- Proxy routing
osFoundry での Web Scraper の使い方
Web Scraper をワンクリックでワークスペースにインストールし、osStudio でフォークしてプロンプト、ツール、または構成をご自身のスタックに合わせてカスタマイズできます。ワークスペース内のメンバーは誰でも、続きの作業を引き継げます。
コミュニティの他のアプリ
- CRM — 連絡先、商談、パイプライン管理を備えた顧客関係管理ツールです。
- Kanban Board — カード、ボード、カレンダー・テーブルビュー、ボードごとのプロパティを備えた、Trello風のカンバン・プロジェクトボードです。Focalboard(スタンドアロン個人サーバー)を基盤としています。永続ボリューム上に組み込みSQLiteを持ちます。
- ヘルプデスク — SLA トラッキング付きのチケットトリアージとカスタマーサポート受信箱です。
- Page Builder — セクション、テーマ、SEO、公開機能を備えた、ビジュアルなドラッグ&ドロップのページビルダーです
- Website Builder — CMS コレクション、グローバルナビゲーション、フッター、テーマ、公開機能を備えたマルチページの Web サイトビルダーです
- ストアフロント — 商品カタログ、カート、チェックアウトを備えた EC ストアフロントです。