フォロー

WebサイトをクロールしてMarkdownや構造化データに変換する実装。構造化データとして取得できるのでLLMの学習目的に使われているとか。オープンソース実装と機能追加されたクラウド版がある。
---
GitHub - mendableai/firecrawl: 🔥 Turn entire websites into LLM-ready markdown or structured data. Scrape, crawl and extract with a single API.
github.com/mendableai/firecraw

ログインして会話に参加
Fedibird

様々な目的に使える、日本の汎用マストドンサーバーです。安定した利用環境と、多数の独自機能を提供しています。