新規API変更
Cloudflare
Cloudflare Markdown Conversionのtext出力、RAG前処理の差分を検証する
Cloudflare Workers AIのMarkdown Conversionでoutput.format=textを指定し、Markdown記法を除いたplain textを取得できるようになった。既定はmarkdownのままで互換性は維持されるが、textへ切り替えると見出し・表・リンク構造が失われるため、chunking、RAG検索、token数、引用復元を比較する必要がある。
- 影響
- HTML、PDF、Office文書をWorkers AIで変換し、RAG、検索index、要約、分類、Agent入力へ渡す開発・データ基盤チーム
- 対応
- 用途別にmarkdownとtextを選び、見出し・表・link・chunk境界、token数、検索精度、引用可能性を評価してversion付きpipelineへ反映する
- 期限
- 期限なし