做檢索增強或摘要類小工具時,抓回來的 HTML 滿是腳本、選單和廣告,餵給模型既浪費輸入長度又不穩定。Jina Reader 的做法是照官網給的網址形式存取目標網址,直接取回乾淨的正文文字,對外提供 API,面向做檢索增強與內容擷取的開發者,不是給一般讀者用的閱讀器。註冊後有可用額度,API 參數與限制以官網目前頁面為準。它只解決取文這一步,需要登入才看得到的內容拿不到,動態渲染的頁面還要另想辦法。
主要功能
- 把網頁正文抽成純文字,去掉腳本、廣告與導覽
- 以 API 形式提供,能嵌進自己的擷取與檢索流程
- 輸出可直接拼進提示詞,減少無效輸入長度
- 適合按一批連結批次取內容再統一處理
- 靜態頁面處理直接,不必自己寫解析規則
適合誰用
- 給檢索增強流程準備乾淨語料,來源是一堆普通網頁
- 寫小工具做文章摘要,需要先取到正文
- 批次收集一批連結的內容再做分析
- 除錯模型輸入時想排除 HTML 雜訊
怎麼開始
- 拿一個真實頁面,照官網給的網址形式取一版純文字
- 和原始頁面比對,確認正文沒漏段落也沒混進選單
- 在腳本裡封裝一層,加上重試與頻率控制後再批次跑