分類：ai-agent-search-infrastructure

隱私免費開源 AI 搜尋系統為什麼難維護：SearXNG、FastAPI、Crawl4AI 與反爬蟲 / AI slop / prompt injection

Threads @a5555555678 認為 Docker + SearXNG + FastAPI + Crawl4AI 這種免費、隱私、開源 AI 搜尋系統已經半死，原因不是架不起來，而是搜尋引擎反爬、雲端 IP 黑名單、AI slop 汙染與 prompt injection 讓維護成本太高。本文交叉查證 SearXNG 與 Crawl4AI metadata，整理成 Hermes / Allen KB 的 web search backend 決策：自架適合維基、GitHub、新聞等低風險來源；一般網頁搜尋要混用 Tavily/Exa/Brave/Firecrawl/Jina 與來源驗證，而不是迷信免費私有搜尋。