🤖建立 llms.txt

llms.txt 是什麼

llms.txt 是一個文字檔，用於告知 AI 爬蟲網站的要點和想讓它們閱讀的主要頁面。將其設置在網站根目錄下為 /llms.txt。格式採用 Markdown，按照網站名稱、摘要、主要頁面列表的順序排列。

• 網站名稱和摘要：在首行使用「#」寫上網站名稱，然後在下一行以「>」開頭放置單行摘要，這是基本形式。
• 區段和連結：使用以「##」開頭的標題對頁面分組，下方逐行列出頁面名稱、URL 和單行說明。
• Optional 區段：標題為「Optional」的區段是任意的獨立區域，用於彙整 AI 可跳過閱讀的輔助性頁面。

與其他引導檔的區別

• robots.txt：robots.txt 用於允許或拒絕爬蟲的巡訪，不記載想讓其讀取的內容本身。
• sitemap.xml：sitemap.xml 以機器可讀的形式列舉網站內的 URL，不包含各頁面的要點或優先度說明。
• llms-full.txt：llms-full.txt 是將頁面本文彙整在一個檔案內的完整版本，與顯示連結清單的 llms.txt 不同。

為什麼被認為沒有意義

llms.txt 是 2024 年提出的新規範，公開表示支援的 AI 服務目前仍有限，因此設置後效果難以衡量。是否提前設置以應對普及趨勢，還是等待支援狀況再做判斷，取決於運營者的方針。