llms.txt
Format file baru yang men-standarisasi cara website memberi tahu AI crawler tentang struktur dan konten utama. Spec resmi dari llmstxt.org. Biaya deploy sangat rendah, potensi sinyal besar untuk AI citation.
Kenapa llms.txt ada
AI crawler seperti ChatGPT, Claude, Gemini, dan Perplexity tidak membaca website dengan cara yang sama seperti Googlebot. Mereka butuh konteks semantik yang padat, tanpa navigasi, iklan, atau markup yang tidak relevan. llms.txt lahir dari kebutuhan itu: satu file ringkas yang menunjuk ke konten paling penting di site Anda.
Spec resmi dipublikasikan di llmstxt.org oleh Jeremy Howard (fast.ai). Formatnya sederhana. Markdown standar. H1 untuk nama site, blockquote untuk ringkasan, H2 untuk seksi, daftar link dengan deskripsi pendek.
Alur deployment
Struktur wajib
Spec resmi hanya butuh empat elemen. Sisanya opsional.
- H1 (wajib) — nama resmi site atau produk. Satu baris.
- Blockquote (wajib) — ringkasan 1-2 kalimat. Jawab pertanyaan "apa ini".
- Paragraf detail (opsional) — konteks tambahan, audiens, diferensiasi.
- H2 sections (wajib minimal satu) — kelompok link. Misal: "Dokumentasi", "Panduan", "Artikel Utama".
- Bulleted links — format:
- [Judul](URL): deskripsi satu baris. - Optional section — H2 bernama "Optional" untuk konten sekunder yang boleh dilewati AI jika token budget terbatas.
Contoh lengkap
Berikut contoh llms.txt untuk PT Sumber Cahaya Bogor, perusahaan fiktif yang bergerak di distribusi solar panel industrial di Jabodetabek.
Best practice Indonesia
Deploy di Rumahweb cPanel
Untuk hosting Rumahweb atau shared hosting sejenis tanpa SSH, prosesnya manual tapi cepat.
Deploy llms.txt di Rumahweb cPanel
- 1
Siapkan file lokal
Buat file llms.txt di komputer Anda dengan editor text biasa (VSCode, Notepad++). Gunakan UTF-8 encoding tanpa BOM. Jangan simpan sebagai .docx atau .rtf.
- 2
Login cPanel
Masuk ke cPanel Rumahweb, buka File Manager, navigasi ke folder public_html. Pastikan Anda di root domain, bukan subfolder.
- 3
Upload file
Klik Upload di toolbar, pilih llms.txt dari komputer. Tunggu sampai status "100%". Kembali ke File Manager.
- 4
Set permissions
Klik kanan file, Change Permissions. Set ke 644 (rw-r--r--). Ini agar web server bisa membaca, user biasa tidak bisa menulis.
- 5
Test akses
Buka https://yourdomain.com/llms.txt di browser. Harus tampil sebagai text plain, bukan download dialog. Kalau download, edit .htaccess untuk paksa content-type text/plain.
Signal yang AI crawler cari
AI crawler yang sudah mengadopsi llms.txt (Perplexity, beberapa Anthropic retrieval agent, research assistant custom) memprioritaskan site dengan llms.txt yang bersih. Mereka pakai file ini sebagai "table of contents" site, mengurangi token yang dihabiskan crawl halaman tidak relevan.
Tanpa llms.txt, AI harus crawl homepage dan menebak mana konten penting. Dengan llms.txt, mereka langsung tahu. Ini berarti: response AI lebih akurat, lebih sering menyebut brand Anda sebagai sumber, dan halaman Anda lebih sering muncul di jawaban AI.
Daftar SEMUA URL di site. llms.txt bukan sitemap. Hanya link ke halaman yang benar-benar penting untuk memahami brand Anda. Maksimal 20-30 link di llms.txt utama.
Deskripsi link terlalu panjang. Satu baris per link. Kalau butuh lebih, itu masuk ke halaman tujuannya, bukan di llms.txt.
Lupa update saat rebrand. Nama PT ganti, URL pindah, layanan baru ditambahkan. llms.txt harus di-sync setiap quarterly review.
Pertanyaan Umum
Apa beda llms.txt dengan robots.txt?
Apakah ChatGPT dan Gemini benar-benar membaca llms.txt?
Di mana llms.txt harus diletakkan?
Apakah perlu llms-full.txt terpisah?
Apakah llms.txt menggantikan sitemap.xml?
Kami deploy llms.txt untuk Anda.
Audit Entitas Gratis mencakup review llms.txt Anda jika sudah ada, atau rekomendasi struktur jika belum. Laporan tertulis dalam 5 hari kerja.