Pilotiko feature : उपलब्ध
llms.txt: भाषा मॉडल के लिए यह फ़ाइल किस काम आती है?
वेबसाइट की रूट पर रखी एक छोटी टेक्स्ट फ़ाइल, जो इंसानों के बजाय AI टूल्स के लिए बनी है।
llms.txt फ़ाइल Markdown में लिखी एक टेक्स्ट फ़ाइल है, जो वेबसाइट की रूट (/llms.txt) पर रखी जाती है। यह कुछ पंक्तियों में कंपनी का परिचय और उसके सबसे उपयोगी पेजों की सूची देती है, ताकि बड़े भाषा मॉडल (LLM) साइट में जल्दी रास्ता पा सकें। यह 2024 का एक खुला प्रस्ताव है, कोई आधिकारिक मानक नहीं।
30 days free, no credit card.
संक्षेप में
- इसे Jeremy Howard ने 3 सितंबर 2024 को प्रस्तावित किया।
- एकमात्र अनिवार्य तत्व: साइट या प्रोजेक्ट के नाम वाला एक H1 शीर्षक।
- प्रस्ताव हर उपयोगी पेज के लिए एक .md संस्करण भी सुझाता है।
- यह robots.txt और sitemap का पूरक है; उनकी जगह नहीं लेता।
llms.txt किसने प्रस्तावित किया, और क्यों?
यह प्रस्ताव Jeremy Howard ने 3 सितंबर 2024 को llmstxt.org [1] साइट पर प्रकाशित किया, और प्रोजेक्ट एक सार्वजनिक रिपॉज़िटरी [2] में संभाला जाता है। विचार एक सीधे अवलोकन से आता है: किसी साइट को पढ़ने वाले बड़े भाषा मॉडल को मेन्यू, स्क्रिप्ट और विज्ञापनों से जूझना पड़ता है। Markdown में एक छोटी फ़ाइल उसे एक नज़र में ज़रूरी बातें दे देती है।
आधिकारिक पेज खुद को समुदाय की टिप्पणियों के लिए खुला प्रस्ताव बताता है [1]। किसी मानकीकरण संस्था ने इसे नहीं अपनाया है, और किसी सर्च इंजन पर इसे पढ़ने की बाध्यता नहीं है।
llms.txt फ़ाइल की संरचना क्या होती है?
प्रस्ताव एक निश्चित क्रम तय करता है [1]। प्रोजेक्ट या साइट के नाम वाला H1 शीर्षक ही एकमात्र अनिवार्य तत्व है। उसके बाद साइट का सार बताने वाला एक ब्लॉक कोट, वैकल्पिक पैराग्राफ़, फिर H2 सेक्शन आते हैं जिनमें [नाम](url) प्रारूप में लिंक की सूचियाँ होती हैं, और कोलन के बाद एक टिप्पणी। परंपरा के अनुसार, "Optional" नाम का सेक्शन गौण लिंक इकट्ठा करता है, जिन्हें जगह कम पड़ने पर कोई टूल छोड़ सकता है।
फ़ाइल रूट (/llms.txt) पर या किसी सबफ़ोल्डर में रखी जाती है, जैसे /docs/llms.txt, और तब वह उसी फ़ोल्डर के पेजों को कवर करती है [1]।
| फ़ाइल | भूमिका | स्थिति |
|---|---|---|
| robots.txt | रोबोट्स को बताना कि कौन-से पते एक्सप्लोर करें | IETF मानक (RFC 9309) |
| sitemap XML | पेजों और उनकी अपडेट तारीख़ की सूची देना | sitemaps.org प्रोटोकॉल |
| llms.txt | साइट का सार देना और Markdown में उपयोगी पेजों की ओर इशारा करना | खुला प्रस्ताव (2024) |
llmstxt.org के अनुसार, llms.txt को robots.txt और sitemap.xml के साथ मिलकर चलने के लिए बनाया गया है।
सर्विस कंपनी (PME) के लिए llms.txt कैसी दिखती है?
पेजों का .md संस्करण क्या है?
प्रस्ताव यह भी कहता है कि हर उपयोगी पेज की एक Markdown कॉपी उसी पते पर दी जाए, या तो .md जोड़कर (page.html.md) या एक्सटेंशन बदलकर (page.md)। पेज इस कॉपी का संकेत text/markdown प्रकार के rel="alternate" लिंक से दे सकता है [1]। भावना वही है: टूल्स को बिना साज-सज्जा का साफ़ टेक्स्ट देना।
llms.txt के साथ कौन-सी ग़लतियाँ टालें?
स्थितियों की याद: robots.txt का वर्णन IETF के RFC 9309 [4] में है और sitemap XML का sitemaps.org प्रोटोकॉल [5] में; llms.txt को यह मान्यता प्राप्त नहीं है।
- यह मान लेना कि यह robots.txt की जगह ले लेता है: यह न किसी रोबोट को रोकता है, न अनुमति देता है।
- इसमें ऐसे पेज सूचीबद्ध करना जिन्हें sitemap XML या robots.txt बाहर रखते हैं: संकेत आपस में टकराते हैं।
- तथ्यात्मक सारांश के बजाय विज्ञापन जैसा सारांश ("Quebec में सर्वश्रेष्ठ") लिखना।
- साइट नया बनाने के बाद इसे अपडेट करना भूल जाना: टूटे लिंक किसी के काम नहीं आते।
- यह सोचना कि Google के लिए यह ज़रूरी है: Google लिखता है कि उसके AI फ़ीचर्स के लिए कोई अतिरिक्त आवश्यकता नहीं है [3]।
Pilotiko llms.txt के साथ क्या करता है?
जो साइट Pilotiko बनाता और होस्ट करता है, उसके लिए वह llms.txt फ़ाइल अपने-आप बना देता है, साइट मैप, robots.txt और संरचित डेटा के साथ। आपको इसे हाथ से लिखने की ज़रूरत नहीं। यह GEO के काम का एक हिस्सा है, उद्धरण की गारंटी नहीं।
अक्सर पूछे जाने वाले सवाल
क्या llms.txt फ़ाइल अनिवार्य है?
नहीं। यह एक खुला प्रस्ताव है, जिसे मानक का दर्जा नहीं है। इसे प्रकाशित करने में लगभग कोई ख़र्च नहीं आता, पर इसके न होने से साइट का इंडेक्स होना नहीं रुकता।
क्या Google llms.txt फ़ाइल पढ़ता है?
Google के AI फ़ीचर्स के दस्तावेज़ में इसका उल्लेख नहीं है और वह साफ़ कहता है कि किसी विशेष ऑप्टिमाइज़ेशन की ज़रूरत नहीं है। इसलिए AI Overviews में दिखने के लिए llms.txt पर भरोसा नहीं करना चाहिए।
llms.txt और robots.txt में क्या अंतर है?
robots.txt रोबोट्स को बताता है कि वे क्या एक्सप्लोर कर सकते हैं; यह पहुँच का नियम है। llms.txt सामग्री का सार देता है और लिंक सुझाता है; यह पढ़ने में मदद है, पहुँच पर इसका कोई असर नहीं।
llms.txt फ़ाइल कहाँ रखें?
डोमेन की रूट पर, /llms.txt पते पर। प्रस्ताव किसी सबफ़ोल्डर में भी एक रखने देता है, ताकि वह केवल उसी फ़ोल्डर के पेजों को कवर करे।
Optional सेक्शन में क्या रखें?
उपयोगी लेकिन गौण लिंक: करियर, नीतियाँ, आर्काइव। जब AI टूल को छोटा संदर्भ चाहिए होता है, तो वह इन्हें छोड़ सकता है।
स्रोत
- llmstxt.org, The /llms.txt file (देखा गया 15 अक्टूबर 2026).
- Answer.AI (GitHub), llms-txt (dépôt du projet) (देखा गया 15 अक्टूबर 2026).
- Google Search Central, Fonctionnalités d'IA et votre site Web (देखा गया 15 अक्टूबर 2026).
- IETF (RFC Editor), RFC 9309 : Robots Exclusion Protocol (देखा गया 15 अक्टूबर 2026).
- sitemaps.org, Sitemaps XML format (देखा गया 15 अक्टूबर 2026).
आगे पढ़ें
- robots.txt: यह फ़ाइल सर्च इंजन के रोबोट को क्या बताती है?robots.txt वह फ़ाइल है जो क्रॉलर रोबोट को बताती है कि वे आपकी वेबसाइट पर कहाँ जा सकते हैं। RFC 9309 मानक के नियम, छोटे व्यवसाय (PME) के लिए उदाहरण और महँगी गलतियाँ जानें, ताकि SEO सुरक्षित रहे।
- Sitemap XML: सर्च इंजन के लिए साइटमैप किसलिए है?Sitemap XML वह फ़ाइल है जो सर्च इंजन को आपकी वेबसाइट के सभी पेजों की सूची देती है। जानिए इसके टैग, आधिकारिक सीमाएँ, छोटे व्यवसाय (PME) के लिए पूरा उदाहरण और बचने वाली आम गलतियाँ, सरल भाषा में।
- GEO क्या है: जनरेटिव इंजन के लिए ऑप्टिमाइज़ेशनGEO क्या है: इस शब्द की शुरुआत कहाँ से हुई, AI उत्तरों पर शोध और Google क्या कहते हैं, और क्यूबेक की छोटी कंपनी (PME) के किसी वेब पेज को परखने के लिए अंकों वाली एक कसौटी, सरल भाषा में समझाई गई।
- बड़ा भाषा मॉडल (LLM): यह कैसे काम करता है?LLM यानी बड़ा भाषा मॉडल क्या है? जानिए टोकन की भविष्यवाणी कैसे काम करती है, छोटे और मध्यम व्यवसायों (PME) में इसके उपयोग, आँकड़ों वाला उदाहरण और अपनाने से पहले जानने योग्य सीमाएँ, Pilotiko की सरल भाषा में।
Your whole business, on one screen.
Each department is a room. Pilotiko prepares the work; you approve with one click.
- Call answered
- Appointment confirmed
- Email reply ready
- Invoice prepared