glossary

Czym jest llms.txt i które silniki AI potwierdziły, że go czytają

Taras Shynkarenko
Taras Shynkarenko
•Zaktualizowano: •8 min czytania
Czym jest llms.txt i które silniki AI potwierdziły, że go czytająCzym jest llms.txt i które silniki AI potwierdziły, że go czytają

TL;DR

8 min czytania

Jeremy Howard zaproponował llms.txt we wrześniu 2024 roku jako plik Markdown w katalogu głównym witryny, który wymienia strony, jakie agent AI powinien przeczytać najpierw. Specyfikacja wymaga nagłówka H1, dopuszcza podsumowanie w formie cytatu blokowego, a resztę układa w sekcje H2 z listami linków. Google, OpenAI i Anthropic publikują llms.txt dla własnej dokumentacji dla programistów, ale żadna z tych firm nie podaje w dokumentacji crawlerów, że jej produkty go czytają.

Czym jest llms.txt?

Jeremy Howard zaproponował llms.txt jako plik Markdown umieszczony w witrynie pod ścieżką /llms.txt, wymieniający strony i czyste dokumenty Markdown, które agent AI powinien przeczytać najpierw, gdy chce zrozumieć witrynę. Propozycja nosi datę 3 września 2024 roku na llmstxt.org, a publikowany tam obecnie tekst ma oznaczenie v2. Plik jest wyborem, a nie spisem: wskazuje garść wartościowych adresów URL i opisuje każdy z nich, podczas gdy mapa witryny wymienia wszystko, co można zaindeksować.

Specyfikacja podaje motywację w jednym zdaniu: "Agents are best served by concise, expert-level information gathered in a single, accessible location." Nic w tej propozycji nie przyznaje ani nie odbiera dostępu i nie zobowiązuje żadnego silnika do pobrania pliku. To sugestia opublikowana pod przewidywalną ścieżką.

Ostatnia weryfikacja: 9 września 2026.

Co musi zawierać plik llms.txt?

Specyfikacja wymaga tylko nagłówka H1, a każda inna sekcja jest opcjonalna. Ustala za to kolejność, dzięki czemu parser lub wyrażenie regularne odczyta plik bez modelu językowego.

ElementWymaganyCo mówi specyfikacja
H1Tak"An H1 with the name of the project or site. This is the only required section"
Cytat blokowyNie"A blockquote with a short summary of the project, containing key information necessary for understanding the rest of the file"
Dowolny MarkdownNie"Zero or more markdown sections (e.g. paragraphs, lists, etc) of any type except headings"
Listy linków pod H2Nie"Zero or more markdown sections delimited by H2 headers, containing 'file lists' of URLs where further detail is available"
Pozycja listyn/d"a required markdown hyperlink [name](url), then optionally a : and notes about the file"
## OptionalNieZarezerwowane zwyczajowo dla "links an agent can skip when a shorter context is needed"

Kształt, który specyfikacja publikuje jako własny przykład:

# Title
 
> Optional description goes here
 
Optional details go here
 
## Section name
 
- [Link title](https://link_url): Optional link details
 
## Optional
 
- [Link title](https://link_url)

Wynikają z tego dwie zasady umieszczania. Plik znajduje się w katalogu głównym witryny lub w dowolnej podścieżce, a "a file covers the URLs under its path, and where more than one file applies, agents should use the most specific one", więc /docs/llms.txt obejmuje tylko /docs/. Ta sama propozycja zaleca, by witryny udostępniały czystą wersję Markdown każdej strony pod page.md lub page.html.md i ogłaszały obie za pomocą relacji linków rel="alternate" type="text/markdown" oraz rel="describedby", w HTML lub w nagłówku HTTP Link:.

Pracownik biurowy przegląda statystyki witryny na laptopie, czyli sprawdzenie, które pokazałoby, czy jakiś crawler AI kiedykolwiek pobrał llms.txt.

Które silniki AI potwierdziły, że czytają llms.txt?

Żaden operator silnika nie podaje w dokumentacji crawlerów, że jego produkty czytają llms.txt, a trzej najwięksi dostawcy publikują taki plik dla własnej dokumentacji dla programistów. Publikowanie pliku i korzystanie z niego to dwie osobne czynności, a różnica między nimi to cała historia tego formatu.

DostawcaPublikuje llms.txt dla własnej dokumentacjiOficjalne stwierdzenie, że jego silnik czyta llms.txt
GoogleTak, pod ai.google.dev/gemini-api/docs/llms.txtNie znaleziono. Dokumentacja Google AI features and your website nigdy nie wspomina o llms.txt i wskazuje robots.txt jako "the control for site owners to manage access to how their sites are crawled for Search"
OpenAITak, pod developers.openai.com/llms.txtNie znaleziono. Dokumentacja crawlerów OpenAI omawia robots.txt, user agenty i zakresy IP, a do własnego llms.txt linkuje tylko jako do indeksu dokumentacji
AnthropicTak, pod docs.anthropic.com/llms.txtNie znaleziono. Artykuł pomocy o crawlerach Anthropic podaje, że boty "respect 'do not crawl' signals by honoring industry standard directives in robots.txt", i nigdy nie wspomina o llms.txt

Najbliższe uznaniu ze strony dostawcy jest stanowisko Chrome. Lighthouse zawiera audyt llms.txt w ramach kontroli przeglądania przez agentów, opisując plik jako "an emerging convention used to provide a machine-readable summary of a website's content, specifically designed for LLMs and AI agents" i ostrzegając, że "without this file, agents may spend more time crawling the site to understand its high-level structure and primary content." Audyt nie wskazuje jednak żadnego silnika, który taki plik czyta. Do każdej liczby dotyczącej wdrożeń llms.txt podchodź z rezerwą, chyba że podaje źródło i datę. Sama specyfikacja stwierdza to jakościowo: "thousands of sites publish an llms.txt file."

Trzech dostawców, jeden schemat
Publikuje własny llms.txt3 z 3
Wskazuje robots.txt jako narzędzie kontroli crawlowania3 z 3
Potwierdza czytanie llms.txt0 z 3
Google, OpenAI i Anthropic w trzech kategoriach, na podstawie publikowanej przez każdą firmę dokumentacji crawlerów.

Czym llms.txt różni się od robots.txt?

robots.txt to plik uprawnień do pobierania, za którym stoi RFC i udokumentowane wsparcie wszystkich głównych operatorów crawlerów, a llms.txt to propozycja selekcji treści bez egzekwowania i bez potwierdzonego odbiorcy. Sama specyfikacja wyznacza tę samą granicę: "robots.txt lets automated tools know what access to a site is considered acceptable, such as for search indexing bots. llms.txt information is instead used on demand, when an agent needs information about a topic while assisting a user."

robots.txtllms.txt
StatusRFC 9309, Standards Track, wrzesień 2022Propozycja jednego autora, v2 na llmstxt.org
Na jakie pytanie odpowiadaCzy możesz pobrać tę ścieżkęCo warto przeczytać najpierw
Kto z niego korzystaKażdy udokumentowany duży crawlerŻaden dostawca tego nie dokumentuje
Skutek zignorowaniaZłamanie wieloletniej konwencjiŻaden

Oba pliki są publiczne i żaden nie jest narzędziem kontroli prawnej. To, który crawler faktycznie się pojawia, pokazują logi serwera, a nie te pliki, a hasła o CCBot i ChatGPT-User wyjaśniają, co oznacza każdy z tych user agentów, gdy się pojawi.

Czym jest llms-full.txt?

Mintlify stworzył llms-full.txt jako plik towarzyszący, który, jak to ujmuje, "combines your entire documentation site into a single file as context for AI tools and LLM indexing", a każda strona jest w nim przedstawiona jako tytuł, źródłowy URL, opis i pełna treść w Markdownie. Specyfikacja llms.txt nie definiuje llms-full.txt, nie wspomina o nim i go nie wymaga. Platformy dokumentacyjne generują oba pliki razem, dlatego ta para pojawia się jednocześnie w tak wielu witrynach z dokumentacją.

Praktyczny podział: llms.txt to indeks na tyle mały, by zmieścić się w oknie kontekstu, a llms-full.txt to stojący za nim korpus. Witryna, która publikuje wyłącznie pełny zrzut, daje agentowi plik zbyt duży do celu, któremu miał służyć indeks.

Programista pisze strony dokumentacji w edytorze kodu, czyli treści, do których plik llms.txt ma kierować agenta.

Kto powinien publikować plik llms.txt?

Najwyraźniejszą korzyść mają zespoły dokumentacji, bo agenci kodujący to jedyna grupa, którą zaobserwowano podczas korzystania z tego formatu. Specyfikacja mówi to wprost: "llms.txt files are used most heavily for software documentation, where coding agents follow them to find API references and tutorials." Agent kodujący skierowany na dokumentację twojego API pobiera wskazane przez ciebie adresy, a to inna sytuacja niż wyszukiwarka decydująca, co zacytować.

RedReplier
RedReplier

Rozpocznij

Reddit, X, Bluesky i HN

Alerty o intencjach w czasie rzeczywistym

Nielimitowane odpowiedzi AI

Ocena według intencji zakupowej

W przypadku witryny marketingowej publikacja zajmuje godzinę i nie obiecuje dziś niczego mierzalnego. Napisz plik, jeśli twoje treści naprawdę trudno odczytać z HTML, ale nie zastępuj nim pracy, za którą stoją dowody. Cytowanie przez asystenta nadal opiera się na stronach dostępnych dla crawlerów, jasnych odpowiedziach i wzmiankach w zewnętrznych źródłach, czyli na obszarze, który obejmują generative engine optimization i answer engine optimization.

Jak sprawdzić, czy cokolwiek czyta twój llms.txt?

Przeszukaj grepem logi dostępu pod kątem żądań do /llms.txt i sprawdź user agenta przy każdym trafieniu. Żądanie z user agenta należącego do agenta oznacza, że coś pobrało plik, pusty wynik w ciągu miesiąca oznacza, że nic tego nie zrobiło, a każda z tych odpowiedzi kosztuje jedno polecenie. Ten wpis w logu to jedyny dostępny dowód z pierwszej ręki, bo żaden dostawca nie raportuje pobrań llms.txt w konsoli.

Liczba pobrań nadal nie mówi, czy asystent cię zacytował. W tym celu obserwuj same odpowiedzi: RedReplier śledzi publiczne rozmowy wymieniające twoją markę na Reddicie, X, Bluesky, Facebooku i Hacker News, czyli tam, gdzie asystenci szukają informacji, odpowiadając na pytania z twojej kategorii.

Najczęściej zadawane pytania

Czy llms.txt pomaga w SEO?

Nie ma udokumentowanego wpływu na pozycje. Dokumentacja funkcji AI w Google nie wspomina o llms.txt i wskazuje robots.txt jako narzędzie kontroli tego, jak witryny są crawlowane na potrzeby wyszukiwarki. Publikacja pliku nie zmienia niczego w sposobie pobierania i oceniania stron przez Googlebota, a żadna dokumentacja Google nie łączy tych dwóch rzeczy.

Gdzie w witrynie umieścić llms.txt?

Pod /llms.txt w katalogu głównym albo w dowolnej podścieżce, na przykład /docs/llms.txt. Specyfikacja podaje, że plik "covers the URLs under its path, and where more than one file applies, agents should use the most specific one." Plik w podścieżce to dobry wybór, gdy tylko część witryny warto wskazywać agentowi.

Czy llms.txt jest oficjalnym standardem?

Nie. llms.txt to propozycja opublikowana przez Jeremy'ego Howarda na llmstxt.org, utrzymywana w repozytorium AnswerDotAI/llms-txt i otwarta na uwagi społeczności. Nie ma RFC, organu standaryzacyjnego ani wymogów zgodności, i tym różni się od RFC 9309, dokumentu stojącego za robots.txt.

Czym llms.txt różni się od sitemap.xml?

Mapa witryny wymienia każdą indeksowalną stronę dla wyszukiwarek, a llms.txt kilka wybranych dla agentów. Specyfikacja argumentuje, że mapa witryny go nie zastąpi, bo pomija wersje stron w Markdownie, nie obejmuje przydatnych zewnętrznych adresów URL i wskazuje dokumenty, które łącznie przekraczają okno kontekstu modelu.

Czy potrzebuję też llms-full.txt?

Nie. Specyfikacja llms.txt w ogóle nie definiuje llms-full.txt. Ta konwencja pochodzi od Mintlify, który generuje oba pliki dla hostowanych przez siebie witryn z dokumentacją, a pełny plik to zrzut całej dokumentacji w jednym pliku, a nie indeks.

Czy zamiast prowadzić crawlery AI, lepiej je zablokować?

To decyzja dotycząca robots.txt i zależy od tego, czy cytowania są dla ciebie ważniejsze niż dane do trenowania. Anthropic, OpenAI i Google mają osobne user agenty do trenowania i do wyszukiwania, więc zablokowanie jednego nie musi oznaczać zablokowania drugiego. Publikacja llms.txt nie zastępuje ani nie unieważnia żadnej z tych reguł.

Kto stworzył llms.txt?

Format zaproponował Jeremy Howard, a propozycja nosi na llmstxt.org datę 3 września 2024 roku. Publikowany tam dziś tekst ma oznaczenie v2, a projekt znajduje się w repozytorium AnswerDotAI/llms-txt, otwartym na uwagi społeczności. Nie stoi za nim żaden organ standaryzacyjny.

Czy ChatGPT czyta pliki llms.txt?

OpenAI publikuje własny llms.txt pod adresem developers.openai.com/llms.txt dla swojej dokumentacji dla programistów, ale w dokumentacji crawlerów nigdzie nie podaje, że ChatGPT lub inny produkt OpenAI taki plik czyta. Dokumentacja ta omawia robots.txt, user agenty i zakresy IP, a do własnego llms.txt linkuje tylko jako do indeksu dokumentacji. Publikacja pliku we własnej witrynie nie mówi nic o tym, czy crawlery OpenAI korzystają z niego gdzie indziej.

Co się stanie, jeśli nie opublikujesz pliku llms.txt?

Nic się nie zepsuje. Specyfikacja sama zestawia to z robots.txt: zignorowanie robots.txt łamie wieloletnią konwencję crawlowania, a zignorowanie llms.txt nie ma udokumentowanych skutków. Audyt Lighthouse w Chrome ostrzega, że bez tego pliku agenci mogą poświęcać więcej czasu na crawlowanie witryny, by poznać jej strukturę, ale to koszt po stronie agenta, a nie kara dla witryny.

Czy agenci kodujący naprawdę używają llms.txt?

Specyfikacja podaje, że pliki llms.txt "are used most heavily for software documentation, where coding agents follow them to find API references and tutorials", i to jedyna grupa, dla której format ma udokumentowane dowody. To inna sytuacja niż wyszukiwarka samodzielnie decydująca, co zacytować. Agent kodujący skierowany na dokumentację twojego API pobiera dokładnie te adresy URL, które tam wskażesz.

Więcej naszych treści w Google

Jedno kliknięcie oznacza RedReplier jako preferowane źródło, dzięki czemu nasze artykuły pojawiają się wyżej w Najważniejszych wiadomościach, trybie AI i Podsumowaniach AI.

Jeszcze chwila...

RedReplier

RedReplier

Żaden kupujący pytający o ofertę nie umknie

RedReplier śledzi Reddita, X, Bluesky i Hacker News w czasie rzeczywistym, ocenia każdy wątek pod kątem intencji zakupowej i przygotowuje odpowiedź, by dotrzeć tam jako pierwszy.

Reddit, X, Bluesky i HN

Alerty o intencjach w czasie rzeczywistym

Nielimitowane odpowiedzi AI

Ocena według intencji zakupowej

Powiązane artykuły