Як перевірити ваш llms.txt
Опубліковано:
Файл, який має пристойний вигляд, усе одно може бути некоректним або вести на неробочі сторінки. Ось що варто перевірити перед публікацією — і після неї.
1. Структура
Переконайтеся в дотриманні базових вимог специфікації: рівно один # заголовок H1, блок-цитата з підсумком одразу під ним та секції ##, що містять списки посилань у форматі Markdown. Декілька H1 або порожні секції — найпоширеніші структурні помилки (див. поширені помилки llms.txt).
2. Доступність посилань
Саме цю перевірку пропускає більшість інструментів. Кожен URL із посилання має справді відкриватися — ідеально оформлений файл, що веде на сторінки з помилкою 404, марнує бюджет краулера і підриває довіру. Надішліть запит до кожного посилання й виявіть неробочі або ті, що перенаправляють.
3. Найкращі практики
- Абсолютні
https://URL (а не відносні чиhttp://). - Короткий
: descriptionпісля кожного посилання. - Віддавання з
Content-Type: text/plain; charset=utf-8.
Вручну чи автоматично
Структуру можна оцінити на око й перейти за посиланнями вручну, але перевірка доступності десятків URL — це втомливо й легко припуститися помилки. Автоматизована перевірка робить це за секунди й оцінює результат.
Швидкий спосіб
Вставте свій домен (або сирий текст) у валідатор. Він перевіряє структуру, паралельно завантажує кожен URL із посилання, застосовує наведені вище правила найкращих практик і повертає оцінку від 0 до 100 разом із пріоритезованим списком виправних зауважень. Запускайте перевірку щоразу, коли змінюєте файл.