llms.txt là gì và trang web của bạn có cần nó không

llms.txt là gì và nó có tác dụng gì?

llms.txt là một tệp văn bản thuần túy được đề xuất đặt trong thư mục gốc của trang web, nhằm hướng dẫn các mô hình ngôn ngữ đến thông tin hữu ích trên trang web đó. Mục đích của nó là cung cấp một bản đồ ngắn gọn về các tài nguyên chính, chứ không phải để thay thế chính các trang đó.

Đề xuất tại llmstxt.org mô tả một định dạng nhẹ có thể bao gồm phần giới thiệu ngắn về trang web, các liên kết và mô tả tùy chọn. Chủ sở hữu trang web có thể sử dụng nó để làm nổi bật tài liệu tham khảo API, tài liệu hướng dẫn, chi tiết sản phẩm hoặc một bộ hướng dẫn được chọn lọc kỹ lưỡng. Một mô hình hoặc công cụ vẫn cần phải tìm nạp và diễn giải tài liệu được liên kết để tệp này trở nên hữu ích.

Hãy coi tệp này như một chỉ mục biên tập:

• Nó cho người đọc biết thông tin quan trọng nằm ở đâu.
• Nó có thể ưu tiên các tài nguyên chuẩn mực, dễ đọc hơn các trang thứ cấp.
• Nó không làm cho một trang không thể truy cập trở nên có thể truy cập được hoặc sửa một trang gây hiểu lầm.

Đề xuất này không giống như một tiêu chuẩn web phổ quát được các trình thu thập thông tin thực thi. Trước khi áp dụng, hãy xác định vấn đề bạn muốn nó giải quyết: cải thiện điều hướng cho nghiên cứu có sự hỗ trợ của mô hình, giúp tài liệu dễ tìm hơn hay thử nghiệm một quy ước mới nổi. Mục đích đó sẽ quyết định cả nội dung của tệp và cách bạn đánh giá nó.

Trang web của bạn có cần llms.txt không?

Hầu hết các trang web không cần llms.txt như một điều kiện tiên quyết để có khả năng hiển thị trên công cụ tìm kiếm. Hãy cân nhắc sử dụng nó khi trang web của bạn có tài liệu có giá trị, ổn định nhưng khó tìm thấy thông qua điều hướng thông thường, đặc biệt là tài liệu kỹ thuật, tài liệu tham khảo sản phẩm hoặc cơ sở kiến thức lớn.

Nó có mức độ ưu tiên thấp hơn khi trang web nhỏ, thông tin chính đã dễ tìm hoặc nhóm không thể duy trì một chỉ mục khác một cách chính xác. Trong những trường hợp đó, trước tiên hãy đầu tư vào cấu trúc trang rõ ràng, các liên kết có thể thu thập được, nội dung hữu ích và tài liệu dễ tiếp cận. Những cải tiến đó giúp ích cho cả khách truy cập là con người và các hệ thống tự động.

Sử dụng bước kiểm tra quyết định này trước khi tạo tệp:

• Trường hợp sử dụng rõ ràng: Xác định các tài nguyên bạn muốn người đọc có sự hỗ trợ của mô hình tìm thấy.
• Điểm đến ổn định: Ưu tiên các trang chuẩn mực sẽ vẫn hữu ích theo thời gian.
• Người phụ trách: Chỉ định người xem xét các liên kết và mô tả khi trang web thay đổi.
• Cách đánh giá giá trị: Quyết định những gì bạn sẽ quan sát, chẳng hạn như lượt truy cập giới thiệu, phản hồi của người dùng hoặc liệu các công cụ được hỗ trợ có truy xuất được các trang dự kiến hay không.

Nếu bạn không thể xác định đối tượng cụ thể hoặc người bảo trì, hãy tạm thời bỏ qua tệp. Để có cái nhìn tổng quan hơn về công việc khả năng hiển thị kỹ thuật, hãy xem AEO kỹ thuật và trung tâm khả năng hiển thị tìm kiếm AI.

Có bằng chứng nào ủng hộ llms.txt trong SEO không?

Có một trường hợp khả năng khám phá hợp lý cho llms.txt, nhưng điều đó khác với bằng chứng cho thấy tệp này cải thiện thứ hạng hoặc trích dẫn. Đề xuất giải thích một định dạng được gợi ý; sự tồn tại của nó không chứng minh rằng các công cụ tìm kiếm lớn hoặc dịch vụ AI sử dụng tệp này như một tín hiệu xếp hạng.

Đối với các tuyên bố về SEO của llms.txt, hãy tách biệt ba câu hỏi. Thứ nhất, trình thu thập thông tin có thể yêu cầu tệp không? Thứ hai, một dịch vụ cụ thể có nói rằng nó đọc hoặc sử dụng tệp không? Thứ ba, bạn có thể quan sát thấy một thay đổi có ý nghĩa nào là do tệp gây ra không? Một yêu cầu thành công chỉ trả lời câu hỏi đầu tiên. Nó không chứng minh rằng một hệ thống sử dụng nội dung hoặc thay đổi cách nó trình bày các trang của bạn.

Google chưa ghi nhận llms.txt là một yêu cầu về thứ hạng tìm kiếm. Đừng coi việc xuất bản nó như một sự thay thế cho chất lượng nội dung, khả năng thu thập thông tin hoặc thông tin trang rõ ràng. Tương tự, một mô hình tạo ra câu trả lời giống với nội dung của bạn, tự nó không phải là bằng chứng cho thấy nó đã đọc tệp.

Một thử nghiệm thực tế giữ cho kỳ vọng ở mức vừa phải:

• Ghi lại việc xuất bản và sửa đổi tệp trong nhật ký thay đổi của riêng bạn.
• Kiểm tra nhật ký máy chủ có sẵn để tìm các yêu cầu đối với tệp, mà không cho rằng yêu cầu đó có nghĩa là đã được chấp nhận.
• Theo dõi các nguồn giới thiệu có liên quan và phản hồi của người dùng theo thời gian.
• So sánh các quan sát với các thay đổi khác của trang web trước khi đưa ra kết luận.

Đây là một quy ước mới nổi đáng để thử nghiệm khi chi phí bảo trì thấp, chứ không phải là một đòn bẩy SEO đã được thiết lập. Để biết thêm thông tin liên quan, hãy so sánh phạm vi của theo dõi tìm kiếm AI với audit tìm kiếm AI rộng hơn.

LLMs.txt so với schema.org: sự khác biệt là gì?

llms.txt và đánh dấu schema.org phục vụ các mục đích khác nhau. llms.txt là một chỉ mục có thể đọc được bởi con người về các tài nguyên được chọn; schema.org cung cấp các mô tả có cấu trúc được gắn vào nội dung web ở các định dạng mà phần mềm có thể phân tích cú pháp.

Một sự khác biệt hữu ích là điều hướng so với mô tả. Một tệp llms.txt có thể hướng người đọc đến một trang tổ chức hoặc phần tài liệu. Dữ liệu có cấu trúc có thể mô tả các thuộc tính của một trang hoặc thực thể cụ thể bằng cách sử dụng các loại và trường được xác định. Không có định dạng nào làm cho nguồn nội dung không chính xác trở nên đáng tin cậy và không nên sử dụng định dạng nào để che giấu thông tin không có trên trang hiển thị.

Chọn dựa trên công việc:

Các định dạng có thể cùng tồn tại, nhưng chúng phải thống nhất với nhau. Nếu tệp liên kết đến một trang sản phẩm, trang đó phải vẫn là nguồn có thẩm quyền cho các tuyên bố về sản phẩm. Dữ liệu có cấu trúc nên mô tả trang một cách chính xác thay vì đưa ra các tuyên bố bổ sung. Để hiểu sâu hơn về cách đánh dấu có cấu trúc phù hợp với tìm kiếm AI, hãy đọc hướng dẫn đánh dấu schema.

Đừng thêm schema chỉ vì llms.txt tồn tại hoặc tạo llms.txt để bù đắp cho việc thiếu dữ liệu có cấu trúc. Hãy bắt đầu với nhu cầu thông tin, sau đó chỉ sử dụng mỗi định dạng ở nơi nó làm cho thông tin đó dễ tìm hoặc dễ diễn giải hơn.

Làm thế nào để viết một tệp llms.txt hữu ích?

Một tệp llms.txt hữu ích là ngắn gọn, có chọn lọc và chính xác. Hãy viết nó như một hướng dẫn đến các nguồn tốt nhất của bạn, chứ không phải là một trang web thứ hai hoặc một bãi chứa mọi URL bạn sở hữu.

Bắt đầu bằng cách chọn đối tượng và tài liệu họ cần. Một nhà phát triển có thể cần tài liệu API và hướng dẫn tích hợp; một khách hàng tiềm năng có thể cần mô tả sản phẩm, chính sách và tài nguyên hỗ trợ. Chọn các trang chuẩn mực cho đối tượng đó và sử dụng các mô tả nêu rõ mỗi trang thực sự chứa gì.

Danh sách kiểm tra soạn thảo thực tế:

• Thêm một mô tả ngắn gọn về trang web hoặc bộ sưu tập tài nguyên.
• Nhóm các liên kết liên quan dưới các tiêu đề rõ ràng nếu điều đó giúp người đọc quét.
• Ưu tiên các URL ổn định, công khai với nội dung trang đáng kể.
• Sử dụng nhãn liên kết ngắn gọn và mô tả đơn giản, không có tuyên bố quảng cáo.
• Kiểm tra rằng các trang được liên kết có thể truy cập được và không yêu cầu tài khoản để đọc.
• Loại trừ các trang trùng lặp, lỗi thời, riêng tư hoặc mỏng.

Đừng cho rằng một mô hình cụ thể sẽ phân tích cú pháp mọi tiêu đề hoặc theo mọi liên kết. Giữ cho tệp có thể hiểu được đối với một người và đảm bảo các trang được liên kết tự đứng vững. Xem lại định dạng llms.txt được đề xuất như một điểm khởi đầu, sau đó kiểm tra các kỳ vọng hiện tại của bất kỳ công cụ nào bạn định thử nghiệm.

Nếu bạn sử dụng plugin CMS, bao gồm cả plugin liên quan đến Yoast, hãy xác nhận những gì nó thực sự tạo ra và nơi nó xuất bản tệp. Nhãn plugin không phải là bằng chứng cho thấy đầu ra là chính xác. Hãy kiểm tra văn bản, liên kết và URL trực tiếp kết quả trước khi coi công việc là hoàn thành.

Làm thế nào để triển khai llms.txt trên trang web của bạn?

Triển khai llms.txt bằng cách xuất bản một tệp văn bản thuần túy tại vị trí mà nhóm của bạn dự định sử dụng, sau đó kiểm tra nội dung và khả năng truy cập của nó từ bên ngoài môi trường chỉnh sửa của bạn. Công việc nhỏ, nhưng việc xác thực rất quan trọng: một bản nháp trong kho lưu trữ không giống với một tệp trực tiếp.

Trước khi xuất bản, hãy xác nhận ai có thể phê duyệt các liên kết và mô tả đã chọn. Tránh bao gồm tài liệu bảo mật, URL nội bộ hoặc các tuyên bố chưa được phê duyệt để sử dụng công khai. Giữ cho tệp nhất quán với các phiên bản trang chuẩn mực và đảm bảo các chuyển hướng không dẫn đến nội dung không liên quan.

Sau khi xuất bản, hãy xác thực phản hồi thực tế trong trình duyệt hoặc ứng dụng khách dòng lệnh. Kiểm tra rằng URL phân giải, phản hồi là văn bản có thể đọc được và mỗi điểm đến được liệt kê sẽ mở ra như mong đợi. Nếu trang web sử dụng CDN, bộ nhớ đệm hoặc quy trình triển khai, hãy xác nhận rằng phiên bản trực tiếp là phiên bản bạn đã xem xét.

Sử dụng trình tự triển khai này:

• Soạn thảo chỉ mục từ các trang nguồn công khai đã được phê duyệt.
• Xem xét các liên kết, từ ngữ và quyền sở hữu với trưởng bộ phận nội dung hoặc sản phẩm có liên quan.
• Xuất bản tệp tại đường dẫn cấp gốc đã chọn.
• Kiểm tra tệp trực tiếp và các trang được liên kết từ bên ngoài CMS.
• Thêm trình kích hoạt xem xét vào quy trình phát hành nội dung hoặc tài liệu.

Để biết chiến lược xung quanh, hãy xem hướng dẫn để được trích dẫn trong ChatGPT. Một tệp có thể hỗ trợ khả năng khám phá rõ ràng hơn, nhưng trang được trích dẫn vẫn cần trả lời câu hỏi của người đọc một cách trực tiếp và chính xác.

Những gì llms.txt không thể kiểm soát và cách duy trì nó

llms.txt có thể truyền đạt đường dẫn đọc ưa thích của bạn, nhưng mỗi nền tảng kiểm soát quá trình thu thập thông tin, phân tích cú pháp, lập chỉ mục và tạo câu trả lời của riêng mình. Một nền tảng có thể bỏ qua tệp, diễn giải nó khác đi hoặc thay đổi hành vi của nó; việc xuất bản nó không thể đảm bảo rằng một trang cụ thể sẽ được tìm nạp, trích dẫn hoặc hiển thị trong câu trả lời. Sự không chắc chắn dành riêng cho từng nền tảng đó là giới hạn chính cần tính đến trước khi đầu tư vào việc bảo trì rộng rãi.

Giữ cho tệp đủ nhỏ để xem xét bất cứ khi nào các trang quan trọng thay đổi. Sử dụng một quy tắc sở hữu đơn giản: nhóm chịu trách nhiệm về một tài nguyên được liệt kê nên thông báo cho chủ sở hữu tệp khi URL, mục đích hoặc trạng thái công khai của nó thay đổi. Xóa các liên kết đã trở nên lỗi thời thay vì để chỉ mục tích lũy.

Một quy trình bảo trì nhẹ nên kiểm tra:

• Liệu mỗi trang được liệt kê có còn tồn tại và vẫn có thể đọc được công khai hay không.
• Liệu mô tả có còn khớp với nội dung thực tế của trang hay không.
• Liệu một tài nguyên chuẩn mực mới đã thay thế một tài nguyên cũ hơn hay chưa.
• Liệu phiên bản trực tiếp của tệp có khớp với phiên bản đã được xem xét hay không.

Đánh giá tệp dựa trên việc nó có chính xác và hữu ích như một chỉ mục hay không, sau đó tìm kiếm các dấu hiệu sử dụng có thể quan sát được mà không coi chúng là bằng chứng về tầm ảnh hưởng. Nếu nhóm của bạn đang xem xét khả năng hiển thị AI rộng hơn, hãy so sánh tệp với các trang và thông tin thực thể của bạn trong audit khả năng hiển thị AI. Giữ cho quyết định có thể đảo ngược: nếu việc duy trì tệp tạo ra công việc mà không có mục đích sử dụng rõ ràng, hãy sửa đổi hoặc xóa nó và tập trung vào các cải tiến đối với các trang cơ bản.

Bảng giá

Giá khởi điểm bằng USD. Gói tùy chỉnh và chiết khấu theo số lượng theo yêu cầu. Thanh toán bằng USDT, USDC, BTC, ETH, SOL, TON hoặc token dự án của bạn.

Cách hoạt động

1. Xác định mục đíchXác định đối tượng và thông tin bạn muốn họ tìm thấy. Nếu không có trường hợp sử dụng cụ thể, hãy hoãn việc tạo tệp.
2. Chọn các trang có thẩm quyềnChọn một tập hợp nhỏ các tài nguyên ổn định, công khai. Loại trừ các điểm đến trùng lặp, lỗi thời, bị hạn chế hoặc có giá trị thấp.
3. Soạn thảo và xem xétViết một phần giới thiệu ngắn gọn và mô tả liên kết chính xác. Yêu cầu chủ sở hữu của nội dung được liên kết kiểm tra chúng.
4. Xuất bản và xác thựcXuất bản tệp văn bản thuần túy tại vị trí đã chọn, sau đó kiểm tra phản hồi trực tiếp và mọi điểm đến được liệt kê.
5. Theo dõi và bảo trìChỉ định người phụ trách và xem xét tệp khi các trang chính thay đổi. Theo dõi việc sử dụng có thể quan sát được mà không cho rằng nó chứng minh tác động đến thứ hạng.