llms.txt는 꼭 만들어야 할까
만들어도 해롭지 않지만, 효과를 약속하는 근거는 아직 공식 문서에서 확인되지 않습니다.
핵심 요약 llms.txt는 2024년 9월 제이미 하워드가 제안한, AI 에이전트용 사이트 안내 마크다운 파일입니다. 구글은 AI 개요·AI 모드를 위해 AI 전용 파일이 필요하지 않다고 안내합니다. 만들지 여부는 비용이 낮은 선택지로서 판단합니다.
llms.txt란
제안 문서에 따르면 llms.txt는 AI 에이전트에게 사이트의 간결한 개요를 주기 위한 파일입니다. 사이트 루트(/llms.txt)나 하위 경로에 두고, 형식은 마크다운입니다.
- 필수: H1로 프로젝트·사이트 이름
- 선택: 요약 인용문, 설명 문단
- H2 아래에
[이름](주소)링크 목록, 보조 링크는 'Optional' 섹션
sitemap.xml이 검색엔진용이라면 llms.txt는 에이전트가 필요할 때 읽는 안내서라는 위치로 설명됩니다.
구글의 안내와 비교
구글은 AI 개요·AI 모드에 나오기 위해 AI 전용 파일이나 마크업이 필요하지 않다고 설명합니다. 따라서 구글 검색 노출을 이유로 llms.txt를 만들어야 한다는 공식 근거는 없습니다.
만들 때의 기준
- 효과를 약속하지 않습니다. 인용·순위 개선 근거는 공식 문서에서 확인되지 않습니다.
- 유지 비용이 낮을 때만 만듭니다. 사이트 구조가 바뀌면 같이 갱신해야 합니다.
- 핵심 페이지(서비스, 가이드, 문의)를 중심으로 소수의 링크만 담습니다.
- 본문에 없는 내용을 파일에만 쓰지 않습니다.
자주 묻는 질문
만들면 AI 인용이 늘어나나요?
그렇다고 단정할 근거가 없습니다. 기본기(크롤링 허용, 명확한 본문, 구조화된 데이터)를 먼저 점검하세요.
robots.txt를 대신하나요?
아닙니다. robots.txt는 크롤러의 접근 범위를 알리는 파일이고, llms.txt는 내용을 안내하는 파일로 제안된 것입니다. 역할이 다릅니다.