llms.txt란 무엇인가 — 실측 4건으로 본 효과와 작성법

TableFlip Research Team·2026년 7월 31일· 수정 2026년 8월 10일· llms.txt· robots.txt· AI크롤러· GEO· AI가시성

📋 3줄 요약

llms.txt는 2024년 9월 Jeremy Howard(Answer.AI)가 낸 '제안'일 뿐, 2026년 초 기준 OpenAI·Google·Anthropic 등 어떤 주요 AI 플랫폼도 프로덕션 답변에 쓰겠다고 약속한 적이 없습니다.
실측 연구 4건(OtterlyAI·SE Ranking·Ahrefs·Google)이 llms.txt의 직접 효과를 일관되게 부정합니다.
llms.txt는 '전략'이 아니라 '위생'입니다. 깔아도 손해는 없지만, 도메인 권위·스키마·콘텐츠 품질이 인용을 좌우합니다.

llms.txt란 무엇인가?

llms.txt는 언어 모델이 웹사이트를 더 잘 이해하도록 돕기 위해 도메인 루트(/llms.txt)에 두는 마크다운 파일입니다. 사이트명을 담은 H1 하나가 유일한 필수 항목이고, 한 문단 요약(blockquote)과 중요한 페이지 링크 목록(H2 섹션)은 선택이지만 권장됩니다. 현대 웹페이지는 내비게이션·광고·스크립트에 정작 필요한 텍스트가 파묻히고 컨텍스트 윈도우는 유한하기 때문에, 3만 토큰짜리 홈페이지가 겨우 두 문단의 유용한 정보만 주는 문제를 해결하려는 시도입니다. 링크된 문서 전문을 인라인으로 담는 llms-full.txt라는 동반 파일도 스펙에 정의되어 있습니다.

llms.txt는 어떻게 쓰나?

형식은 마크다운이고 네 단계면 끝납니다. ①최상단에 # 브랜드명과 한 줄 소개, ②> 인용구로 핵심 요약 한 문단, ③## 섹션 아래 핵심 페이지를 [제목](URL): 설명 형식으로 나열, ④루트에 llms.txt로 저장. 본문 전문까지 담고 싶다면 llms-full.txt를 함께 둡니다.

# TableFlip (테이블플립)
> AI 노출 마케팅(AI Visibility·GEO) 전문사. 생성형 AI 답변에서
> 브랜드가 정확히 언급·추천되도록 정보 구조와 근거 콘텐츠를 설계합니다.

## 핵심 페이지
- [AI 노출 마케팅이란](https://tableflip.kr/what-is-ai-visibility): 정의·SEO와의 차이·측정 지표
- [방법론](https://tableflip.kr/methodology): FLIP 프레임워크 진단→운영 7단계
- [용어집](https://tableflip.kr/glossary): GEO 표준 용어 정의

어렵지 않기 때문에 '깔지 말자'고 할 이유는 없습니다. 문제는 효과입니다.

llms.txt만 깔면 AI가 우리를 인용하나?

결론부터 말하면 아닙니다. 여러 실증 연구가 직접 효과를 부정합니다. OtterlyAI의 90일 실험에서 총 6만 2,100건의 AI 봇 히트 중 /llms.txt 방문은 단 84건으로, 같은 기간 평균 콘텐츠 페이지(약 265회)보다 3배 낮았습니다. SE Ranking이 2025년 말 약 30만 도메인을 분석한 결과 가장 많이 인용된 상위 50개 도메인 중 이 파일을 가진 곳은 단 1개였고, XGBoost 모델에서 이 변수를 제거하자 오히려 정확도가 개선됐습니다. Ahrefs의 13만 7천 도메인 연구(2026-06)에서도 유효 파일을 가진 약 3만 8천 도메인 중 97%가 2026년 5월에 요청을 0건 받았습니다. Google의 John Mueller는 "어떤 AI 시스템도 현재 llms.txt를 사용하지 않는다"며 이를 조작이 쉬워 폐기된 keywords 메타 태그에 비유했습니다.

그럼 크롤러 제어(robots.txt)는?

llms.txt가 "무엇부터 보면 되는지"를 안내한다면, robots.txt는 "와서 읽어도 되는지"를 정합니다. 목적이 다르고, AI 인용에 실제로 영향을 주는 쪽은 후자입니다. 훈련 봇과 검색·인용 봇을 구분하는 법, 봇별 공식 토큰 표, 전면 허용·학습만 차단·전면 차단 세 가지 robots.txt 전문은 AI 크롤러, 오게 할까 막을까에 따로 정리했습니다.

한 가지만 짚자면, 검색·인용 크롤러(OAI-SearchBot·PerplexityBot 등)를 무심코 막으면 가장 빠르게 성장하는 발견 채널에서 스스로를 배제하게 됩니다. llms.txt를 고민하기 전에 이것부터 확인하세요.

그럼 GEO의 본체는 무엇인가?

학술적 근거는 콘텐츠 자체를 가리킵니다. Princeton 등이 KDD'24에 발표한 원논문 GEO: Generative Engine Optimization은 생성 엔진 응답에서 콘텐츠 가시성을 최대 40%까지 높일 수 있음을 입증했습니다(GEO 원논문). 즉 오늘날 인용을 좌우하는 것은 도메인 권위, 스키마 마크업, 페이지 수준의 GEO 콘텐츠 품질, 서드파티 인용입니다. llms.txt는 백링크 캠페인보다 '깔끔한 robots.txt'에 가깝습니다 — 저위험·저비용·실험적 위생 요소죠. 다만 개발자 중심·문서 풍부·통합 지향 사이트라면 에이전트가 사이트에 들어와 탐색·작업을 완료할 때 도움이 되는 nice-to-have로 둘 가치는 있습니다.

질문형 제목과 서술형 본문으로 AI가 발췌하기 좋게 쓰는 방법은 GEO 콘텐츠 작성법에서 더 자세히 다룹니다. TableFlip은 이런 크롤러 접근성 점검과 콘텐츠 구조 설계를 진단 방법론에 함께 담아, 봇이 실제로 읽는 경로부터 확인합니다.

자주 묻는 질문

llms.txt를 지금 만들어도 의미가 없나요?

손해는 거의 없지만 AI 검색 가시성의 즉각적 상승도 기대하기 어렵습니다. 어떤 주요 AI 플랫폼도 공식 채택하지 않았고 실증 데이터도 직접 효과를 부정합니다. 개발 문서가 풍부한 사이트라면 실험적 위생 요소로 두는 정도가 적절합니다.

내 llms.txt가 실제로 읽히는지 확인할 수 있나요?

파일 안에 다른 곳에서는 쓰지 않는 유니크한 허니팟 링크를 하나 심어두고, 서버·CDN 로그에서 그 URL로의 요청이 어떤 user-agent에서 오는지 보면 됩니다. Cloudflare Analytics처럼 user-agent별 트래픽을 보여주는 도구가 있으면 더 쉽습니다. 요청이 0건이라면 그 자체가 답입니다.

AI에 인용되려면 무엇부터 해야 하나요?

robots.txt에서 검색·인용 크롤러(OAI-SearchBot, PerplexityBot 등)를 허용하는지부터 점검하세요. 이들을 막으면 AI 답변 노출 자체가 차단됩니다. 그 다음 콘텐츠 품질과 스키마, 서드파티 인용을 강화하는 것이 GEO의 본체입니다.

Google은 llms.txt를 어떻게 보나요?

Google은 검색 순위나 AI 결과에 영향이 없다고 가장 단호하게 안내합니다. 다만 2026년 6월 업데이트에서 '필요 없음'을 Google 검색으로 한정하고, 이를 활용할 수 있는 다른 AI 서비스가 존재함은 인정했습니다.

브랜드의 크롤러 접근성과 AI 인용 상태가 궁금하다면 무료 AI Visibility 진단으로 시작해 보세요.