Skip to content
logo

LLM Wiki 패턴

Updated 2026-06-085 min read
#llm
#ai
#knowledge-base
#pkm
#markdown
#agent
#rag
#obsidian
#automation
Summary

LLM Wiki는 원문을 매번 검색해 답하는 RAG 대신, LLM이 raw 소스를 읽어 지속적으로 갱신되는 Markdown 위키를 컴파일·유지하는 패턴이다. 이 블로그는 이미 원본 글(content/AI, Tools 등)과 정제 레이어(content/wiki)를 분리하고 있으므로, raw→wiki ingest, index/log, lint, wikilink 검증, 자동 PR 루틴을 붙이면 개인 블로그를 누적 지식베이스로 발전시킬 수 있다.

Key Claims

  • LLM Wiki의 핵심은 원문 chunk를 매 질문마다 다시 검색·종합하는 대신, LLM이 원문을 읽고 지속적으로 누적되는 Markdown 위키를 유지한다는 점이다. Karpathy는 이를 "Obsidian은 IDE, LLM은 프로그래머, 위키는 코드베이스"에 비유한다.1
  • 표준 구조는 세 층으로 나뉜다. raw/는 사람이 넣는 불변 원천 자료, wiki/는 LLM이 작성·갱신하는 정제 지식, AGENTS.md/CLAUDE.md는 스키마와 운영 규칙이다.12
  • LLM Wiki는 RAG의 대체재라기보다 bounded corpus에 대한 compile-time synthesis다. 문서가 수만~수십만 토큰 규모이고 curated 상태라면 Markdown을 직접 읽는 방식이 단순하고 투명하지만, 수백만 문서·권한 제어·고빈도 변경이 있는 엔터프라이즈 지식에는 RAG나 데이터 카탈로그 계층이 여전히 필요하다.34
  • 운영의 핵심 작업은 ingest, query, lint다. 새 소스를 읽어 관련 페이지를 만들거나 갱신하고, 질의 결과 중 재사용 가치가 큰 답을 다시 위키에 파일링하며, 주기적으로 broken link·orphan·stale claim·contradiction을 점검한다.12
  • 팀 단위로 확장할 때는 raw/source와 wiki 산출물을 분리하고, 사람은 원천 메모와 결정 승인에 집중하며, agent는 wiki 초안과 정리 PR을 만드는 식으로 역할을 나누는 편이 안전하다.
  • 운영 상태는 공개 콘텐츠와 분리하는 것이 좋다. 예를 들어 hash ledger, review queue, 내부 로그는 content/ 바깥에 두어 배포 사이트에 노출되지 않게 한다.

LLM Wiki vs RAG

관점LLM WikiRAG
지식 조립 시점소스 ingest 때 미리 정제·연결질문 시점에 chunk 검색
저장 형태Markdown 파일 + wikilink + index원문 chunk + embedding + vector DB
강점작고 curated한 코퍼스, 투명한 provenance, 쉬운 Git diff/review대규모·동적 문서, 권한 제어, 다중 시스템 검색
실패 모드오래된 페이지, 잘못된 수동/LLM 편집, index/log 부실chunking 손실, 검색 누락, embedding mismatch, opaque retrieval
이 블로그 적용content/wiki/를 정제 레이어로 유지검색 챗봇이나 대규모 원문 검색에는 보조적으로 유지

이 블로그의 블로그-검색-실험은 BM25·벡터·하이브리드 검색을 비교하는 RAG 관점의 실험이고, LLM Wiki는 그 위에 올라가는 정제된 지식 레이어에 가깝다. 즉 content/wiki/는 사람이 읽고 LLM이 재사용할 canonical synthesis, RAG/검색은 원문 회수와 누락 보완용으로 함께 쓰는 구조가 자연스럽다.34

How to Apply to This Blog

현재 syshin0116.dev는 이미 LLM Wiki 패턴의 골격을 갖고 있다.

  • 원문 레이어: content/AI/, content/Tools/, content/Study/, content/Projects/ 등 기존 글
  • 정제 레이어: content/wiki/
  • 스키마/가드레일: AGENTS.md, CLAUDE.md의 "source posts immutable, wiki curated" 규칙
  • 렌더링: Nuartz/Next.js가 frontmatter summary, tags, wikilink, graph/backlink를 렌더링

다음 순서로 강화하면 된다.

  1. raw/source 경계 명확화: 기존 source post는 계속 immutable로 두고, 새로 수집하는 외부 자료는 content/raw/ 또는 .wiki-cache/raw/처럼 별도 원문 폴더에 저장한다. 공개하고 싶은 raw만 content/ 아래에 둔다.
  2. 전용 wiki-curator 스킬 추가: 팀 위키 사례처럼 ingest, lint, reflect, migrate를 분리한다. 이 블로그에서는 우선 ingestlint만 자동화해도 효과가 크다.
  3. index/log 자동화: content/wiki/index.md는 모든 페이지 요약 테이블과 source catalog를 deterministic script로 재생성하고, content/wiki/log.md는 append-only로 유지한다.
  4. 검증 게이트 추가: wikilink가 실제 파일 basename으로 resolve되는지, 필수 frontmatter(title, type, tags, sources, summary, created, updated, author, draft)가 있는지, footnote/source가 비어 있지 않은지 검사하는 verify-wiki 스크립트를 둔다.
  5. 자동 PR 루틴 연결: source post 또는 raw 자료가 추가되면 GitHub Actions가 루틴을 fire하고, 루틴은 content/wiki/ 변경만 담은 PR을 만든다. main 직접 push보다 PR diff로 사람이 검토하는 편이 안전하다.
  6. 검색 챗봇과 연결: 현재 RAG/검색 챗봇은 먼저 content/wiki/index.md와 관련 wiki page를 읽고, 부족할 때만 원문 검색으로 내려가게 한다. 이렇게 하면 canonical synthesis를 우선 사용하면서도 누락 회수를 보완할 수 있다.

CMDS / CommandSpace Notes

구요한/Yohan Koo의 CMDS starter vault는 LLM Wiki를 개인/팀 지식 운영으로 가져올 때 참고할 만한 구현 사례다. CMDS는 Obsidian vault 안에서 Connect → Merge → Develop → Share라는 지식 생애주기를 두고, CLAUDE.md, AGENTS.md, CMDS.md, Guide, Head Quarter 같은 system files에 precedence를 부여한다. Agent가 어느 규칙을 먼저 읽고 따라야 하는지 명시한다는 점이 중요하다.

cmds-llm-wiki skill은 Karpathy-style LLM Wiki를 CMDS vault 안에 통합한다. 특징은 다음과 같다.

  • Raw sources는 10. Raw Sources/에 남기고, LLM Wiki 폴더 안에 중복 복사하지 않는다.
  • LLM-maintained 영역은 LLMWiki/index.md, log.md, Wiki/, Queries/로 분리한다.
  • Core Context.mdBRAIN.md, Head Quarter, CMDS Guide 같은 canonical 파일을 가리키는 pointer 역할을 하며, 내용을 복붙하지 않는다.
  • source가 커지면 standalone wiki로 분리할 수 있는 graduation path를 둔다.

이 구조는 조직 위키에도 유효하다. 프로젝트별 context를 중앙에 복제하지 말고, 중앙 wiki는 project-local docs와 ADR을 가리키는 index와 synthesis 역할을 하는 편이 drift를 줄인다.

Implementation Notes for This Repo

이 레포에 우선 붙일 수 있는 최소 자동화는 세 가지다.

자동화역할상태
scripts/verify-wiki.pywiki frontmatter, wikilink, 금지어, index 누락 검사추가
GitHub Actions wiki-verify.ymlPR에서 content/wiki 또는 관련 스크립트가 바뀌면 검증 실행추가
PR 기반 wiki 갱신agent가 만든 wiki 변경을 사람이 diff로 검토현재 운영 방식

자동 ingest까지 바로 켜기보다는, 먼저 검증 게이트를 붙이고 wiki 변경이 안전하게 리뷰되는 상태를 만드는 편이 낫다.

Connections

  • second-brain-rag - LLM Wiki는 Second Brain + RAG 아이디어에서 검색 중심 부분을 줄이고, LLM이 유지하는 정제 Markdown 레이어를 앞세운 구현 패턴이다.
  • zettelkasten - LLM Wiki의 wikilink와 cross-reference는 Zettelkasten의 연결 중심 지식 조직을 LLM 유지보수 루프로 자동화한다.
  • 블로그-검색-실험 - 이 블로그의 RAG/검색 실험은 raw/source 검색 계층이고, LLM Wiki는 그 결과를 누적하는 curated synthesis 계층이다.
  • obsidian-notion-sync - Obsidian을 authoring UI로 쓰면 raw 작성 경험을 유지하면서 Git/웹 배포/LLM 정제를 붙일 수 있다.
  • agentic-decision-workflow - 프로젝트→팀→조직으로 지식을 승격할 때 LLM Wiki가 최신 semantic layer를 맡고 ADR이 decision history를 맡는다.

Footnotes

Footnotes

  1. Karpathy, "LLM Wiki" gist 2 3

  2. Starmorph, "How to Build Karpathy's LLM Wiki" 2

  3. MindStudio, "Where RAG Breaks Down: The Karpathy LLM Wiki Alternative" 2

  4. Atlan, "LLM Wiki vs RAG: The Karpathy Concept and Enterprise Reality" 2

Linked from (12)

Comments