인공지능 시대에 다시 만나는 마크다운의 가치

예전에 마크다운 문서를 활용하는 방법에 대해 책 기획과 집필 제안을 받은 적이 있었다. 당시에는 마크다운이 개발자들에게는 익숙하지만 일반인들에게는 생소했고, 쓰면 좋지만 굳이 안 써도 그만인 도구라는 인식이 강했다. 워드나 한글처럼 이미 익숙한 도구들을 두고 마크다운을 배워야 할 강력한 동기를 찾기 어려웠고, 결국 프로젝트는 진행되지 못했다.

하지만 인공지능 기술이 급격히 발전하면서 상황이 완전히 달라졌다. 최근 대형 언어 모델(LLM)이 문서를 이해하고 처리하는 과정에서 마크다운이 가장 효율적인 데이터 구조라는 사실이 밝혀지고 있기 때문이다. 이제 마크다운은 단순히 편리한 메모 도구를 넘어, AI와 효율적으로 소통하기 위한 핵심 언어가 되었다.

인공지능이 마크다운을 선호하는 기술적인 이유는 명확하다. HTML이나 JSON 같은 형식은 태그와 속성값이 너무 많아 AI가 처리해야 할 토큰(Token) 비용이 기하급수적으로 늘어난다. 반면 마크다운은 #이나 - 같은 최소한의 기호만으로 문서의 구조를 정의한다. 실제로 같은 내용의 HTML 문서를 마크다운으로 변환하면 토큰 사용량을 3배 이상 절약할 수 있다는 연구 결과도 있다.

단순히 양을 줄이는 것만이 장점은 아니다. 마크다운은 문서의 계층 구조를 명확하게 전달한다. 헤더를 통해 섹션 간의 관계를 파악하고, 리스트와 코드 블록을 통해 정보의 성격을 직관적으로 이해한다. AI가 학습한 방대한 양의 데이터 역시 이러한 마크다운 형식을 포함하고 있어, 모델이 정보를 추출하고 요약할 때 환각 현상을 줄이고 정확도를 높이는 데 결정적인 역할을 한다.

과거에는 마크다운을 개인의 기록 방식 중 하나로 치부했다면, 이제는 인공지능에게 업무를 지시하고 데이터를 제공하는 데 필수적인 규격이 되었다. 기술의 변화가 도구의 가치를 재발견하게 만든 셈이다. 다시 그 기획을 마주한다면, 이제는 마크다운을 꼭 써야만 하는 이유를 아주 명확하게 설명할 수 있을 것 같다.