긴 글을 AI에 넣기 전에 줄이는 기준

압축은 요약이 아닙니다

긴 로그나 회의록을 AI에 넣을 때 흔히 '요약해서 넣으면 되지 않나'라고 생각합니다. 그런데 요약은 정보를 고르고, 압축은 형식을 줄입니다. 목적이 다릅니다.

AI에게 오류 로그를 주는 이유는 그 안의 특정 줄 하나를 찾기 위해서입니다. 요약하면 그 줄이 사라질 수 있습니다. 반대로 타임스탬프 형식을 줄이거나 반복되는 접두어를 걷어내는 것은 정보를 잃지 않습니다.

지워도 되는 것

• 반복되는 접두어 — 모든 줄 앞의 동일한 서비스명·환경명
• 타임스탬프의 잉여 자릿수 — 밀리초까지 필요한 경우는 드뭅니다
• 연속된 동일 메시지 — '같은 줄 ×47' 한 줄로 대체됩니다
• 형식 문자 — 표 구분선, 장식용 구분자, 연속 공백

지우면 안 되는 것

• 고유값 — ID, 해시, 파일 경로, 줄 번호. 이것이 사라지면 추적이 끊깁니다
• 첫 발생과 마지막 발생 — 반복을 접을 때도 양 끝은 남깁니다. 언제 시작해 언제 멈췄는지가 대개 답입니다
• 스택 트레이스의 최상단 — 아래쪽 프레임은 접어도 맨 위는 남깁니다
• 숫자 — 압축 과정에서 수치를 반올림하면 그것은 압축이 아니라 왜곡입니다

넣기 전에 확인할 것

1. 1무엇을 찾으려고 이 글을 넣는가 — 이게 정해지면 무엇을 남길지도 정해집니다
2. 2고유값이 살아 있는가
3. 3반복을 접었다면 양 끝이 남아 있는가
4. 4압축본만 보고도 원본의 어느 지점인지 되짚을 수 있는가

마지막 항목이 기준입니다. 되짚을 수 없으면 너무 줄인 것입니다.