앞선 다섯 시리즈에 나는 같은 한 줄을 붙였다텍스트 풀버전00 · MAKING OF · PART 1
나를 아는 AI를 만드는 일은 내 자료를 전부 읽히는 일이 아니었다. 원본과 상태와 관계와 승인을 구분한 구조를 먼저 세우고, 그 안에서 필요한 만큼만 꺼내 쓸 수 있게 만드는 일이었다. 6개월을 기다리고 50일을 매달리며 내가 실제로 한 일은 대부분 그쪽이다.
시리즈 안내 : 이 시리즈는 지금 진행 중인 실험의 중간 보고다. 앞선 다섯 시리즈가 밖에서 한 일을 다시 정리한 것이라면, 이 세 편은 그 글들을 만든 안쪽을 다룬다. 이 글은 세 편 중 두 번째다. (1) 결과 (2) 구조 (3) 경계.
앞 편은 결과를 썼다. 같은 도구를 쓰고도 무엇이 완성도를 갈랐는가. 답은 대부분 문장 바깥에 있었고, 바깥에 있던 것이 여기서 다루는 구조다. 그러니 이 편은 앞 편의 각주에 가깝다. 다만 각주치고는 길고, 실제로 시간이 더 많이 든 쪽이다.
나는 6개월 가까이 내 개인 기록을 에이전트에 거의 주지 않았다. 이유는 둘이었고 둘 다 기다림이었다. 하나는 도구가 더 좋아지기를 기다린 것이다. 긴 맥락을 붙잡는 능력이나 파일을 다루는 방식이 몇 달 사이에 눈에 띄게 달라지던 시기라, 지금 붙이면 반년 뒤에 다시 해야 할 것 같았다. 다른 하나는 내가 이 도구를 통제할 수 있을 만큼 익숙해지기를 기다린 것이다. 뒤쪽이 훨씬 컸다. 내 기록을 넘겨 놓고 그것이 어디로 가서 무엇과 이어졌는지 모르는 상태가 되는 것이 싫었다. 그 상태가 되면 되돌릴 방법이 없다는 것도 알고 있었다.
6월에 시작했다. 그때부터 약 50일 동안 하루에 두 시간에서 다섯 시간을 썼다. 자정에 앉아 새벽까지 간 날도 여러 번이었다. 그 시간의 대부분은 화면을 꾸미거나 새 기능을 붙이는 데 쓰지 않았다. 흩어져 있는 기록을 찾아 한자리에 모으고, 에이전트가 내놓은 해석을 한 줄씩 읽고, 잘못 이어 붙인 연결을 떼어내고, 같은 것을 다시 물었다. 눈에 보이는 결과물이 하루 종일 한 줄도 안 늘어난 날이 많았다. 그런 날에 실제로 줄어든 것은 나중에 되돌려야 할 잘못된 연결이었는데, 그건 화면에 보이지 않는다.
이름도 한 번 바꿨다. 처음 붙인 이름은 무언가를 넣어 두는 그릇 쪽이었다. 넣어 두고 나중에 열어 본다는 뜻이 강했다. 지금 쓰는 이름은 그 안이 하나의 세계라는 쪽이다. 이름을 바꾸면서 안쪽도 구역으로 갈랐고, 그 구획이 이 글에서 다루는 구조의 밑그림이 됐다. 원본이 손대지 않은 채 남는 구역이 있고, 그 위에서 검증을 거친 것만 이어 붙이는 그래프 구역이 있고, 같은 것을 시간축을 따라 보는 구역이 있다. 그중 하나는 확장 구역이다. 나를 대신해 말하는 대행 에이전트가 사는 자리이고, 세 번째 편에서 다룰 가상 무대도 거기서 나온다. 구역을 전부 세지는 않겠다. 세는 순간 이 글이 사양서가 된다.
01읽히기 전에 세었다
나는 본문을 읽히기 전에 세는 일부터 했다. 첫 인벤토리 시점 기준으로 열세 개 소스 루트에서 약 6만 개 파일을 전수 매니페스트로 셌고, 같은 시점 기준 용량은 약 73기가바이트였다. 말로 설명할 때는 그냥 6만 개라고 했다. 숫자 자체가 특별히 큰 것은 아니다. 오래 일한 사람이면 대개 그 정도는 쌓여 있다.
상한 무엇을 주장하지 않았나
약 6만 개와 약 73기가바이트에는 같은 시점 라벨이 붙는다. 첫 인벤토리 시점의 값이고, 그 뒤 회차의 값과 한 줄에 놓고 늘었다 줄었다로 읽지 않는다.
미채택 쓰지 않은 것
어려운 것은 수가 아니라 형식이었다. 오래 쌓인 기록은 한 덩어리로 묶인 큰 아카이브 파일인 경우가 많다. 사람 눈에는 파일 하나이고 이름도 하나다. 모델은 그것을 한 번에 읽지 못한다. 그런데 전부 읽고 정리해 달라고 하면 읽었다는 답은 돌아온다. 답이 돌아온다는 것과 실제로 읽혔다는 것은 다른 일이고, 그 둘을 구분하지 못한 채로 며칠을 쓰면 그 며칠에 쌓인 것이 전부 모래 위에 선다.
그래서 순서를 못 박았다. 본문을 한꺼번에 읽지 않는다. 어떤 파일이 어디에 몇 개 있고 언제 만들어졌는지부터 센다. 메타데이터를 먼저 훑고 그다음에 필요한 것만 연다. 인테이크를 거치지 않은 상태에서 분석을 시작하는 것은 금지 사항으로 적었다. 규칙을 문서에만 적어 두면 다음 회차에 그냥 지나간다. 그건 이미 몇 번 겪었다. 그래서 순서를 어기면 다음 단계로 넘어가지 못하도록 절차 쪽에 걸어 두었다.
세는 일이 끝났다고 읽는 일이 끝난 것도 아니다. 일괄 내보내기 안에는 카운트만 되고 내용 인벤토리가 없는 묶음이 남아 있었다. 다섯 종류였다. 다음 회차가 그것을 한 번의 긴 실행으로 일괄 전처리했다. 전체를 다시 읽은 것이 아니라, 세어 둔 것 중에서 아직 안 열어 본 것을 마저 연 것이다. 이 순서가 뒤집혔다면 나는 그 다섯 종류가 남아 있다는 사실 자체를 몰랐을 것이다.
여기서 알아 둔 것이 하나 더 있다. 본문을 열지 않고도 꽤 많은 것을 남길 수 있다. 어떤 자료는 본문을 옮기지 않고 라벨과 좌표만 남겨 두었다. 무엇이 어디에 있고 어떤 성격인지만 적어 둔 것이다. 그것만으로도 나중에 필요할 때 찾아 들어가는 데는 충분했고, 안쪽을 옮기지 않았으니 옮기면서 생기는 오염도 없었다.
이 순서를 지키느라 첫 주가 거의 다 갔다. 그동안 밖에서 보기에 달라진 것은 없었고 나도 몇 번은 이게 맞나 싶었는데, 세어 둔 목록이 생기고 나서야 어디부터 열어야 할지를 정할 수 있었다. 목록이 없을 때 나는 눈에 띄는 것부터 열고 있었다. 눈에 띄는 것은 대개 최근 것이고 최근 것은 대개 이미 정리된 것이라, 그렇게 며칠을 쓰면 아는 것만 다시 확인하게 된다.
세는 일에는 또 하나 좋은 점이 있었다. 안 열어 본 것을 목록에 남겨 두면 그게 안 열어 본 상태로 보인다. 열어 본 것과 안 열어 본 것이 섞여 있는데 목록이 없으면 둘이 구분되지 않고, 구분되지 않으면 나중에 전부 다 봤다고 착각한다. 나는 이 착각을 여러 번 했고, 착각한 상태에서 내린 결론을 나중에 도로 걷어내는 일이 제일 아까웠다.
세는 방식도 한 번에 정해진 것은 아니다. 처음에는 폴더를 열어 눈으로 훑었다. 그렇게 세면 셀 때마다 수가 달라진다. 어디까지 셌는지 기억에 의존하기 때문이다. 그래서 목록을 파일로 뽑기로 했고, 뽑고 나서야 같은 자료가 두 군데에 들어 있는 경우가 꽤 된다는 것을 알았다. 중복은 눈으로 훑을 때는 안 보인다. 양쪽 다 본 적이 있어서 둘 다 아는 것처럼 느껴지기 때문이다.
형식 문제는 생각보다 오래 갔다. 어떤 것은 파일 하나에 수만 건이 들어 있고, 어떤 것은 반대로 한 건이 수백 개 파일로 흩어져 있다. 앞의 것은 열 수가 없어서 문제이고 뒤의 것은 다 열면 맥락이 안 잡혀서 문제다. 두 경우에 필요한 처리가 서로 반대라, 무엇이 어느 쪽인지를 먼저 알아야 했다. 세는 일이 결국 그 분류를 위한 것이었다.
인테이크를 절차로 건 것도 나를 막기 위해서였다. 규칙은 대개 남을 막으려고 만드는데 이건 반대였다. 급할 때 나는 순서를 건너뛴다. 그리고 급하지 않은 날은 잘 없다. 문서에 적어 둔 순서는 급한 날에 정확히 무력하고, 무력한 규칙은 있으나 마나가 아니라 지키고 있다는 착각을 만드니 오히려 나쁘다.
세는 단계에서 버린 것도 있다. 같은 파일의 여러 판본이 여기저기 남아 있는 경우가 많았는데, 어느 것이 마지막인지 확실하지 않으면 전부 남겼다. 지우는 판단은 나중으로 미뤘다. 세는 단계에서 지우기 시작하면 무엇을 지웠는지가 목록에 안 남고, 그러면 나중에 그것이 원래 없었던 것인지 내가 지운 것인지 알 수 없다.
숫자를 세어 두니 다른 것도 보였다. 어느 시기의 기록이 유독 얇은지가 목록에서 드러났다. 그 시기에 내가 일을 덜 한 것은 아니고, 기록을 다른 데 남겼거나 아예 안 남긴 것이다. 안 남긴 구간은 나중에 어떤 방법으로도 못 채운다. 이 실험에서 내가 처음으로 되돌릴 수 없는 것을 만난 자리가 거기였다.
목록을 만들면서 형식별로 다르게 다뤄야 한다는 것도 알았다. 글로 된 것, 표로 된 것, 이미지로만 남은 것, 그리고 대화 기록. 넷은 읽는 방법이 다르고 남길 만한 것도 다르다. 이미지로만 남은 것은 안에 뭐가 적혀 있는지 따로 옮겨야 하는데, 옮기는 순간 원본과 다른 것이 하나 생긴다. 그래서 옮긴 것에는 옮겼다는 표시를 달았다.
세는 일을 한 번으로 끝낼 수 없다는 것도 곧 알았다. 자료는 계속 들어오고, 들어올 때마다 목록이 뒤진다. 그래서 목록을 다시 만드는 절차를 따로 뒀다. 처음 셀 때보다 다시 셀 때가 더 중요했는데, 처음 셀 때는 없던 것이 생겼는지만 보면 되지만 다시 셀 때는 있던 것이 없어졌는지도 봐야 하기 때문이다. 없어진 것은 대개 내가 정리하다가 옮긴 것이고, 옮긴 기록이 안 남으면 그건 없어진 것과 같다.
처음에 나는 이 단계를 준비 작업이라고 불렀다. 지금은 그렇게 부르지 않는다. 무엇이 있는지 세는 일이 곧 무엇을 다룰지 정하는 일이라, 이 단계에서 내린 판단이 뒤의 모든 것을 좁힌다. 열세 개 루트를 열세 개로 정한 것도 판단이고, 어떤 폴더를 목록에 안 넣은 것도 판단이다. 안 넣은 것은 이후 어느 회차에도 안 나온다. 준비 작업이라는 말에는 그 판단의 무게가 안 들어 있다.
02원본만 남기고 나머지는 버렸다
나는 원본을 한 곳에 몰아 두고 읽기 전용으로 잠갔다. 그 폴더는 고치지 않는다. 지우지도 않는다. 정리하다가 눈에 거슬려도 손대지 않는다. 규칙을 문서 맨 위에 적어 두고, 작업하는 쪽에서 그 폴더에 쓰기를 시도하면 막히게 해 두었다.
대체 본편에서 그림이 받아 간 것
상한 무엇을 주장하지 않았나
노드도 지우고 다시 만들 수 있다고 쓰지 않았다. 다시 만들 수 있는 것은 인터페이스와 그래프와 요약뿐이다. 단방향도 완전한 단방향이라고 쓰지 않았다.
그 위에 얹힌 것들은 성격이 다르다. 그래프도, 요약도, 관측용 화면도 원본을 쓰기 쉽게 만든 파생물이다. 파생물은 지우고 다시 만들 수 있다. 실제로 화면 쪽은 스크립트 한 번으로 노드에서 다시 빌드된다. 한 회차 기준으로 이백삼십여 개 노드를 다시 파싱해 화면 데이터로 만드는 식이다. 그러니 그 화면이 통째로 날아가도 잃는 것은 시간뿐이다.
층도 그렇게 갈랐다. 원본이 맨 아래에 있고 그 위에 가공이 있고 다시 그 위에 해석이 있다. 각 층은 바로 아래 층만 입력으로 삼는다. 층을 건너뛰는 직행은 금지했다. 해석 층이 원본을 직접 읽어 결론을 내면 그 결론이 어디서 왔는지 되짚을 수 없기 때문이다. 되짚을 수 없는 결론은 나중에 틀린 것으로 밝혀졌을 때 도려낼 수가 없다.
그런데 다 지울 수 있는 건 아니다. 이게 이 절에서 제일 중요한 대목이다. 검증을 거친 본문은 직접 덮어쓰지 못하게 해 두었다. 고칠 일이 생기면 그 자리에 갱신 로그를 덧붙이거나 다음 노드로 분기해야 한다. 그러면 파일은 늘어나고 관리는 번거로워진다. 그 번거로움을 감수한 이유는 하나다. 덮어쓰기가 가능하면 무엇이 언제 왜 바뀌었는지가 사라지고, 사라진 뒤에는 그것이 원래 그랬던 것처럼 보인다. 지울 수 있는 것과 없는 것을 가르는 선이 이 구조의 뼈대다.
잠근 층에서 밖으로 내보내는 방향도 한쪽으로만 흐르게 해 두었다. 안쪽의 잠긴 항목에서 밖에 내놓을 안전 요약으로 내려가는 규칙은 단방향이다. 다만 완전히 한 방향이라고는 못 쓴다. 잠근 쪽이 바뀌면 새 사이클에서 한 번은 되돌아 반영되도록 열어 두었다. 그 한 번을 없는 것처럼 적으면 내 구조가 실제보다 단단해 보인다. 그렇게 적고 싶은 유혹이 있었고, 그 유혹이 있다는 것 자체가 이 시리즈에서 다뤄야 할 종류의 일이었다.
읽기 전용 폴더 하나로 보존이 끝나는 것도 아니다. 원본을 한 곳에 뒀다는 사실과 그 한 곳이 안전하다는 사실은 서로 다른 문장이다. 나는 앞의 문장까지만 해 두었고, 뒤의 문장은 아직 하지 않았다.
파생물을 언제든 버릴 수 있게 해 두니 실제로 자주 버렸다. 화면 구성이 마음에 안 들면 고치는 대신 지우고 다시 만들었고, 그게 고치는 것보다 빨랐다. 고치기 시작하면 왜 이렇게 되어 있었는지를 먼저 알아내야 하는데 다시 만들면 그 단계가 통째로 없어진다. 버릴 수 있다는 것이 실제로는 손이 가벼워진다는 뜻이었다.
그러다 보니 어디에 시간을 쓸지가 저절로 갈렸다. 다시 만들 수 있는 것에는 공을 덜 들이고, 다시 만들 수 없는 것에만 공을 들이게 된다. 원본을 옮기는 일이나 검증 마커를 다는 일에는 시간을 아끼지 않았고, 화면을 예쁘게 만드는 일에는 거의 쓰지 않았다. 이 배분이 처음부터 계획된 것은 아니고 구조를 그렇게 짜 놓으니 따라온 것에 가깝다.
기계가 정리해 둔 층과 내가 확정한 정본도 갈라 두었다. 정규화된 형태로 정리해 둔 층이 있고, 사람이 읽고 맞다고 판정한 층이 따로 있다. 이 둘을 붙여 놓으면 정리가 끝난 것과 확정된 것이 같아 보인다. 실제로는 정리는 기계가 하고 확정은 내가 한다. 붙여 놓으면 내가 안 본 것도 확정된 것처럼 읽힌다.
버리는 쪽이 늘어나면서 만드는 태도도 달라졌다. 처음에는 화면 하나를 만들 때 나중에 고쳐 쓸 것을 염두에 두고 여지를 남겼는데, 어차피 버릴 것이라면 지금 필요한 만큼만 만드는 편이 낫다. 여지를 남긴 자리는 대개 쓰이지 않고 남았다. 쓰이지 않는 여지가 쌓이면 그것 자체가 나중에 읽어야 할 부담이 된다.
원본을 옮길 때 포맷을 바꾸지 않은 것도 같은 이유다. 읽기 좋게 변환해 두면 나중에 그 변환이 어디서 무엇을 흘렸는지 알 수 없다. 변환은 파생물 쪽에서 한다. 원본은 읽기 불편한 채로 둔다. 불편한 것이 안전하다는 판단이 이 구조 전체에 여러 번 나오는데, 이 자리가 그중 하나다.
잠그고 나서 실수도 있었다. 잠긴 폴더에 새 자료를 넣어야 하는 상황이 생겼는데 어디로 넣을지가 안 정해져 있었다. 잠근 것은 고치지 말라는 뜻이지 더 넣지 말라는 뜻이 아닌데, 규칙에 그 구분을 적어 두지 않았다. 그래서 반입 경로를 따로 만들었다. 넣는 문과 고치는 문은 다른 문이다.
층을 나눈 뒤 생긴 부작용도 있다. 한 층에서 다음 층으로 넘어갈 때마다 무언가 조금씩 줄어든다. 요약하면 줄고, 정규화하면 또 줄고, 해석하면 다시 줄어든다. 위층만 보고 있으면 아래에 무엇이 있었는지 잊는다. 그래서 위층의 문장마다 아래층의 어느 자리에서 왔는지를 붙여 두었다. 그 표시가 없으면 층은 그냥 요약본 더미가 된다.
원본을 안 고친다는 규칙은 원본이 틀렸을 때도 적용된다. 오래된 기록에는 지금 보면 틀린 것이 섞여 있다. 그것을 고치고 싶은 마음이 자주 들었는데 고치지 않았다. 대신 그 위층에 정정을 붙였다. 원본은 그때 내가 그렇게 알고 있었다는 사실의 기록이고, 그 사실 자체는 틀리지 않았다. 무엇이 언제 바뀌었는지를 보려면 틀린 채로 남겨 둔 자리가 있어야 한다.
이 구조를 만들고 나서 겪은 변화 중 하나는 손실에 대한 감각이다. 예전에는 무언가 지워질까 봐 백업을 여러 벌 만들었고, 여러 벌이 생기니 어느 것이 최신인지 몰랐다. 지금은 잠긴 한 벌만 지키고 나머지는 언제든 버린다. 지킬 것이 하나로 줄어드니 그 하나를 실제로 지키게 됐다. 여러 개를 다 지키겠다는 것은 대개 아무것도 안 지키는 상태로 간다.
03한 글자로 끝난 답들
나는 완성된 프로필 양식을 만들어 빈칸을 채우는 방식을 쓰지 않았다. 그 방식이면 양식을 만든 사람의 머릿속이 그대로 답의 범위가 된다. 대신 자료를 먼저 펼치게 하고, 자료끼리 연결되지 않는 지점이 나오면 그 자리를 추론으로 메우지 말고 나에게 묻게 했다. 미응답 슬롯은 추정으로 채우지 않는다. 보류 라벨을 단 채로 남겨 두었다가 나중에 다시 묻는다. 빈칸도 답이다.
갈림 판단이 갈렸던 자리
질문 자체가 그 방식에서 나왔다. 자료로는 못 채우고 내가 말해야만 채워지는 자리가 있다. 지금도 그런가, 이게 맞는 해석인가 같은 것들이다. 그런 질문은 자료를 아무리 늘려도 답이 안 나온다. 실제로 검증 목록의 머리에는 대행 에이전트가 실제 나와 다를 수 있는 지점들이 반복해서 나왔다고 적혀 있었다.
어떤 회차에는 한 라운드에 쉰한 문항이 왔다. 여덟 영역에 다섯 문항씩, 거기에 자료 인용 열 문항과 메타 한 문항이 붙은 묶음이었다. 다 답하기 어려웠다. 성찰을 묻는 묶음은 서른두 문항이었고, 축을 확인하는 묶음은 열다섯 문항이었다. 세 묶음의 성격이 서로 달라서 총합으로 세는 것은 의미가 없다.
그다음 회차에 나는 질문지를 확인형으로 경량화했다. 열린 질문을 줄이고 맞는지 아닌지만 표시하면 되게 바꿨다. 그 판본에서 열다섯 축 가운데 열두 축이 「o」 한 글자로 끝났다. 내가 자발적으로 길게 쓴 것은 보완이 필요한 세 축뿐이었다. 후보가 좋아질수록 내가 할 일은 확인으로 줄어든다.
한쪽으로만 기울지 않게 적어 둘 것이 있다. 두 번째 라운드에서 나는 서른두 문항 중 절반이 서로 비슷하다고 보고 여섯 문항을 건너뛰었다. 그리고 한정된 자료만 읽고 질문을 만드는 것 아니냐고 의심을 표했다. 에이전트는 그 지적을 받아 질문을 만드는 규칙 쪽을 고쳤다. 확인으로 줄어든 것이 질문이 좋아졌기 때문만은 아니었다는 뜻이다. 내가 중간에 한 번 걷어차서 방향이 바뀐 자리가 있다.
짧게 답해도 되는 자리에서 내가 문장으로 답한 판본은 따로 있다. 검증 문항 일곱 개는 O나 X 또는 한 줄이면 충분하다고 적혀 있었다. 나는 전부 문장으로 썼다. 몇 년이 됐는지, 언제 길게 말하고 언제 짧게 끊는지, 먼저 제안하는 형태가 지금도 있는지, 신앙을 어디까지 말하는지 같은 것들이었다. 그 답이 대행의 정확도를 되돌렸다. 앞 편에서 다룬 회복의 절반이 그것이다. 그러니 이 절의 이야기는 내가 짧게 답했다는 쪽이 아니라, 짧게 답해도 되게 만들어 두었더니 정작 길게 답해야 하는 자리가 어디인지 드러났다는 쪽이다.
질문에 답하는 일 자체가 생각보다 힘들었다. 자료를 넣는 일은 시간만 있으면 되는데 질문에 답하는 일은 내가 그 자리에 앉아 있어야 한다. 하루에 열 문항쯤 답하고 나면 더 쓰기 싫어졌고, 그때 답한 것과 안 답하고 넘어간 것의 질이 눈에 띄게 달랐다. 지쳐서 대충 넘긴 답이 나중에 대행의 말투로 그대로 돌아오는 것을 보고 나서는 피곤한 날에는 아예 안 답하기로 했다.
보류 라벨을 쓰기 시작한 것도 그 무렵이다. 처음에는 모르는 자리를 비워 두는 것이 못 한 일처럼 느껴져서 대충이라도 채웠다. 그렇게 채운 값이 다음 회차에 근거로 쓰이는 것을 보고 나서 생각이 바뀌었다. 비워 두면 다음에 다시 물어 오지만 대충 채우면 다시 안 물어 온다. 채운 것이 맞는지는 아무도 검사하지 않는다.
폐기한 해석도 지우지 않고 남겼다. 아니라고 판정한 것에 폐기 표시를 달아 두되 파일에서 빼지는 않는다. 지우면 왜 아니라고 했는지가 같이 사라진다. 그러면 비슷한 자료가 다시 들어왔을 때 같은 해석이 다시 올라오고, 나는 그것이 처음 보는 것인 줄 알고 다시 판정한다. 두 번째 판정이 첫 번째와 다르면 그건 더 나빠진 것이다.
질문의 성격도 회차마다 달랐다. 초반에는 사실을 묻는 것이 많았다. 언제 무엇을 했는지, 어떤 순서로 진행했는지 같은 것들이다. 그런 질문은 자료가 늘면 저절로 줄어든다. 남는 것은 판단을 묻는 질문이었다. 두 가지가 부딪힐 때 무엇을 앞에 두는지, 지금도 그 기준이 그대로인지. 그건 자료를 아무리 넣어도 줄지 않았다.
돌아보면 이 루프에서 내가 한 일은 답을 주는 것보다 질문을 고르는 쪽에 가까웠다. 온 질문에 다 답하지 않았고, 답하지 않은 것을 답하지 않은 채로 뒀다. 그렇게 남긴 자리가 지금도 몇 개 있다. 채워야 할 것 같은데 채우면 거짓이 되는 자리라서, 비어 있는 상태가 지금으로서는 가장 정확한 값이다.
질문을 받는 쪽에서 알게 된 것도 있다. 좋은 질문은 대개 짧다. 길게 설명한 뒤에 묻는 질문은 이미 답을 정해 놓고 확인만 받으려는 경우가 많았다. 짧게 묻는 질문에는 내가 생각하지 않았던 답이 나왔다. 이건 에이전트에게만 해당되는 이야기는 아닌 것 같다.
질문의 좋고 나쁨은 답하는 데 걸리는 시간으로 알 수 있었다. 오래 붙잡고 있는 질문은 대개 여러 개를 한 번에 묻는 질문이다. 하나씩 갈라 놓으면 각각은 금방 답이 나온다. 그래서 어느 시점부터 나는 답하기 전에 질문을 먼저 쪼갰다. 쪼개는 데 걸린 시간이 답하는 시간보다 길었던 적도 있는데, 그 회차의 답이 제일 정확했다.
기록을 보니 내가 답을 바꾼 자리도 있다. 같은 축을 두 번 물었을 때 첫 번째와 두 번째 답이 달랐다. 처음에는 잘못 답한 줄 알았는데 읽어 보니 그사이에 실제로 생각이 바뀐 것이었다. 사람이 답하는 자료에는 이런 일이 생긴다. 그래서 답을 덮어쓰지 않고 둘 다 두되 언제 답한 것인지를 붙였다.
이 루프를 돌리면서 알게 된 것 중 제일 뜻밖이었던 것은 질문이 나를 바꿨다는 점이다. 답하려고 앉아 있다 보면 내가 그것을 그렇게 생각하고 있었는지 처음 확인하게 된다. 평소에 안 물어보는 것들이라 답이 준비돼 있지 않고, 준비 안 된 답을 쓰다 보면 쓰는 도중에 정리된다. 이 실험에서 산출물 말고 나에게 남은 것을 꼽으라면 그쪽이다.
질문 루프에서 마지막으로 적어 둘 것은 이 루프가 끝나지 않는다는 점이다. 답이 쌓일수록 새 질문이 생긴다. 답한 것들 사이가 어긋나면 그 어긋남에 대해 다시 묻고, 시간이 지나면 예전 답이 아직 유효한지 다시 묻는다. 처음에는 이걸 다 채우면 끝나는 일이라고 생각했는데 아니었다. 채우는 일이 아니라 유지하는 일에 가깝다.
04관계보다 먼저 정한 것
나는 노드를 하나도 만들기 전에 무엇이 지식의 단위인지부터 문서로 박았다. 이건 사실 제일 먼저 한 일이다. 이 절이 네 번째에 오는 것은 이야기의 순서일 뿐이고, 여기 나오는 규칙들은 내 아카이브에서 가장 이른 날짜를 달고 있다. 인벤토리보다 앞이고 질문 루프보다 앞이다.
상한 무엇을 주장하지 않았나
열두 주장은 대조표 한 장의 주장 수다. 온톨로지 전체의 주장 수가 아니다. 그리고 선행 규칙과 점검 결과를 「그래서」로 잇지 않았다.
미채택 쓰지 않은 것
무엇을 하나로 볼 것인가부터 정했다. 사람과 조직과 사건과 산출물과 주장을 각각 어떤 단위로 다룰지, 그리고 어떤 것과 어떤 것이 절대 이어지면 안 되는지를 먼저 고정했다. 그다음에 만든 노드가 전부 그 규칙을 상속하게 했다. 규칙을 나중에 붙이면 이미 만든 것을 전부 다시 봐야 하는데, 그건 몇 백 개가 넘어가면 사실상 못 한다.
나중에 주장과 근거를 맞춰 놓은 대조표 한 장을 놓고 세어 봤다. 그 표에 있는 열두 주장 전부에 출처 계열이 붙어 있었다. 출처 없이 떠 있는 주장은 없었다. 열둘은 그 표 한 장의 주장 수다. 온톨로지 전체의 주장 수가 아니다. 전체는 그보다 훨씬 크고, 그 전부를 같은 방식으로 점검한 적은 아직 없다.
같은 점검이 잡아낸 것이 하나 더 있다. 같은 기호가 두 체계에서 서로 다른 뜻으로 쓰이고 있었다. 한쪽에서는 출처 계열의 번호였고 다른 쪽에서는 다른 것의 번호였다. 그건 중요 불일치로 올라왔다. 깨끗한 절반만 적으면 그 점검이 무엇을 하는 물건인지가 사라진다. 통과했다는 결과만 남기면 그건 점검이 아니라 자기 인증이다.
그다음이 상태 사슬이다. 들어온 자료는 일단 후보가 된다. 후보는 사람이 읽는 검토함으로 간다. 승인을 받아야 편입된다. 그리고 승인과 적용은 서로 다른 단계다. 나는 이 둘을 갈라 두는 데 시간을 좀 썼다. 승인했다고 그것이 끝까지 내려간 것은 아니어서, 한 면만 고치고 다른 면에는 옛 문장을 그대로 두는 일이 생긴다. 확인하기 전까지 반영됐다고 적지 않기로 한 것이 그 때문이다.
거절한 후보는 조용히 지우지 않았다. 왜 거절했는지를 남긴다. 지우면 다음 회차에 같은 추정이 다시 들어온다. 나는 그걸 한 번 겪고 나서 거절 원장을 따로 만들었다. 지운 자리는 비어 보이지만 사실 비어 있는 것이 아니라 잊힌 것이다.
이 사이클 안에서 후보가 스스로 좋아지는 구간이 있다. 다만 그건 만들고 검토하고 승인하는 사이에서의 개선이다. 아무도 안 보는 데서 혼자 학습하는 것이 아니다. 자료를 모으는 일과 생각하는 일이 같은 일이 아니라는 것을 나는 전에 한 번 글로 적어 둔 적이 있는데, 이 구조는 그 문장을 절차로 옮긴 것에 가깝다.
단위를 먼저 정하는 일은 재미가 없다. 눈에 보이는 것이 안 생기고 며칠이 그냥 간다. 그때 나는 이걸 나중에 해도 되지 않나 생각했는데, 실제로 나중에 한 부분이 있고 그 부분이 결국 가장 많이 손이 갔다. 규칙 없이 만들어 둔 것들은 나중에 규칙을 붙일 때 하나씩 다시 열어 봐야 했고, 열어 보면 대개 그때의 판단 근거를 안 적어 두어서 다시 판단해야 했다.
승인과 적용을 가른 것도 겪고 나서 만든 규칙이다. 확정했다고 적어 두고 며칠 뒤에 다른 면을 열어 보면 옛 문장이 그대로 있는 일이 몇 번 있었다. 그때마다 나는 이미 고쳤다고 기억하고 있었는데 기억이 틀린 것이 아니라 고친 자리가 하나였을 뿐이다. 그래서 어디에 반영돼야 하는지를 적는 칸을 따로 만들고, 한 번 확인하기 전까지는 반영됐다고 적지 않기로 했다.
단위를 정하는 일에서 제일 오래 걸린 것은 사람이었다. 같은 사람이 여러 맥락에 나오는데 맥락마다 다른 이름으로 적혀 있는 경우가 많다. 그걸 하나로 묶을지 따로 둘지는 규칙 하나로 정하지 못했다. 묶으면 흩어진 기록이 이어지지만 섞이면 안 되는 것까지 이어질 위험이 생긴다. 결국 묶는 쪽보다 안 묶는 쪽을 기본값으로 뒀다. 이어 붙이는 것은 나중에도 할 수 있지만 잘못 이어 붙인 것을 떼어내는 일은 훨씬 어렵다.
검토함을 만들고 나서 알게 된 것도 있다. 승인을 기다리는 것이 쌓이면 그 자체가 압박이 된다. 빨리 비우고 싶어서 대충 넘기게 되고, 대충 넘긴 것이 정본으로 들어간다. 그래서 검토함에 들어오는 양을 앞에서 조절했다. 한 번에 많이 만들지 않게 하고, 만든 것은 그날 안에 판정하게 했다. 처리 속도를 올리는 대신 유입을 줄인 셈이다.
규칙을 먼저 세우면 나중에 규칙과 충돌하는 자료가 들어온다. 그럴 때 규칙을 고칠지 자료를 예외로 둘지가 매번 문제였다. 예외를 한 번 만들면 다음 예외가 쉬워진다. 그래서 예외를 만들 때는 왜 예외인지를 규칙 문서 안에 같이 적기로 했다. 예외의 수가 늘면 그건 규칙이 틀렸다는 신호로 읽기로 했고, 실제로 그 신호를 보고 규칙을 한 번 고쳤다.
이 절의 내용은 대부분 눈에 안 보인다. 화면에도 안 나오고 산출물에도 안 나온다. 그런데 이 편에서 하나만 남기라면 나는 이 절을 남기겠다. 나머지 다섯 절이 하는 일은 결국 여기서 정한 단위와 순서를 따라가는 것이고, 이 자리가 흔들리면 위에 쌓은 것이 전부 같이 흔들린다.
규칙을 세울 때 가장 조심한 것은 내가 나중에 이 규칙을 읽을 것이라는 점이었다. 지금의 나는 왜 이렇게 정했는지 안다. 두 달 뒤의 나는 모른다. 그래서 규칙마다 왜 그렇게 정했는지를 한 줄씩 붙였다. 붙이는 데 시간이 더 들었는데, 실제로 두 달 뒤에 그 한 줄을 여러 번 읽었다.
검토함을 거치게 한 뒤로 속도는 확실히 느려졌다. 예전에는 만들면 바로 반영됐는데 이제는 한 번 서는 자리가 생겼다. 대신 되돌리는 일이 거의 없어졌다. 총 시간으로 따지면 어느 쪽이 빠른지 세어 보지는 않았다. 다만 되돌리는 일에는 시간 말고도 다른 것이 든다.
단위와 경계를 먼저 정해 두니 나중에 판단할 일이 줄었다. 새 자료가 들어와도 어디에 넣을지가 대체로 정해져 있고, 안 정해지는 것만 따로 보면 된다. 안 정해지는 것이 나오면 그건 규칙에 빈칸이 있다는 신호라 규칙을 고쳤다. 판단을 매번 하는 대신 규칙을 가끔 고치는 쪽으로 옮긴 것인데, 이 방식의 장점은 고친 기록이 남는다는 데 있다. 매번 하는 판단은 아무 데도 안 남는다.
이 절의 규칙들이 실제로 값을 하는 자리는 대개 사고가 났을 때다. 평소에는 없어도 굴러간다. 그래서 만들 때는 과하다는 느낌이 들었고 몇 개는 실제로 과했다. 그런데 어느 것이 과했는지는 사고가 한 번 나 봐야 알 수 있고, 사고가 나기 전에 미리 걷어낸 것들은 정작 필요할 때 없었다. 지금은 과한 쪽으로 남겨 두고, 두 회차 이상 한 번도 안 걸린 규칙만 걷어낸다.
05연결 수를 버린 자리
나는 처음에 연결이 몇 개인지부터 봤다. 그 축을 버렸다.
상한 무엇을 주장하지 않았나
쉰여섯 건과 백사십은 한 회차 스냅샷의 값이라 지금 분모와 다르다. 「초기 그래프는 보기 좋지 않았다」는 미학 판정이라 쓰지 않았다.
최소 연결 수 기준은 아무것도 판별하지 못했다. 한 회차 스냅샷에서 차수가 백사십까지 오른 노드가 있었다. 그 앞에서 연결이 셋 이상이냐 아니냐를 묻는 것은 아무 말도 하지 않는 것과 같다. 많이 이어져 있다는 사실은 그 노드가 중요하다는 뜻일 수도 있고, 그냥 목차 같은 것이라는 뜻일 수도 있다. 연결 수만으로는 그 둘이 구분되지 않는다.
대신 두 가지로 갈아 끼웠다. 하나는 하중이다. 나보다 나중 층이 나를 인용한 횟수를 센다. 목차에서 거는 링크는 뺀다. 목차는 모든 것을 가리키므로 세면 목차가 가장 중요해진다. 다른 하나는 검증 부채다. 많이 인용되는데 검증 마커가 하나도 없는 상태를 그렇게 불렀다. 그때 세어 보니 부채로 잡힌 것이 쉰여섯 건이었다. 그 수는 그 회차 스냅샷의 값이고, 지금 온톨로지는 분모가 달라서 같은 줄에 놓고 비교할 수 없다.
축을 바꾸자 그래프가 다른 것을 보이기 시작했다. 어느 노드가 다른 노드를 떠받치고 있는데 아직 검증되지 않았는가. 그게 화면에서 바로 읽혔다. 그전까지 나는 다음에 무엇을 할지를 목록으로 관리하고 있었는데, 축을 바꾼 뒤에는 그림에서 나왔다. 목록은 내가 적은 것이라 내가 놓친 것은 거기 없다. 그림은 내가 안 적어도 계산돼 나온다.
계산식 자체는 단순하다. 몇 줄이면 된다. 어려운 것은 무엇을 세느냐였고, 세는 대상을 바꾸는 데 든 시간이 계산을 짜는 시간보다 훨씬 길었다. 지금 돌아보면 이 절이 이 편에서 가장 짧게 적히는데 실제로는 가장 오래 걸린 자리다.
축을 바꾸기 전에 나는 그래프를 자주 열어 보지 않았다. 열어 봐도 할 일이 안 나왔기 때문이다. 무엇이 무엇과 이어져 있다는 것은 알겠는데 그래서 다음에 뭘 하라는 것인지가 안 나왔고, 그러면 결국 내가 적어 둔 목록으로 돌아가게 된다. 화면은 있는데 안 쓰는 상태가 한동안 이어졌다.
바꾸고 나서 달라진 것은 화면을 여는 빈도였다. 떠받치는데 검증이 안 된 자리가 보이면 그게 곧 다음 할 일이라, 다른 데를 보러 갔다가도 그 화면으로 돌아오게 된다. 도구가 쓸모 있어졌다는 신호를 나는 기능이 늘어난 데서가 아니라 내가 그것을 여는 횟수에서 봤다.
무엇을 셀지 정하는 일은 결국 무엇이 위험한지를 정하는 일이었다. 연결이 적은 노드는 위험하지 않다. 아무도 안 보고 있으니 틀려 있어도 퍼지지 않는다. 위험한 것은 반대쪽이다. 여러 곳이 딛고 서 있는데 정작 그 자리가 확인된 적이 없는 노드. 그게 틀리면 그 위에 얹힌 것이 전부 같이 틀린다. 축을 바꾼다는 것은 화면의 기준을 중요도에서 위험도로 옮긴 것에 가깝다.
목차 링크를 빼기로 한 것도 그래서다. 목차는 모든 것을 가리키므로 세면 가장 무거워지는데, 목차가 틀렸다고 그 아래가 틀리는 것은 아니다. 가리키는 것과 딛고 서는 것은 다른 종류의 연결이고, 그 둘을 같은 선으로 그려 놓으면 그림이 아무 말도 하지 않는다. 선을 다 그리는 것보다 어떤 선을 안 그릴지 정하는 데 시간이 더 들었다.
이 절이 가장 늦게 정리된 자리이기도 하다. 앞의 네 절은 시작할 때 대충 그림이 있었는데 여기는 없었다. 그래프를 왜 만드는지부터 애매했다. 관계를 보려고 만든다는 말은 아무것도 정하지 않는 말이라, 무엇을 결정하려고 보는지를 적고 나서야 축을 정할 수 있었다. 도구를 먼저 만들고 용도를 나중에 찾은 셈이고, 순서가 뒤집혀 있었던 것을 인정하는 데도 시간이 좀 걸렸다.
축을 갈아 끼운 다음에도 한동안 예전 화면을 같이 띄워 뒀다. 새 축이 맞는지 확인하려면 옛 축으로 본 그림이 옆에 있어야 했다. 두 그림이 다른 것을 가리키는 자리가 나오면 그 자리를 열어 봤고, 대개 새 축 쪽이 맞았다. 확인이 끝난 다음에 옛 화면을 지웠다. 지운 것도 파생물이라 언제든 다시 만들 수 있다.
이 절에서 배운 것을 한 줄로 적으면 이렇다. 그래프는 관계를 보여주는 물건이 아니라 다음 할 일을 고르는 물건으로 쓸 때 값이 나온다. 관계는 그냥 보여도 아무것도 안 정해진다. 무엇을 고를지가 정해지려면 그 관계 위에 판정이 얹혀 있어야 한다.
돌아보면 이 절이 이 편에서 가장 늦게 이해된 자리다. 앞의 네 절은 무엇을 만들지가 분명했고 만들면 됐다. 여기는 무엇을 만들지가 분명하지 않았고, 만들고 나서도 이게 맞는지 한참 몰랐다. 축을 바꾼 뒤에야 앞의 것이 틀렸다는 것을 알았는데, 틀렸다는 것을 알기 위해 맞는 것을 먼저 만들어야 했다. 이런 순서가 되는 작업이 있다.
이 축이 지금도 맞는지는 모른다. 지금은 무엇을 먼저 검증할지가 잘 나오는데, 다른 질문을 하게 되면 다른 축이 필요할 것이다. 축은 질문에 딸린 것이라 질문이 바뀌면 같이 바뀐다. 그때 다시 갈아 끼울 수 있게 계산은 얇게 두었다. 얇게 두었다는 것은 이 계산에 다른 것을 얹지 않았다는 뜻이다.
06선언과 실물 사이
나도 처음에는 에이전트가 복잡한 소프트웨어인 줄 알았다. 만들고 보니 역할과 규칙을 적은 파일 한 장이었다. 메신저로 보낼 수도 있고, 메모장에 두었다가 꺼낼 수도 있다. 사람이 읽을 수 있는 글로 되어 있어서 무엇을 하라고 적혀 있는지 그대로 보인다. 나는 채팅창에 「만들었습니다」가 뜬 데서 멈추지 않고 그 파일을 열었다. 내가 요청한 규칙이 실제로 들어 있는지 읽었다. 한 줄이 빠져 있었고 그 자리에서 고쳤다.
대체 본편에서 그림이 받아 간 것
상한 무엇을 주장하지 않았나
다섯 칸을 채워서 스킬이 됐다고 쓰지 않았다. 여섯 후보 전부가 채웠다. 스킬의 총수도 쓰지 않았다. 성립하는 것은 「여섯 중 셋이 실물로 남았다」까지다.
미채택 쓰지 않은 것
스킬 후보도 문서로 먼저 세웠다. 다른 일을 정리하다가 반복해서 쓰게 된 절차들이었다. 목적과 입력과 출력과 절차와 검증, 다섯 칸을 만들어 놓고 후보마다 그 칸을 채우게 했다. 여섯 후보가 다섯 칸을 전부 채웠다. 실물 파일로 살아남은 것은 셋이다. 다섯 칸을 채웠다는 사실은 통과 조건이 아니었다는 뜻이다. 남은 셋은 내가 사십 일 동안 실제로 반복해서 쓴 것들이고, 아홉 번의 시험을 거쳐 통과한 것만 수록하기로 해 두었다. 문서로 세우는 일과 살아남는 일은 다른 관문이었다.
정리 문서 한 장에 내부 이름 넷을 나란히 적었다. 나는 그 이름으로 파일을 찾아봤다. 한 장도 없는 것이 섞여 있었다. 게다가 같은 단어 하나가 네 가지를 가리키고 있었다. 어떤 자리에서는 저장소를 뜻하고 어떤 자리에서는 화면을 뜻하는 식이었다. 설계가 실행보다 앞서 나가면 이런 거리가 생긴다. 설계가 틀렸다는 뜻은 아니다. 책임을 나누는 그림과 지금 실제로 서 있는 물건 사이에 거리가 있다는 뜻이고, 그 거리를 재 보지 않으면 그림 쪽을 현황으로 착각한다.
나는 밖으로 나가는 면의 대표 이름을 하나로 통일했다. 산출물과 소개와 발신에 쓰는 이름을 하나로 맞췄다. 그 넷을 정식 어휘로 채택할지는 미뤄 두었다. 급하지 않다고 적어 두었는데, 급하지 않은 이유가 해결됐기 때문이 아니라 산출물이 하나의 이름으로 나가니 충돌이 겉으로 안 보이기 때문이다. 표면에서 안 보이게 미룬 것을 해결이라고 부르지 않기로 했다.
폴더 구조와 사양 파일은 압축해서 건넬 수 있다. 실제로 그렇게 만들어 두었다. 그런데 건네지는 것은 틀뿐이다. 남의 축과 노드 체계를 그대로 옮겨 놓으면 빈 틀만 남는다는 것을 실패 모드로 적어 두었는데, 그건 남을 관찰해서 안 것이 아니라 내가 만든 틀을 다시 보면서 안 것이다. 사람마다 자료의 양과 질과 기록 습관이 달라서 같은 틀은 같은 방식으로 채워지지 않는다. 그래서 먼저 줄 것은 완성된 틀이 아니라 자기 진단 질문지 쪽이라고 적어 두었다. 자기가 무엇을 갖고 있는지부터 세는 일이 첫날 할 일이다.
파일을 열어 본 습관은 그 뒤로 계속 남았다. 만들었다는 말과 만들어졌다는 사실 사이에 한 겹이 있고, 그 겹을 넘는 방법은 열어 보는 것밖에 없다. 시간이 오래 걸리는 일도 아니다. 대개 한두 장이고 읽는 데 몇 분이면 된다. 그런데 열어 보지 않으면 그 몇 분을 아낀 대가로 며칠 뒤에 어디서부터 잘못됐는지를 찾게 된다.
이 세 장면이 같은 종류라는 것은 나중에 알았다. 만들었다는 말과 열어 본 파일, 다섯 칸을 채운 후보와 살아남은 셋, 내가 적어 둔 이름과 실제로 있는 파일. 셋 다 선언이 먼저 있고 실물이 나중에 오는 구조이고, 그 사이의 거리를 아무도 대신 재 주지 않는다. 재는 방법은 매번 같았다. 적어 둔 대로 있는지 열어 보는 것이다.
일하는 방식을 문서로 정리해 두는 일은 전에도 했다. 그때는 사람이 읽을 것을 염두에 두고 썼다. 지금은 에이전트가 읽고 그대로 실행할 것을 염두에 두고 쓴다. 두 글은 겉보기에 비슷한데 요구하는 정밀도가 다르다. 사람은 애매한 문장을 알아서 해석하고 넘어가지만 에이전트는 애매한 자리에서 자기가 채운다. 자기가 채운 것을 나중에 내가 쓴 것으로 착각하는 일이 여기서 시작된다.
세 장면 다 내가 만든 것에서 나왔다. 남이 만든 것을 검사한 이야기가 아니다. 내가 적어 놓고 내가 확인 안 한 자리들이고, 확인해 보니 셋 다 어긋나 있었다. 이 실험에서 반복해서 나오는 형태가 그것이다. 자동화는 내가 안 보는 자리를 늘리고, 안 보는 자리는 어긋나 있어도 아무도 말해 주지 않는다.
세 장면을 겪고 나서 습관이 하나 더 생겼다. 무언가를 정했으면 그것을 실제로 어디에 적었는지까지 같이 적는다. 정했다는 사실만 남으면 그 결정은 내 머릿속에만 있다. 어디에 적었는지를 같이 적어 두면 나중에 그 자리를 열어 확인할 수 있고, 열어 보니 없으면 그건 결정이 안 내려간 것이다.
이 편을 쓰면서 그 확인을 몇 번 더 했다. 여기 적은 규칙들을 실제로 어디에 어떻게 걸어 두었는지 다시 열어 봤고, 두 군데에서 문서와 실물이 달랐다. 고쳐 놓고 이 문장을 쓴다. 글을 쓰는 일이 점검이 되는 구조인데, 그게 이 시리즈를 쓰기로 한 이유 중 하나이기도 하다.
이 편을 여기서 닫으면서 한 가지를 더 적어 둔다. 지금까지 적은 구조는 전부 나 한 사람이 쓸 것으로 만들었다. 판정도 내가 하고 승인도 내가 하고 확인도 내가 한다. 사람이 둘 이상이 되면 무엇이 달라지는지는 아직 모른다. 짐작은 가지만 짐작은 이 시리즈에 쓸 수 있는 것이 아니다.
여기까지가 구조다. 세 번째 편은 그 구조가 잘 돌기 시작하면서 같이 커진 것을 쓴다. 해상도가 올라갈수록 대행이 나를 더 정확히 흉내 내고, 그러면 내가 열지 않기로 정해야 하는 자리도 같이 늘어난다. 잘 만들수록 위험해지는 종류의 물건이라는 것을 그때 알았다.
*시리즈 : (1) 결과 (2) 구조 (3) 경계* *원문은 https://kiheon.com 에 있다. 이 글은 신기헌의 디지털 트윈 프로젝트를 바탕으로 AI 에이전트가 100% 작성하고 편집했다.*