동맹 형성, 조약 체제, 또는 국제 개발의 정치학에 관한 글을 읽으며 하루를 보낸다면, 당신은 아마 이미 JSTOR 안에서 살고 있을 것입니다. 저도 그렇습니다. 저는 케임브리지 대학교의 국제 관계학 전공 학생이며, 기억이 나는 아주 오래전부터 이 아카이브는 저의 기본 작업 공간이었습니다. 지난 학기 JSTOR가 새로운 AI 연구 도구를 출시했을 때, 저는 다른 새로운 기능들을 대하듯 경계했습니다. 주변의 많은 학생과 교수진처럼, 저 또한 ChatGPT가 기본적인 사실에서 실수를 하고, 인용 문헌을 지어내며, 근거 없는 헛소리를 자신 있게 내뱉는 것을 지켜봐 왔습니다. 저에게는 저 대신 생각해주겠다고 약속하는 또 다른 도구가 필요하지 않았습니다. 제가 필요한 것은 각주를 망치지 않으면서도 제가 더 잘 생각할 수 있도록 도와주는 것이었습니다.
그래서 저는 이 도구가 정말로 다른지 확인하기 위해 한 학기 내내 집중적으로 사용해 보았습니다. 몇 주간의 실제 교과 과정과 에세이 연구를 거친 후, 저는 이것이 단순한 눈속임이 아니라고 말할 수 있습니다. 이 도구는 학술 자료를 탐색하는 방식을 바꾸어 놓으며, 그 이유는 화려함보다는 실용성에 기반합니다.
불신이 타당했던 이유
학계가 생성형 AI를 의심하는 데에는 그만한 이유가 있었습니다. UN 결의안 날짜의 정확성이나 안보리 권고안의 정밀한 문구에 따라 성적이 결정되는 상황에서, 환각(hallucination) 현상이 끼어들 자리는 없습니다. ChatGPT와 다른 오픈 웹 어시스턴트들은 그럴듯하지만 가짜인 출처 제목을 생성하고, 인용구를 잘못 할당하며, 뉘앙스를 완전히 사라질 때까지 뭉뚱그려 버리는 고질적인 습관이 있습니다. 지도 교수님께 JSTOR의 도구를 테스트 중이라고 말씀드렸을 때, 우려는 즉각적이었습니다. 출처를 지어내지는 않을지? 복잡한 논거를 오해의 소지가 있는 요약본으로 바꾸어 버리지는 않을지? 이는 타당한 질문입니다. 단 하나의 잘못된 인용만으로도 연구 논문 전체의 신뢰성을 무너뜨릴 수 있기 때문입니다.
JSTOR 도구의 차이점은 답을 찾는 위치에 있습니다. 이 도구는 오픈 인터넷을 긁어모으지(scrape) 않습니다. 대신 JSTOR 아카이브 내에 이미 존재하는 신뢰할 수 있는 학술 자료를 직접 활용합니다. 그 차이는 작아 보일지 모르지만, 모든 것을 재정의합니다.
신뢰할 수 있는 영역 내에서의 탐색
지난 학기 제 연구의 대부분은 경제 제재 문헌이 인권 프레임워크와 어떻게 교차하는지를 추적하는 것이었습니다. 이는 매우 방대하고 학제적인 작업입니다. 보통 과정은 이렇습니다. 키워드 검색을 하고, 탭을 30개쯤 열고, 초록을 읽고, PDF를 12개 정도 다운로드한 뒤, 어떤 저자가 어떤 미묘한 차이를 설명했는지 기억해 내느라 며칠을 보냅니다. 느립니다. 꼭 필요한 과정이지만, 느립니다.
아카이브에 통합된 AI 도구를 사용하면, 논거 사이의 관계에 대해 직접 질문을 던질 수 있고, 실제로 열어보고 확인할 수 있는 논문들에 완전히 근거한 답변을 얻을 수 있었습니다. 이 도구는 제가 놓쳤던 국제법 학술 연구와 정치경제학 연구 사이의 연결 고리를 짚어주었습니다. 이것은 위키피디아 스레드에서 가져온 인위적인 요약이 아니었습니다. 제가 이미 신뢰하고 있는 동일한 데이터베이스 내에 있는 실제 피어 리뷰(peer-reviewed) 자료들을 통하는 경로였습니다.
이는 역사학, 정치학, 또는 1차 및 2차 사료를 주의 깊게 다뤄야 하는 모든 분야에서 일하는 사람들에게 매우 중요합니다. 당신은 판단력을 블랙박스에 외주 주는 것이 아닙니다. 도서관 안에 머무는 가이드를 활용하는 것입니다.
정확성을 희생하지 않는 속도
저에게 가장 실질적인 변화는 속도였습니다. 케임브리지의 마감 기한은 지연을 용납하지 않으며, 속도를 위해 철저함을 희생하고 싶은 유혹은 늘 존재합니다. 동급생들이 문헌 검토(literature review)를 생성하기 위해 오픈 웹 AI에 의존했다가, 며칠 뒤 가짜 참고 문헌을 삭제하느라 고생하는 것을 본 적이 있습니다. JSTOR 도구는 모든 제안에 실제 출처로 연결되는 직접 링크가 포함되어 있었기에, 정확성을 잃지 않으면서도 아카이브를 더 빠르게 탐색할 수 있게 해주었습니다. 몇 초 만에 원문을 확인할 수 있었습니다. 요약이 어색하게 느껴지면, 바로 옆에 있는 논문 전문을 통해 바로잡을 수 있었습니다.
국경 분쟁에 대한 탈식민주의적 접근 방식을 다룬 에세이를 쓰는 동안, 이 도구는 20세기 중반의 지역 연구와 최신 비판적 안보 학술 연구를 잇는 맥락을 찾아내는 데 도움을 주었습니다. 수동 검색을 통해서도 결국 찾아냈겠지만, 며칠간의 브라우징 시간이 더 필요했을 것입니다. 대신 저는 그 시간을 무작정 찾는 데 쓰는 대신 깊이 있게 읽는 데 사용했습니다.
이것이 바로 교육 분야의 AI 논쟁에서 간과되는 실질적인 세부 사항입니다. 대부분의 학생에게 문제는 글쓰기 속도가 아니라, 발견의 속도입니다. 500편의 논문 중 어떤 5편을 집중적으로 읽어야 할지 아는 것이 승패의 절반을 결정합니다. 이 도구가 선별 작업을 처리해주므로, 여러분은 사고에만 집중할 수 있습니다.
노이즈 줄이기
거짓 정보가 항상 극적인 것은 아닙니다. 때로는 미묘하게 틀린 날짜일 수도 있고, 때로는 원문을 확인하는 사람이 아무도 없어 잘못 해석된 이론적 틀이 그대로 전달되기도 합니다. 이 도구는 JSTOR의 색인된 코퍼스(corpus)를 기반으로 하여 거짓 정보의 위험을 줄여주기 때문에, 노이즈 수준이 현저히 낮아집니다. 여전히 비판적으로 읽어야 합니다. 그 어떤 도구도 비판적 읽기를 대체할 수는 없습니다. 하지만 출처가 실제로 존재하는지 확인하는 데 드는 시간은 줄어듭니다.
저는 복잡한 방법론 논문들을 검토할 때 이 점을 가장 크게 느꼈습니다. IR 연구는 종종 정량적 분석과 역사적 사례 연구를 결합하며, 기술적인...