CiteTrue와 Google Gemini 비교
Google Gemini is where a lot of citation problems begin, and also where many people try to fix them. Asking it "is this reference real?" sometimes works — especially with web search turned on. The trouble is that you cannot tell the difference between a checked answer and a confident guess, because both come back in the same tone.
우리 판정이 버티는 이유
대부분의 인용 검증 도구는 판단 전체를 언어 모델에 맡기고 모델이 한 말을 그대로 보여 줍니다. 하지만 모델은 환각을 일으킵니다 — 이 분야가 존재하는 이유가 바로 그것입니다. 그래서 우리는 모델을 맨 앞이 아니라 맨 뒤에 둡니다.
- 01
1. 추측하지 않고 구문 분석한다
모든 참고문헌은 저자, 제목, 연도, 학술지, DOI 같은 요소로 분해됩니다. 분해하는 것은 인용 형식을 위해 만들어진 파서이지, 제목이 무엇 같으냐고 모델에게 묻는 방식이 아닙니다.
- 02
2. 권위 있는 데이터베이스에서 대조한다
분해된 참고문헌을 Crossref와 OpenAlex에 조회하고, DOI가 없으면 공개 웹에서도 찾습니다. 돌아오는 것은 실제 식별자를 가진 실제 레코드입니다.
- 03
3. 일치도를 결정론적으로 점수화한다
후보 레코드는 제목 토큰에 대한 Sørensen-Dice 유사도로 점수를 매깁니다. 제목 점수가 0.7을 넘고 저자 목록이 일치할 때만 일치로 인정합니다. 연도가 어긋나면 안내로 표시할 뿐, 조용히 넘어가지 않습니다. 같은 참고문헌은 언제나 같은 점수를 냅니다.
- 04
4. 그다음에야 모델에게 묻는다
언어 모델은 결정론적 단계에서 진짜 일치를 찾지 못했을 때만 호출합니다. 후보와 원문을 읽고 맞는 것이 있는지 판단하게 하는 것이죠. 모델은 최후의 수단이지 심판이 아닙니다. 바로 이 순서 때문에 환각이 끼어들 자리가 없습니다. 모델이 등장하는 시점에는 이미 근거가 다 나와 있으니까요.
실질적인 의미는 이렇습니다. 여기서 진짜라고 표시된 참고문헌은 제목과 저자 모두에서 실제 레코드와 일치했고, 그 레코드를 직접 열어 볼 수 있습니다. 인용이 그럴듯해 보인다는 모델의 인상이 아닙니다.
참고문헌 목록을 처리하는 속도
한 건을 확인하는 데도 여러 출처에 여러 번 조회가 들어갑니다. 그것을 한 건씩 순서대로 처리하는 것이 긴 목록에서 느리게 느껴지는 이유입니다. 우리는 병렬로 돌리고 끝나는 대로 결과를 내보냅니다.
- 병렬로 처리하는 참고문헌 수
- 앱에서는 한 번에 20건, API로는 100건
- 참고문헌 50건짜리 목록
- 50건을 줄 세우는 대신, 세 차례의 병렬 조회로 내보냅니다
- 도착하는 대로 결과 표시
- 참고문헌 단위로 스트리밍 — 나머지가 도는 동안 먼저 끝난 판정부터 읽습니다
- 대량 작업
- 지도교수 앞에 쌓인 논문 더미는 앱의 5배 동시성으로 API를 통과합니다
서로 다른 역할을 비교하면
| 비교 항목 | CiteTrue | Google Gemini |
|---|---|---|
| 무엇을 위해 만들어졌나 | 참고문헌이 실재하고 인용된 주장을 뒷받침하는지 확인하는 일 | 질문에 답하고 글을 쓰는 일 |
| 참고문헌을 지어낼 수 있나 | 아니요 — 모든 결과가 열어 볼 수 있는 데이터베이스 레코드를 가리킵니다 | 예. 이 분야가 존재하는 이유가 바로 그것입니다 |
| 답이 어디에서 오나 | Crossref, OpenAlex, 웹 출처. 참고문헌별로 표시됩니다 | 모델의 출력. 검색 결과가 함께 붙기도 합니다 |
| 참고문헌 50건짜리 목록 | 한 번 붙여넣으면 참고문헌별 판정이 나옵니다 | 나눠서 넣어야 하고, 맥락이 차오를수록 결과가 흔들립니다 |
| 재현성 | 같은 참고문헌이면 같은 판정, 보고서도 저장됩니다 | 두 번 물으면 두 가지 답이 돌아옵니다 |
| 비용 | 하루 30건까지 무료, 1,000건이면 $9.99/월 | 무료 등급 또는 월 $20 정도. 다만 건당 과금은 아닙니다 |
| 편의성 | 브라우저 확장, macOS 앱, API, MCP — AI 작업 흐름 안에서도 씁니다 | 채팅 창에서 복사해 붙여넣기 |
| 알아 둘 점 | — | 뒤에 Google 검색이 있다는 점은 도움이 되지만, 찾아낸 링크가 검증된 참고문헌은 아닙니다. |
그래서 무엇을 써야 하나
Keep using Google Gemini to write and to think. Just do not let it be the last thing that checks your citations — run the bibliography through CiteTrue before you submit, and you will have a per-reference record instead of a reassuring sentence. CiteTrue also runs as an MCP server, so Google Gemini can call it and stop guessing.