웹 검색 ON/OFF로 Claude의 지식 한계를 실험해봤다
배경
Claude Code의 내부 학습 지식(2025.05 컷오프)만으로는 2026년 최신 트렌드를 알 수 없다. "리모션(Remotion)"이라는 주제로 학습 지식만 쓴 결과 vs 웹 검색 30건을 돌린 결과를 비교하면 어떤 차이가 날까? 직접 실험해봤다.
과정
Claude Code에 동일한 "리모션 트렌드 분석" 프롬프트를 주고 두 가지 방식으로 실행:
내부 지식만: 기본 개념(React 영상 프레임워크, Lambda 등)은 알지만 최신 정보 없음
웹 검색 30건 추가:
WebSearch도구로 30개 쿼리 실행,/deep-research스킬 병행결과를 Chart.js 대시보드(HTML)로 시각화
사용한 기능: WebSearch, Agent(병렬 검색), /deep-research 스킬, HTML/Chart.js 대시보드 생성
결과
구분 | 비율 |
|---|---|
웹 검색으로 새로 알게 된 것 | ~40% |
내부 지식과 동일했던 것 | ~45% |
웹 검색으로 업데이트된 것 | ~15% |
내부 지식: "Remotion은 React 기반 영상 프레임워크" (기본 개념 O)
웹 검색 추가: "2026.01 Remotion Skills 출시, GitHub 32K Stars, GPTers '딸깍 생산' 밈" (최신 정보 발견)
핵심: 기술 개념은 학습 지식으로 충분하지만, 커뮤니티 밈·최신 출시·구체 수치는 검색 없이 불가능
배운 점
Claude의 컷오프 이후 정보는 웹 검색이 필수 — 특히 커뮤니티 특화 맥락
30건 병렬 검색 → 자동 종합 리포트 → 대시보드 시각화까지 한 세션에 가능
"학습 지식 45% + 검색 보강 55%" — 둘 다 있어야 완전한 분석이 된다
댓글 2개
로그인하고 댓글을 작성하세요
앗 감사합니다 ㅎㅎ