B
AI 과대광고 팩트체커
3.30
파생 체인
단계 1
AI 과대평가 경고 담론 확산
→
단계 2
AI 도입 의사결정 혼란
→
단계 3
AI 솔루션 성능 주장 팩트체크 도구
문제
미국 경제학자의 'AI 과대평가' 경고처럼 AI 솔루션 벤더들의 성능 주장에 대한 불신이 커지고 있다. 중소기업 IT 담당자가 AI 솔루션 도입을 검토할 때, 벤더가 제시하는 '정확도 95%', '비용 80% 절감' 같은 주장을 독립적으로 검증할 수 없어, 과대광고에 속아 연간 1,000-5,000만원의 낭비가 발생한다.
솔루션
(1) AI 벤더의 성능 주장(정확도, 절감률 등)을 입력하면 공개 벤치마크·논문·실사용 리뷰와 자동 대조하여 신뢰도 등급을 산출하고, (2) 해당 분야의 현실적 성능 범위와 도입 기업 후기를 요약 제공하며, (3) 도입 전 자체 검증을 위한 테스트 시나리오 생성기를 제공한다.
NUMR-V Scores
NUMR-V Scoring System
| N Novelty | 1-5 | 시장 내 유사 서비스 부재 정도. 경쟁사 0개 = 5, 10+개 = 1 |
| U Urgency | 1-5 | 사용자가 지금 당장 필요로 하는 긴급성. 트렌드 부합 + 시급성 |
| M Market | 1-5 | 타겟 시장의 크기와 성장 가능성. 프록시 지표 기반 (LLM 추정 X) |
| R Realizability | 1-5 | 1-2인이 실현 가능한 정도. 기술 난이도 + 데이터 확보 용이성 |
| V Validation | 1-5 | 시장 검증 통과 여부. 경쟁사 분석 + 수요 프록시 + 타이밍 |
SaaS N=.15 U=.20 M=.15 R=.30 V=.20
Senior N=.25 U=.25 M=.05 R=.30 V=.15
실현성 (72%)
실현성 분석
| 기술 복잡도 | / 40 | 핵심 기술 스택의 난이도. low=40, medium=24, high=10 |
| 데이터 접근성 | / 25 | 필요 데이터의 확보 용이성. user_generated=25 → proprietary=4 |
| MVP 일정 | / 20 | 최소 기능 제품 구축 소요 기간. 2주=20, 1개월=12, 3개월=8 |
| API 보너스 | / 15 | 공공 API 활용 가능 시 보너스. 매칭 API가 있으면 가산 |
시장 검증 (50/100)
검증 분석
| 경쟁 분석 | / 20 | 경쟁사 검색 결과 기반. 적절한 경쟁 존재 = 시장 검증 |
| 시장 수요 | / 20 | 검색량, 뉴스 언급 등 프록시 지표. 실제 수요의 간접 증거 |
| 타이밍 | / 20 | 현재 트렌드와의 부합도. 규제/기술 변화 시점 적합성 |
| 수익 참조 | / 15 | 유사 비즈니스 모델의 수익 사례. 실제 과금 레퍼런스 존재 여부 |
| 곡괭이 적합 | / 15 | 곡괭이 전략 부합도. 도구/인프라 제공 관점 적합성 |
| 1인 구축 | / 10 | 혼자서 MVP 구축 가능 여부. 외부 의존성 최소화 정도 |
기술 요구사항
백엔드 [medium]
데이터 파이프라인 [medium]
프론트엔드 [low]