Claude로 사진 분석하는 법 — 영수증·스크린샷·차트 5가지 활용 1.5개월 후기

Claude 이미지 분석. “AI가 사진을 진짜 보고 답하나?” 가장 신기해하는 영역, 본인이 1.5개월 풀가동하면서 영수증·스크린샷·음식 사진·차트·메뉴판 등 5가지로 활용한 솔직 후기.

본인은 사진을 자주 다룬다. 여행 사진 5,907장·영수증 수십 장·스크린샷·차트·메뉴판 등 매주 10~20장씩 Claude에게 보여주며 작업 중. “진짜 보고 답한다” 가 본인 1.5개월 결론. 다만 “한계 영역” 도 명확. 이번 글은 그 솔직 정리.

⚠️ 이 글은 “본인 1.5개월 이미지 분석 작업 경험” 기준. 의료·법률·전문 영역 사진은 별도 검수 권장.


1. Claude 이미지 분석 — 무엇이 가능한가?

핵심 기능 5가지

본인 1.5개월간 풀가동한 5가지:

  1. 사진 설명·캡션 자동 생성
  2. 영수증 → 금액·날짜·항목 자동 추출
  3. 스크린샷 → 본문 내용 자동 요약
  4. 음식 사진 → 메뉴·재료·가격대 추정
  5. 차트·그래프 → 데이터 자동 추출

무엇이 불가능한가?

  • 사람 얼굴 식별 (정책상 X)
  • 의료 진단 (CT·MRI 등 별도 검수 필수)
  • 법률 문서 사진 (텍스트 추출만 가능, 해석 별도)
  • 저작권 보호 자료 (생성·복제 X)

일반 사진·문서·차트는 본인 케이스 정확도 매우 높음.

2. 본인 사용 사례 5가지

① 사진 캡션 자동 생성 — 블로그 작업

  • 본인 여행 사진 → “이 사진 보고 캡션 5개 만들어줘”
  • Claude 응답: 장소·시간·분위기·인물 자동 인식
  • 사용 빈도: 매 블로그 발행 (월 12편+)
  • 시간 절약: 약 30분/편

본인 케이스 시즈오카 미호노마츠바라 사진 → “이 사진은 일본 시즈오카 미호노마츠바라의 검은 모래 해변…” 같은 캡션 자동.

② 영수증 → 금액·날짜·항목 자동 추출

  • 본인 분석집 정산·결제 영수증 처리
  • “이 영수증에서 금액·날짜·항목 추출해줘” 한 줄
  • Claude 자동 추출 + 마크다운 표로 정리
  • 사용 빈도: 매주 1~2회
  • 정확도: 약 95% (한국 영수증 기준)

③ 스크린샷 → 본문 자동 요약

  • 카페24 호스팅 약관·결제 약관 스크린샷
  • “이 스크린샷에서 핵심 5가지 추출” 한 줄
  • 긴 약관 → 5줄 요약 자동
  • 사용 빈도: 주 2~3회
  • 시간 절약: 약 1시간/주

④ 음식 사진 → 메뉴·재료·가격대 추정

  • 여행 가서 “이 음식 뭐야?” 사진 → Claude 자동 식별
  • 본인 케이스 일본 음식 1~2번 못 본 음식 → 즉시 답
  • 사용 빈도: 여행 시 주 5~10회
  • 여행 가이드 도구로 활용

⑤ 차트·그래프 → 데이터 자동 추출

  • ROI 트래커 차트·주식 차트·여행 통계 차트
  • “이 차트에서 데이터 추출해서 마크다운 표로” 한 줄
  • Claude 자동 추출 + 검증 필요 (정확도 80%)
  • 사용 빈도: 월 5~10회

5가지 영역 본인 매주 풀가동 중.

3. 본인 정확도 체감 — 5가지 영역별

정확도 표

영역 본인 체감 정확도 검수 필요도
사진 캡션·설명 95%+ 낮음
영수증 추출 95% 중간 (한국 영수증 기준)
스크린샷 요약 90%+ 낮음
음식 사진 식별 85% 중간 (지역 음식 변동)
차트 데이터 추출 80% 높음 (수치 정확도 검수)

사진 캡션·요약은 거의 완벽, 데이터 추출은 검수 필수.

정확도 낮은 케이스

  • 흐릿한 사진: 정확도 ↓
  • 여러 객체 복잡한 사진: 일부 누락
  • 외국어 텍스트 (한국 카메라 외 OCR): 일부 오인식
  • 차트 색상 구분 어려운 경우: 데이터 추출 부정확

본인 검수가 항상 필요 — 무조건 신뢰 X.

4. 본인 블로그 작업에 활용한 흐름

여행 사진 → 블로그 글 자동화

본인 시즈오카 여행 사진 5,907장 → 블로그 글 10편+ 작업 흐름:

  1. 사진 자동 분류 (EXIF GPS·31편 참조)
  2. 각 폴더 사진 캡션 자동 생성 (Claude 이미지 분석)
  3. 블로그 글 초안 자동 작성 (캡션 + 본인 메모 조합)
  4. 본인 직접 다듬기 + 발행

사진 분류 + 캡션 자동 = 블로그 1편 시간 절약 약 1시간.

영수증 → 정산·세무 자동화

본인 한국사 분석집 구매자 정산 흐름:

  1. 결제 영수증 사진 첨부 (이메일·SMS 캡처)
  2. Claude 자동 추출 (금액·날짜·구매자)
  3. 엑셀 자동 입력 (28편 참조)
  4. 본인 검수 + 정산 처리

정산 자동화 시간 절약 약 2시간/월.

5. 함정 5가지 — 본인 검수 시 발견

① 무조건 신뢰

  • “Claude가 답했으니 OK” → 검수 안 함
  • 해결: 처음 1~2개월은 매 결과 검수 (수치·항목 확인)

② 흐릿한 사진 첨부

  • 흐릿한 사진 → Claude 정확도 급락
  • 해결: 선명한 사진만 첨부 + 필요 시 보정 후 첨부

③ 너무 많은 정보 한 번에 요청

  • “이 사진에서 모든 텍스트·금액·날짜·인물 정보 추출” → 일부 누락
  • 해결: 영역별 분리 요청 (텍스트만 → 다음 금액만)

④ 외국어 텍스트 무조건 신뢰

  • 일본어·중국어 등 외국어 OCR 정확도 다양
  • 해결: 본인 직접 해독 가능한 외국어만 활용 + 다른 도구 보조

⑤ 차트 수치 검수 안 함

  • 차트 데이터 추출 정확도 80% → 수치 그대로 사용 시 오류
  • 해결: 본인 직접 차트 보면서 수치 1~2개 검증

위 5가지 피하면 이미지 분석 풀가동.

6. 비개발자가 시작하는 1주일 흐름

Day 1~2 — 짧은 사진부터 시도

  • 본인 사진 1~2장 첨부
  • “이 사진 보고 답해줘” 단순 요청
  • Claude 응답 정확도 체감

Day 3~4 — 영수증·문서 추출 시도

  • 본인 영수증·약관 스크린샷 1~2장
  • “이 사진에서 금액·날짜 추출해줘” 요청
  • 결과물 검수

Day 5~6 — 본인 운영 작업과 연결

  • 본인 블로그·정산·운영 영역에 활용 시도
  • 시간 절약·정확도 체감

Day 7 — CLAUDE.md에 트리거 박기

  • “영수증 첨부 시 자동 추출” 같은 트리거 등록
  • 매번 지시 안 박아도 자동 적용

1주일이면 풀가동 영역.

7. 비개발자가 가장 빨리 가치 체감하는 3가지 영역

① 여행 블로그 운영자

  • 사진 + 캡션 자동 → 블로그 글 시간 단축
  • 본인 케이스 가장 큰 가치 체감 영역

② 1인 사업·정산 작업

  • 영수증·계산서 자동 추출 → 엑셀 자동 입력
  • 본인 한국사 분석집 정산 영역

③ 학습·연구·자료 정리

  • 강의 슬라이드 스크린샷 → 핵심 요약
  • 논문·자료 사진 → 요약·번역

위 3가지 영역 중 1개 해당 → 즉시 Claude 이미지 분석 도입 합리.

8. 한 줄 요약

Claude 이미지 분석 = “사진 1장 → 캡션·요약·추출 5가지” 풀가동 영역. 본인 1.5개월 5가지 매주 활용 검증.
정확도 80~95% 영역 (영역별 차이) + 본인 검수 필수. 여행 블로그·1인 사업·학습 3영역에 가장 빠른 가치.


자주 묻는 질문

Q1. Claude가 진짜 사진을 “보는” 게 맞나? 텍스트만 보는 거 아닌가?
A. 진짜 본다. Claude는 멀티모달 (텍스트 + 이미지 + 음성) 모델. 본인 케이스 “사진 속 색상·구도·인물 표정” 까지 답함. 텍스트 없는 순수 이미지도 분석 가능.

Q2. 정확도가 5가지 영역마다 다른 이유는?
A. 사진 복잡도·외국어·수치 정밀도 차이. 단순 사진 캡션 95%+, 영수증 텍스트 추출 95%, 차트 데이터 80% — 사진 안의 “정확히 인식해야 할 정보 종류” 가 다름. 본인 1.5개월 체감 기준.

Q3. 토큰은 얼마나 쓰나? 사진 1장당?
A. 약 1,000~3,000 토큰/장 (사진 크기·해상도에 따라). Pro로도 작업 가능. 매일 사진 10장+ 처리하면 Max $100 권장. 22편(토큰 한도) 참조.

Q4. 사진 속 개인정보·민감 정보 안전한가?
A. 본인 판단. Anthropic은 첨부 데이터 학습 X (정책상). 다만 본인 케이스 “공개 가능한 사진만 첨부” 원칙. 신분증·계좌·민감 영수증은 별도 도구 권장.

Q5. Claude 이미지 분석 vs ChatGPT 이미지 분석 어느 게 강한가?
A. 거의 동률. 본인 체감 기준 Claude가 “긴 글·논리 영역” 약간 우위, ChatGPT가 “이미지 생성·DALL-E 통합” 우위. 19편(Claude vs ChatGPT)에서 자세히 다룸.


💡 Claude 활용 가이드 시리즈 18편 (2파 10편). 다음 글: Claude vs ChatGPT vs Gemini — 3파전 종합 비교 (예정).

댓글 달기

이메일 주소는 공개되지 않습니다. 필수 필드는 *로 표시됩니다

위로 스크롤