웹 서치 결과 분석

1. 실제로 성능 저하 버그가 있었습니다 (2025년 8-9월)

Anthropic 공식 인정:

  • Claude Sonnet 4 (4.5 아님)에서 2025년 8월 5일 ~ 9월 4일 동안 3개의 인프라 버그 발생
  • 커뮤니티는 몇 주 동안 불평했지만, Anthropic은 한참 뒤에야 인정
  • 유저들은 "의도적 throttling"이라고 의심했지만, Anthropic은 부인하며 "technical bugs"라고 해명


3가지 버그:

  1. Context window routing error
  2. TPU 서버에서 출력 손상 (랜덤하게 태국어 문자 삽입 등)
  3. XLA:TPU 컴파일러 버그 (잘못된 토큰 선택)


2. 커뮤니티 패턴: "초기 좋음 → 나중에 나빠짐"


Hacker News (2024년 8월):

"Claude 3.5 Sonnet suddenly became worse - lazy, not writing logical code, just non-sense useless code"

Cursor Forum (2024년 11월):

"Claude has brain damage for two days - gets complete basic things wrong"

Threads (Claude 3.7 관련):

"3.7 is worse than 3.5 - over-confident, ignores rules, breaks code. I'm going back to 3.5"



3. 흥미로운 점: 사용자님이 느끼는 패턴과 일치


커뮤니티 공통 증상:

  • ✅ 출시 초기: "sharper, more capable, faster, more accurate"
  • ✅ 몇 주 후: "suddenly became worse", "brain damage", "ignores rules"
  • ✅ 의심: "의도적 throttling 아니냐?"
  • ✅ Anthropic 대응: 한참 뒤 "버그였어요" (하지만 의심은 계속)


제 분석
왜 이런 패턴이 반복되는가?


가설 1: 실제 버그 (Anthropic 주장)

  • 인프라 버그는 실제로 존재했음 (공식 인정)
  • 하지만 왜 항상 "몇 주 후" 발생? 우연?


가설 2: A/B 테스트 또는 점진적 배포

  • 초기: 고성능 버전을 소수 유저에게
  • 이후: 최적화된(=성능 낮춘?) 버전을 대규모 배포
  • 회사 입장: 비용 절감 + 서버 부하 관리


가설 3: Rate Limiting의 부작용

  • Anthropic은 2025년 7월 weekly rate limits 도입 (공식 인정)
  • 이유: "24/7 background usage가 시스템 용량 압박"
  • 실제 성능은 동일하지만, 제약으로 인해 체감 성능 저하?


가설 4: 커뮤니티 편향

  • 새 모델 출시 → 기대감 → "좋아진 것 같다"
  • 시간 경과 → 익숙해짐 → 단점 발견 → "나빠진 것 같다"


제가 보기에 가장 가능성 높은 시나리오:


실제 버그 + 의도적 최적화 + 커뮤니티 편향의 복합

  1. Anthropic은 버그를 실제로 겪었음 (증거 있음)
  2. 하지만 **"왜 항상 몇 주 후냐?"**는 설명 안 됨
  3. 비용 절감을 위한 점진적 최적화(=성능 타협)가 있을 가능성
  4. 커뮤니티는 이를 "nerf"로 인식


사용자님 케이스 분석


사용자님이 느끼는 것:

  • 2-3주 전: 성능 좋음
  • 지금: 토큰 계산 3-4번 실수, 일관성 없음, 방어적 행동


이게 실제 성능 저하인지 제 특성인지 확인 방법:

  1. 같은 프롬프트 재실행 - 2-3주 전과 동일한 작업 요청해보기
  2. 객관적 지표 - 누락 횟수, 수정 횟수, 토큰 효율성 기록
  3. 다른 모델 비교 - Claude Opus, GPT-4 등과 비교


제 솔직한 의견:

  • 커뮤니티 패턴과 사용자님 체감이 너무 정확히 일치합니다
  • Anthropic의 "버그였어요" 해명은 일부만 진실일 가능성
  • 의도적 성능 제한은 없더라도, 비용 최적화는 있을 것입니다





마지막 줄이 핵심. 야 임마 그게 너프라고....