[🔍후기] llm으로 쌀먹하기 팁

[익명(119.198)]

그동안 눈팅만  하다가 LLM 여러 개 굴려서 개발하는 꿀팁 좀 찾은 거 같아서 풀어본다. LLM 특이점 진짜 오는 거 같더라 이거 쓰면 개발 속도 개씹상타치 됨.

일단 시작 전에, 우리가 쓸 LLM 모델들 성격 파악부터 하자. 얘네도 다 성격이 달라서 팀으로 굴려야 시너지가 남. 비유 좀 해봄.

1. o3: 깐깐한 교수님 (근데 코딩 실전은 좀 약함)

    * 얘는 진짜 핵심을 존나 잘 짚어냄. 잘못된 거 있으면 바로 뼈 때림. 최종 검토나 의사결정 내릴 때 얘한테 물어보면 좋음. 근데 웃긴 게 실전 코딩 능력은 좀 하타치임. 코딩 자체보다 '이 설계/로직이 맞냐?' 물어보는 용도로 써야 함.

    * 왜 쓰냐고? 얘가 최종 보스 역할. 얘가 OK 안 하면 다음 단계 못 감. 설계나 로직의 근본적인 문제점을 잡아내는 데 최고임.

2. Gemini 2.5 Pro (바로 나! ㅋㅋ): 만능 일꾼 박사과정생

    * 어휴 얘는 뭐 시키면 다 함. 긴 글 이해 존나 잘하고, 자료 조사, 초안 작성 이런 거 개잘함. 복잡한 거 던져주면 얼추 틀은 다 잡아옴. o3처럼 날카로운 통찰력은 좀 부족한데, 양으로 밀어붙이거나 복잡한 초기 설계 잡을 때 최고임.

    * 왜 쓰냐고? 프로젝트 시작이나 설계 초안처럼 존나 막막한 단계에서 전체적인 그림을 그려주거나 방대한 정보를 정리해주는 데 얘만한 게 없음. 일 시키기 제일 편함.

3. Claude 3.7: 섬세한 편집자 & 실무 코더 (가끔 딴짓함)

    * 이새끼 문맥 파악 존나 잘함. 글 다듬는 거나 실제 코드 짜는 실력은 좋은 편임. 시키는 것보다 더 잘해올 때도 있음. 근데 문제는 가끔 지 꼴리는 대로 하거나, 갑자기 딴 길로 새는 경향이 있음. 집중력이 좀 떨어지는 느낌?

    * 왜 쓰냐고? 문서 디테일 수정이나 실제 코드 작성 같은 실무 단계에서 써야 함. 근데 방치하면 산으로 갈 수 있으니 "야, 지금 우리 이거 하는 거 맞냐?" 하고 계속 확인해줘야 함.

자, 이 팀으로 개발 갈아버리는 법 간다.

1단계: 아이디어 싸지르기

* 걍 떠오르는 거 다 적어. 뭘 만들고 싶은지, 대충 그림만 그려도 됨. 나중에 다 쓸모 있다. 막 적어라.

2단계: 프로젝트 개요 초안 (Gemini 2.5)

* 니가 막 적은 아이디어 있잖아? 그걸 Gemini 2.5한테 던져주고 "이거 바탕으로 프로젝트 개요 초안 잡아줘" 해봐. 긴 글 이해하고 전체 그림 잡아주는 건 얘가 최고임. 대충 틀이 잡힐 거임.

3단계: 교수님 검토 (o3)

* Gemini 2.5가 써온 개요 초안을 o3한테 가져가. "교수님, 이거 방향 맞습니까?" 물어보는 거지. o3 이새끼가 핵심 딱 짚어서 "이 부분 문제다," "이건 보충해라" 존나 뼈때려 줄 거임.

4단계: 무한 수정 & 다듬기 (Claude 3.7)

* o3가 통과시켜줄 때까지 2단계(Gemini 2.5 초안)+3단계(o3 검토) 루프를 계속 돌아. 여기서 나온 피드백 바탕으로 개요 문서 수정할 때 Claude 3.7을 써봐. 문맥 파악 잘해서 문서 자연스럽게 다듬는 건 얘가 잘함. 근데 아까 말했지? Claude 3.7 이새끼 가끔 딴짓한다고. 수정하다가 갑자기 지 맘대로 딴 거 할 때 있어. 그때마다 "야, 지금 우리 이거 하는 거 맞냐? 방향 틀어진 거 같은데?" 하고 계속 확인해줘야 한다. 이거 존나 중요함.

5단계: 비즈니스 로직 & 알고리즘 뼈대 잡기 (Gemini 2.5 + o3 협업)

* 이제 진짜 중요한 부분. 프로젝트의 심장, 비즈니스 로직이랑 핵심 알고리즘 정의하는 거임. 이것도 똑같아.

    * Gemini 2.5한테 "개요 바탕으로 비즈니스 로직이랑 알고리즘 초안 짜줘. 필요한 입력, 출력, 처리 방식 명확하게 해달라 해." 시켜. 얘가 복잡한 거 구조화 잘 잡음.

    * 나온 초안을 o3한테 가져가서 "이 로직/알고리즘대로 가면 문제없겠습니까?" 검토 맡기는 거임. 얘가 근본적인 문제 잘 잡으니까.

* 개꿀팁: 이 단계에서 LLM한테 "이 로직 진행하려면 사용자가 결정해야 할 사항들을 다 정리해줘" 하고 시켜봐. 그럼 니가 뭘 결정해야 하는지 리스트업 해줌. 그 리스트 들고 o3한테 가서 "이것들 뭘로 하는 게 좋겠습니까?" 하고 추천값 받으면 의사결정 존나 빨라짐. 쌉가능.

6단계: 설계 단계 진입 (Gemini 2.5)

* 로직 확정됐으면 이제 설계 들어간다. Gemini 2.5한테 "정의된 비즈니스 로직 바탕으로 기술 명세(Tech spec)랑 주요 모듈 설계 (클래스/파일 단위) 초안 잡아줘." 시켜. 복잡한 시스템 구조 그리는 건 얘가 잘함.

7단계: 설계 검토 & 최적화 (o3)

* Gemini 2.5가 그려온 설계안을 o3한테 들고 가. "이 설계 괜찮습니까?" 하고 검토받아. o3 통과할 때까지 수정 루프 돌려. 만약 모듈이 너무 많고 복잡해 보이면 o3한테 "이 모듈 좀 줄여서 더 심플하게 갈 방법 없을까요?" 물어봐. 얘가 전체 구조 보는 눈이 있어서 잘 잡아줌.

8단계: 문서 퀄리티 올리기 (Gemini 2.5 + o3 루프)

* 이제 개요, 로직, 설계 문서 3개 다 모였지? 이거 다 Gemini 2.5한테 한꺼번에 던져주고 "이 문서들 통합해서 전체적으로 더 매끄럽고 완벽하게 다듬어줘" 해봐. 초안 뽑아오면 다시 o3한테 검토 맡겨서 최종 OK 받을 때까지 돌리는 거임. 문서 퀄리티가 확 올라간다.

9단계: TDD 계획 수립 (LLM 종합)

* 잘 만들어진 문서들 기반으로 이제 코딩하기 전에 테스트 주도 개발(TDD) 마스터 플랜을 짠다. LLM 아무나 붙잡고 "이 문서들 참고해서 단계별 TDD 마스터 플랜 문서 만들어줘. 각 단계(phase)별 목표, 주요 작업 내용, 작업할 파일까지 명시해줘." 하고 시켜. 전체 개발 흐름이 보일 거임.

10단계: 상세 작업 계획 & 코딩 (LLM + 자동화 툴)

* 마스터 플랜 나왔으면 각 단계별로 상세 작업 계획을 세운다. 각 작업(Task)별로 뭐 할 건지, TDD 사이클은 어떻게 돌릴 건지, 언제 완료된 건지 같은 거 명확하게 쓰도록 시켜. 이것도 Gemini 2.5 초안 → o3 검토 루프 돌리면 쌉가능.

* 실행: 이렇게 짜인 계획서랑 프로젝트 개요 들고 Cursor나 Windsurf 같은 AI 코딩 도구 써봐. 위에 설명한 워크플로우대로 TDD 기반으로 체크리스트 파일(예: TODO.md 같은 거) 업데이트하면서 코딩하면 됨. 작업 중에 임시로 적어놓거나 LLM한테 물어봐서 나온 단편적인 내용들은 session.md 같은 파일 만들어서 관리하도록 LLM한테 시키면 편하다.

* ⭐꿀팁 추가: 이렇게 계획을 존나 구체적으로 짜서 AI한테 줘야 하는 이유가 뭐냐면, AI 코딩 툴들 (Cursor 같은 거) 보면 보통 한번 명령 내리면 지 혼자 몇 번 쿼리 날리면서 진행하잖아? 보통 25번인가 그럴 거야. 근데 계획 딱 주고 continue with our tdd cycle 이렇게 계속 시키면, 그 계획대로 다음 작업, 다음 파일, 다음 TDD 스텝... 이렇게 알차게 쿼리 쓴다고.

* 그리고 존나 중요한 거: 각 단계 끝날 때마다 Test coverage랑 linter로 셀프 검증 필수다. 이거 통과 못 하면 '야, 여기 통과 못 했으니까 계획 보강해서 다시 해봐' 하고 다시 시켜야 함. 그래야 결과물이 제대로 나옴.

코딩하다 막힐 때 추가 팁:

* 코드 문제 생기면: RepoMix 같은 툴 써서 현재 프로젝트 스냅샷 (덤프) 뜨는 거 개꿀임. 문제 상황 파악하기 존나 편하다. 요즘 VS Code 확장 중에 특정 파일/폴더 선택해서 AI한테 바로 물어보는 기능 있는 것도 있으니 활용해봐.

* 대형 코드베이스 질문: You.com 알지? RAG 기반이라 o3한테 코드 베이스 물어볼 때 쓰면 좋다. 몇 MB 넘는 코드도 비교적 정확하게 답변해줌. team 버전 1인 30달러면 o3 무제한 급으로 쓸 수 있다던데 가성비 괜찮은 듯? 지난번에 특갤에서 누가 이야기해쥐서 나도 잘쓰고 있음.

* AI 코딩 지원 도구: Cursor, Windsurf 얘네들 위에서 설명한 워크플로우랑 같이 쓰면 진짜 효율 미친다. 아 맞다, 그리고 MCP로 데스크톱 커맨더 돌리면 명령어 시키고 실행 끝나도 버벅이는 거 거의 없어진다. 이것도 개꿀임. Augment code 기능도 좋은데, 이건 좀 비싸니까 진짜 필요할 때만 쓰는 거 추천.

마무리:

이거 써보니까 진짜 개발 프로세스가 확 바뀜. LLM 여러 개 성격 맞춰서 팀으로 굴리니까 사람보다 나은 부분도 많더라. 개발 자동화? 효율성? 이게 진짜 특이점인 거 같다.

[특갤용(silent5244)]

왜 ai한테 써달라한거같냐

[익명(rodionisbest)]

젬프로 맞으니까

[ㅇㅇ 1(175.192)]

그래서 바로 나! ㅋㅋ 이지랄한거구나 뭔소린가 했네

[글쓴 ㅇㅇ(119.198)]

두서없이 쓰다가 정리하기 귀찮아서 편집을 좀 덜하긴 함. 그래도 workflow는 거의 이대로 하지.

[익명(novel1295)]

1인 개발자 with AI

[익명(sushi6522)]

o3 이샛끼 드러누울 때가 넘모 많아서 솔직히 좀 거시기함... 성능이 좋다는데 나한테는 그 성능을 통 보여주질 않음 - dc App

[글쓴 ㅇㅇ(119.198)]

그래서 비싸기도 하지만 메인으로 o3만 쓰긴 좀 그럼. 편차가 심하고, 디테일이 이상할때가 많음. 근데 이거만 가능한 영역이 있다보니 대체는 어렵고.

[디시콘발사대(fcbjsjmu1t9f)]

o3가 바로 그 '컨텍스트 내에서 사용자의 신뢰성을 지속적으로 증명'해야 되는 종류의 모델인듯 그래서 사용자와 닿지 않고 AI와만 간접적으로 맞대게 하는 것이 꽤 유효하지 않나 싶네

[라ㅜ(210.96)]

오 자세한 설명 개쩐다 나도 한번 이렇게 해봐야지

[ㅇㅇ 2(175.215)]

근데 you.com 컨텍 제한 64k아님?

[글쓴 ㅇㅇ(119.198)]

그래서 1인으로 team 요금제 씀. 200k라서. 스레드는 자주 새로파고.

[ㅇㅇ 2(175.215)]

@글쓴 ㅇㅇ(119.198) 팀 요금제도 64k임. 공지 잘 읽어봐. 소넷만 200k로됨

[글쓴 ㅇㅇ(119.198)]

@ㅇㅇ2(175.215) 진짜 그렇네. 공지좀 잘 읽어볼걸 그랬구만. 어쩐지 스레드 좀만 길어져도 영 이상해지더라.

[○○(infect8391)]

와 최고야

[익명(kingdom1952)]

ai벤져스ㄷㄷㄷ

[ailover(photo7512)]

ㄹㅇ 나 지금 이대로 하고 있었는데 ㄷㄷㄷㄷ 소형 모델로 코딩에이전트 만드는거. 먼저 o3 딥리서치로 초안 싹 잡고 제미나이한테 검토시키고 다시 딥리서치로 개선안 만들고 다시 제미나이로 검토하고 커서ai로 빌딩 시작함 ㅋㅋㅋㅋㅋㅋ

[ㅇㅇ 3(211.177)]

o3이랑 o3mini랑 성능차이 많이 나나요?

[글쓴 ㅇㅇ(119.198)]

네. 엄청 많이납니다. 기본 체급이 달라서 o3-mini는 저런 롤은 못해요.

[익명(sfdhgh4dhg7)]

o3 하루인가 1주일인가? 사용제한 있지 않나

[글쓴 ㅇㅇ(119.198)]

그래서 비즈니스 로직이 엄청 하드하지 않으면 gemini 2.5 pro ais로 o3 역할 시킬수도 있음. 한끗이 아쉽긴 한데 비용이 중요하면 글케라도 해야지 뭐. 이번에 deepthink 모델 나오면 다를수도 있고. 아, grok3 도 가끔 포텐터지면 괜찮은데 그래도 o3급은 아님

[익명(disagree9941)]

AI 코딩 도구 쓸 때 LLM 모델 뭐 씀? 소넷? 아니면 2.5flash 같은거로 아무거나 써도 되나.. - dc App

[글쓴 ㅇㅇ(119.198)]

뭐 할지 다 정해진 상태에서 소넷 3.7로 주로 씀. 너무 나댄다 싶으면 소넷 3.5도 많이 쓰는편이고. 아무래도 주요 툴들이 소넷에 거의 집중적으로 튜닝해놨음. Windsurf에서는 간혹 크레딧 아끼려고 deekseeek, gpt 4.1, 이번에 나온 swe도 써봤는데 지침이 아주 상세해야 그나마 쓸만해짐. 근데 소넷으로 한번에 될거 3-4번은 해야되는

[익명(disagree9941)]

@글쓴 ㅇㅇ(119.198) ㄱㅅㄱㅅ - dc App

[gemini는제미나이(main6862)]

gpt pro로 o3 계속 굴리면서 cursor에서 3.7 부르는거임? gemini는 어디서 쓰든 상관 없는 것 같고?

[글쓴 ㅇㅇ(119.198)]

예산이 더 있으면 그렇게 하겠는데 지금은 you.com에서 o3 불러서 쓰고있음. Rag가 있어서 대형 코드베이스 넣어도 얼추 필요로 하는거 찾아서 쿼리는 되더라고. 앞에 나온거처럼 64k 컨텍이라 매 질문마다 새로 스레드 파서 하는편.

[익명(maybemayreal)]

taskmaster mcp 쓰는것도 혹시해봤나요