AICE Pro 시험 10분 만에 포기하고 AI slop 만든 청년

어제 AICE Pro 시험을 봤다. 그리고 10분 만에 포기했다.

준비 없이 들어가도 어떻게든 되겠지 싶었는데, 막상 시험 화면을 마주하니 전혀 아니었다. 문제를 읽고 데이터를 열어봐도 어디서부터 손을 대야 할지 감이 안 왔다. 이건 준비 없이 볼 수 있는 시험이 아니었다.

제대로 준비해보려고 찾아보니까 자료도 없고 그렇다고 ML환경 구축하고 캐글데이터 받아서 하려니까 귀찮았다. 

AI가 이렇게 발전한 시대에.. 대학원 다닐때나 했지 이제 손으로 코드를 치는게 어색할 정도인데.. 

그래서 구글 Argon 나온거 테스트 해볼겸. Antigravity 로 연습하는 사이트를 만들기로 했다. 어제 시험 망치고부터 시작해서 오늘 GitHub에 올렸으니 하루 정도걸렸다. (클로드나 지피티였으면 폰으로 원격 개발이 가능했겠지만 안티그래비티는 그런게 없다. 할로윈 파티를 가야해서 5시까지 끄적였다. 10분만에 나오지 않았으면 5시까지 볼 수 있는 시험이니까 시험본 셈 치자)

AI 시험 망하고 AI로 다음 시험 준비하는 사이트를 만든게 웃기다.

사실 이 글도 Aside로 돌리고 너무 AI 냄새나서 human slop으로 다시 썼다. 

• GitHub: https://github.com/MJ-best/aice-pro
• 웹에서 바로 보기: https://mj-best.github.io/aice-pro/

---

1. 무엇을 만들었나

이름은 AICE Pro 실전연습 스튜디오. 한 화면에서 문제 지문을 읽고, 공식 문서를 찾아보고, 노트북 셀에 코드를 써서 실행하고, 버튼 하나로 채점까지 받는 로컬 연습 환경이다.

주소는 로컬서버 사설IP라서 의미없다. 깃허브에 들어가셔야 함

• 3가지 유형, 6개 문제: Tabular(분류/회귀), 자연어 분류, 이미지 분류
• 학습 모드 / 시험 모드: 학습 모드는 단계별 체크리스트와 힌트를 보여주고, 시험 모드는 40분 타이머를 켜고 힌트를 숨긴다
• 원클릭 채점 + 실수 진단: 점수뿐 아니라 데이터 누수 같은 흔한 실수를 코드에서 찾아서 알려준다
• 공식 문서 검색기: sklearn, pandas, PIL 함수의 시그니처와 예제를 바로 찾아볼 수 있다
• 100% 오프라인 + GPU 자동 감지: 코드는 내 PC에서 돌고, CUDA / Apple Silicon GPU를 알아서 잡는다

2. 문제 설계: 3가지 유형, 6개 문제

유형	문제	연습 포인트	평가 지표
Tabular	TAB-01 대리점 신뢰도 분류	결측치·중복 처리, 범주형 인코딩, 불균형 이진 분류	Macro F1
Tabular	TAB-02 매장 월간 매출 예측	이상치·결측치 처리, 스케일링, 회귀	RMSE, R²
자연어	NLP-01 작성자 나이대 분류	결측 텍스트 처리, TF-IDF, 라벨 역변환	Macro F1
자연어	NLP-02 기술지원 문의 유형 분류	텍스트 컬럼 결합, HTML 노이즈 제거, 다중 분류	Macro F1
이미지	IMG-01 멀티탭 ON/OFF 판별	손상 파일 예외 처리, RGB/크기 통일	Macro F1
이미지	IMG-02 부품 표면 불량 3-클래스 분류	다중 해상도 리사이즈, 픽셀 정규화	Macro F1

 

데이터는 그냥 생성한 합성 데이터다. 실제 기출 문제가 아니라, 시험에서 요구할 법한 "지저분한 데이터 다루기"를 연습하는 게 목적이다. 그래서 일부러 함정을 심어뒀다. 결측치, 중복 행, 클래스 불균형(TAB-01은 부실 클래스가 약 25%), 손상된 이미지 파일, HTML 태그가 섞인 텍스트 같은 것들이다.

데이터는 시드 기반으로 만들어져서 새 데이터로 재도전을 누르면 다른 시드의 데이터로 같은 문제를 다시 풀 수 있다.

목적은 AI로 인해 잃어버린 코드 치는 방법을 손에 익히는 재활운동이다. 6개 정도 손에 익으면 캐글 데이터 연결해서 가져오도록 할 생각이다. 

3. 제작 과정

Day 1 시험 조지고 나옴

시험 조지고 어떤 문제였는지 기억을 더듬었다. 시험장에서 한게 그냥 pwd, ls, cd, pd.read_csv 밖에 없기 때문에 어떤 문제였는지는 기억이 났다. 

Day 2 풀어보고 배포

어차피 실제 시험환경도 jupyter notebook이고 라이브러리는 확인할 수 있으니까 시험 환경을 좀더 쓰기 편하게 구성했다.

빅데이터 분석기사 실기 시험 환경이랑 비슷하게 구성하고 Github Page로 배포했다. 

마치며

AICE PRO가 사외에도 자료가 없지만. 사실 사내에서도 자료가 별로 없다.

그냥 혼자 시험 합격할 때까지 쓰고 비법소스처럼 공개하려고 했는데.. 시험 합격하고 인증글 올릴 수 있으면 좋겠다.

https://github.com/MJ-best/aice-pro