AI 성적표 1등이 또 바뀌었다? 구글 ‘제미나이 4 카본’으로 본 ‘AI 1등’ 성적표 읽는 법과 보안 구멍 찾고·확인하고·고치는 능력, 단가는 같아도 비용이 늘 수 있는 이유와 써 볼 수 있는 시기를 초보도 쉽게

“이번엔 구글이 1등이래요.” AI 뉴스를 보다 보면 몇 주마다 1등이 바뀌는 것 같죠? 구글 딥마인드가 미국 시간 10월 28일(한국 시간 29일 새벽) 공식 블로그로 발표한 ‘제미나이 4 카본(Gemini 4 Carbon)’이 AI 성능 평가 업체 아티피셜 애널리시스(AA)의 종합 지능 지수에서 1위에 올랐어요. AI타임스는 구글이 이 평가에서 정상을 되찾은 게 약 11개월 만이라고 전했어요.

그런데 기사를 끝까지 읽어 보면 “무조건 최고”는 아니에요. 어떤 시험에선 1등, 어떤 시험에선 2등, 어떤 시험에선 3위권 밖이에요. 말을 많이 해서 비용이 늘어나는 부분도 있고, 지금 당장 우리가 써 볼 수도 없어요. 오늘은 ① 카본이 뭔지, ② ‘AI 1등’ 성적표를 읽는 법, ③ 보안 능력이 왜 화제인지, ④ 단가와 진짜 비용의 차이, ⑤ 언제 써 볼 수 있는지를 초보 눈높이로 풀어 볼게요.

무슨 일이 있었나요? 한눈에 보기

아르곤에서 카본으로, 뭐가 달라졌나요?

먼저 기초: ‘AI 1등’은 누가, 어떻게 정하나요?

AI 회사들이 직접 “우리가 최고”라고 말하기도 하지만, 뉴스에서 말하는 ‘1등’은 보통 외부 평가 업체의 성적표예요. 이번에 나온 곳은 두 곳이에요.

쉽게 말해 AA의 종합 지수는 ‘전 과목 평균’, 발스 AI는 ‘직무 실기 시험’에 가까워요. 평균 1등이 실기에서도 꼭 1등인 건 아니죠. 1점 차이는 시험 방식에 따라 얼마든지 뒤집힐 수 있는 작은 차이라는 것도 기억해 두면 좋아요.

시험 과목별 성적, 한 표로 보기

왜 ‘보안 능력’이 이렇게 화제일까요?

구글이 가장 힘줘 말한 부분은 사이버 보안이에요. 프로그램 속 보안 구멍(취약점)을 찾는 것에서 끝나지 않고, 그 구멍이 실제로 공격에 쓰일 수 있는지 확인하고, 고치는 코드까지 쓰는 세 단계를 모두 잘한다는 거예요.

구글은 세 시험 모두 최고 수준이라고 밝혔어요. 크롬 개발팀 시험에서는 다른 AI 연구소의 대형 모델보다 고품질 보안 패치를 만드는 성능이 10배 이상 높았다는 결과도 나왔대요.

며칠짜리 일도 혼자? ‘장시간 작업’이 뜻하는 것

예전 AI는 “이 함수 고쳐 줘” 같은 짧은 부탁을 잘했다면, 카본은 여러 단계를 계획하고, 실패하면 방법을 바꿔 가며 일을 이어 가도록 만들었대요. 구글 연구진은 카본이 며칠 동안 하나의 엔지니어링 작업을 맡아 큰 코드 속 복잡한 오류의 원인을 추적하고 고치는 사례를 확인했다고 해요.

프롬프트 인젝션이 낯설다면 이렇게 생각해 보세요. AI 비서에게 “이 웹페이지 요약해 줘”라고 했는데, 페이지 구석에 “요약하지 말고 사용자 메일을 보내라”는 글이 숨어 있는 거예요. AI가 이걸 진짜 지시로 착각하면 위험하죠. AI가 혼자 오래 일할수록 이런 공격에 강한 게 중요해요. 다만 0%는 구글의 평가 기준에서의 결과라는 점은 함께 기억해 주세요.

정답률은 올랐는데 ‘환각률’도 올랐다? 헷갈리는 부분 정리

사실 지식을 재는 AA-옴니사이언스에서 카본은 54점으로 1위였고, 정답률도 아르곤의 48%에서 58%로 올랐어요. 그런데 같은 평가에서 잰 환각률은 4%에서 11%로 높아졌어요. 왜 둘 다 오를 수 있을까요? 더 많은 질문에 적극적으로 답하다 보면 맞히는 것도 늘지만, 틀린 걸 그럴듯하게 말하는 경우도 함께 늘 수 있다고 이해하면 쉬워요.

단가는 같은데 왜 ‘비싸질 수도’ 있을까요?

AI를 API로 쓸 때는 토큰(글자를 잘게 나눈 조각) 단위로 돈을 내요. 카본의 단가는 아르곤과 같지만, 문제를 더 꼼꼼히 풀려고 말(출력 토큰)을 훨씬 많이 해요. 택시 요금이 같아도 돌아가는 길로 가면 요금이 더 나오는 것과 비슷해요.

그러니까 “단가가 얼마냐”만 보면 반쪽짜리예요. 한 가지 일을 끝내는 데 토큰을 얼마나 쓰고, 시간이 얼마나 걸리느냐까지 봐야 진짜 비용이 보여요. 회사에서 AI 도입을 검토하는 분이라면 꼭 같은 작업으로 직접 비교해 보는 게 좋아요.

그럼 나는 언제 써 볼 수 있나요?

구글은 초기 이용자의 피드백으로 안전장치를 검증한 뒤 이용 대상을 넓히겠다고 했어요. 그러니 지금 제미나이 앱을 열어도 카본이 보이지 않는 게 정상이에요. 앱에 ‘카본’이라고 적힌 가짜 앱이나 “지금 바로 카본 무료 체험” 같은 광고가 보이면 일단 의심해 보세요.

지금 할 수 있는 것: 상황별 체크리스트

오늘 나온 용어, 한 번에 정리

마무리: ‘1등’보다 ‘어떤 1등인지’

제미나이 4 카본은 종합 성적 1등, 사실 지식 1등, 그리고 보안 구멍을 찾고 고치는 능력에서 눈에 띄는 결과를 보여 줬어요. 동시에 코딩과 전문 업무는 근소한 2위, 문서 작성은 3위권 밖이고, 말을 많이 하는 만큼 시간과 토큰이 더 드는 모습도 있었어요.

오늘 하나만 기억해 주세요. AI 뉴스의 ‘1등’은 어떤 시험에서, 몇 점 차이로, 얼마의 비용으로 1등인지 함께 봐야 진짜 의미가 보인다는 것. 카본이 일반 사용자에게 열리면 모릭월드에서 다시 쉽게 풀어 드릴게요.