AI/빅데이터

플래그십 모델의 수명이 2주가 되었습니다

10월 29일 | 조회수 19
또
또치리아빠

Google이 10/28(수) Gemini 4 Carbon을 공개했습니다. 직전 플래그십 Argon을 내놓은 지 불과 2주 만입니다. Artificial Analysis 지수는 50점에서 59점으로 올라 1위를 되찾았습니다. 다만 수치를 조금 더 들여다보면 다른 그림도 보입니다. 정답률은 48%에서 58%로 올랐는데, 환각률도 4%에서 11%로 함께 올랐습니다. 순위가 올라가는 동안 신뢰성 지표는 따로 움직인 셈입니다. 수업에서 학생들에게 "벤치마크 1위"라는 헤드라인보다 어떤 지표가 올랐고 어떤 지표가 나빠졌는지를 함께 읽는 습관을 강조하는 이유입니다. 모델 교체 주기가 학기 단위보다 짧아진 지금, AI 교육의 초점은 특정 모델 사용법이 아니라 평가하고 검증하는 능력이어야 한다고 생각합니다. #AI #Gemini #LLM #AI교육 #벤치마크

댓글 0개
공감순
최신순
      등록된 댓글이 없습니다
      첫 댓글을 남겨주세요
추천글
대표전화 : 02-556-4202
06235 서울시 강남구 테헤란로 134, 5,6,9층
(역삼동, 포스코타워 역삼) (대표자:최재호, 송기홍)
사업자등록번호 : 211-88-81111
통신판매업 신고번호: 2016-서울강남-03104호
| 직업정보제공사업 신고번호: 서울강남 제2019-11호
| 유료직업소개사업 신고번호: 2020-3220237-14-5-00003
| 국외 유료직업소개사업 신고번호: F1200020240004
Copyright Remember & Company All rights reserved.