AI · 영상
OpenAI, 일상 속 과제로 AI 성능을 재는 벤치마크 LifeVal 공개
OpenAI 공식 YouTube ·
한눈에 보기
OpenAI가 일상생활에서 중요한 과제를 기준으로 AI 성능을 측정하는 새 벤치마크(성능을 비교하는 시험 기준) LifeVal을 소개했어요. 영상 제목과 소개 글에 따르면 수천 명의 ChatGPT 사용자 의견을 반영해 만들었어요.
핵심 내용
- LifeVal은 사람들이 개인 비서에게 가장 도움받고 싶어 하는 일을 기준으로 설계됐어요.
- 육아 시설 찾기, 정부 서비스 이용, 개인 재무 관리 같은 과제가 예로 언급돼요.
- OpenAI는 지난 1년간 LifeVal로 자사 모델이 이런 일상 과제를 얼마나 잘 처리하는지 측정하고 개선해 왔다고 밝혔어요.
왜 중요할까요?
AI가 일상에서 실제로 얼마나 도움이 되는지 궁금한 분께 도움이 돼요.
원문과 출처
LifeVal: Measuring AI progress on the tasks that matter in everyday life.
OpenAI 공식 YouTube · 11월 7일 06:11 KST
YouTube에서 보기 ↗AI가 영상 제목과 설명을 바탕으로 정리했어요. 틀린 내용이 있을 수 있어요. 저작권은 원 출처에 있어요. OpenAI 공식 YouTube.
같은 분야의 다른 소식
- Amazon Cuts Self-Hosted AI Cost With Shared Cache Agent Skill
AWS 블로그가 여러 서버가 함께 쓰는 공용 캐시(저장 공간)로 자체 운영 AI 모델의 비용과 응답 지연을 줄이는 방법을 소개했어요. 각 서버의 작은 캐시로는 같은 계산을 반복하게 되는데, 공용 캐시를 쓰면 이를 줄일 수 있다고 해요. 원문은 비용 최대 40%, 첫 단어가 나오기까지의 시간 최대 80% 절감을 제시해요.
Amazon AWS Machine Learning blog · 11월 21일 09:14 KST - AI 챗봇에 블랙프라이데이 TV 할인 물어보니, 링크는 죽고 가격은 틀려
BBC 기자들이 ChatGPT, Claude, Gemini 등 AI 챗봇에게 55인치 TV 할인 제품을 찾아 달라고 해 봤어요. 결과는 엇갈렸고, 안내한 링크 상당수가 이미 없거나 오래된 정보였어요.
BBC News · 11월 21일 09:06 KST - Anthropic 수학자, Claude로 리만 가설 증명 주장 제기
Anthropic 수학자 레벤트 알페외게(Levent Alpöge)가 Claude와 함께 약 6주 만에 리만 가설(Riemann Hypothesis) 증명을 찾았다고 주장하는 내용을 다뤄요. 영상은 어려운 수학보다는 이것이 AI에 대해 무엇을 뜻하는지에 초점을 맞춰요. 증명은 아직 검증 중이에요.
TheAIGRID · 11월 21일 08:45 KST - 듀플렉스 통화 기능, 제미나이 앱에서 가게에 대신 전화
구글이 2018년에 공개한 AI 전화 기술 듀플렉스(Duplex)를 제미나이 앱의 작업 기능에 넣었어요. 이제 제미나이가 대신 가게에 전화해 예약이나 문의를 처리할 수 있어요. 기술은 좁은 작업용 모델에서 시작해 제미나이 기반 하나의 구조로 바뀌었어요.
Google Research blog · 11월 21일 08:30 KST