AI · 영상
에이전트 고치기, 감으로 하지 말고 평가로 확인하세요
DeepLearning.AI ·
한눈에 보기
일반 소프트웨어 테스트는 코드가 돌아가는지만 확인해서 에이전트(스스로 판단하고 행동하는 AI 프로그램)를 시험하기에는 부족해요. 이 영상은 에이전트의 판단과 행동을 측정하는 평가(에벌류에이션, 성능을 점검하는 과정) 방법을 소개하는 강좌 안내예요.
핵심 내용
- 에이전트가 남긴 추적 기록(트레이스, 작업 과정을 순서대로 적은 로그)을 읽어 반복되는 실패를 찾아요.
- 찾은 실패를 테스트 세트(반복 실행용 시험 문제 모음)로 만들어 변경할 때마다 다시 돌려 볼 수 있어요.
- 코드 기반 채점과 LLM 심사위원(다른 대형 언어 모델이 결과를 평가하는 방식)으로 평가를 자동화하는 방법을 다뤄요.
왜 중요할까요?
에이전트가 어디서 왜 틀리는지 감이 아닌 근거로 고치고 싶은 분께 도움이 돼요.
원문과 출처
Stop guessing how to fix your agent
DeepLearning.AI · 11월 4일 20:00 KST
YouTube에서 보기 ↗AI가 영상 제목과 설명을 바탕으로 정리했어요. 틀린 내용이 있을 수 있어요. 저작권은 원 출처에 있어요. DeepLearning.AI.
같은 분야의 다른 소식
- 챗GPT 스페이스, 플러스 이용자에게 공개… 페이지·슬라이드 팀 공유
오픈AI가 20일(현지 시각) 챗GPT 스페이스를 플러스 이용자에게도 열었어요. 스페이스는 페이지, 슬라이드, 이미지, 파일을 모아 두는 새 홈이에요. 챗GPT와 함께 페이지를 만들고, 슬라이드로 바꾸고, 다른 사람을 초대해 함께 작업할 수 있어요.
AI 매터스 · 11월 21일 11:26 KST - Claude 도움으로 리만 가설 증명 주장, 검증 결과 주목
Wes Roth 영상은 Anthropic 연구원 레반트 알푀게(Levent Alpöge)가 AI 모델 Claude와 함께 리만 가설(수학의 오래된 미해결 문제)을 증명했다고 주장한 내용을 다뤄요. 거대한 Lean(수학 증명을 검사하는 프로그래밍 언어) 형식 증명, 수학자와 AI 안전 연구자들의 반응, AI와 수학의 미래에 대한 의미를 살펴봐요.
Wes Roth · 11월 21일 11:24 KST - 국가시험 A부터 Z까지 전면 개편…AI 부정행위 대응 본격화
이재명 대통령이 AI를 이용한 시험 부정행위를 막기 위해 수능부터 국가자격시험, 민간 기업 채용까지 제도 전반을 새로 손보라고 지시했어요. 이에 따라 정부 전체 태스크포스(TF)와 청와대 TF가 함께 출범했어요.
서울경제 · 11월 21일 10:35 KST - AWS Quick, 채팅으로 만드는 플로와 멀티 에이전트 기능 추가
아마존웹서비스(AWS)가 2026년 11월 20일 AWS Quick의 큰 업데이트를 내놓았어요. 이제 채팅으로 업무 흐름(플로)을 만들 수 있고, 여러 전문 에이전트(특정 일을 맡은 AI)의 결과를 하나로 묶는 기능도 생겼어요.
Unite.AI · 11월 21일 10:20 KST