AI · 기사
AWS, 서버리스 SageMaker 맞춤화에 전체 가중치 학습 도입
Unite.AI ·

한눈에 보기
아마존 웹 서비스(AWS)가 서버리스 SageMaker AI 모델 맞춤화에 모든 가중치를 학습하는 전체 미세 조정(FFT, 모델 전체를 다시 학습시키는 방식) 기능을 추가했어요. 코딩 실험에서 의미 정확도 90.0%를 기록했지만, 설정을 지나치게 세게 주면 일반 지식이 크게 줄 수 있다고 경고했어요.
핵심 내용
- 전체 미세 조정은 모델의 모든 가중치를 업데이트하고, LoRA(일부 작은 어댑터만 추가해 학습하는 방식)는 일부만 바꿔요.
- AWS 실험에서 전체 미세 조정은 보여 준 모든 품질 지표에서 LoRA와 기본 모델보다 높았어요.
- 그러나 MATH 완전 일치 지표에서는 두 방식 모두 기본 모델보다 낮았어요.
- 학습률이 5e-5 이상이면 성능이 크게 떨어져서, 대규모 데이터에는 2e-5를 권장했어요.
왜 중요할까요?
더 깊은 맞춤화로 특정 과제 성능을 높일 수 있지만, 계산 비용이 늘고 모델이 일반 지식을 잃을 위험도 있어요.
원문과 출처
AWS, 서버리스 SageMaker 맞춤화에 전체 가중치 학습 도입
Unite.AI · 11월 19일 09:39 KST
Unite.AI에서 원문 읽기 ↗AI가 원문을 바탕으로 정리했어요. 틀린 내용이 있을 수 있어요. 저작권은 원 출처에 있어요. Unite.AI.
같은 소식을 전한 곳
Amazon Web Services · 순위와 다른 소식
같은 분야의 다른 소식
- 디자이너들 "Ssense 사이트에서 옷이 실제와 다르게 보여"
디자이너 리스 쿠퍼는 자신의 브랜드 RCOS 패딩 코트가 명품 쇼핑몰 Ssense 사이트에서 왜곡되어 보인다고 알렸어요. 가슴의 고리 장식이 실제보다 훨씬 크게 그려졌다고 했어요. Ssense는 일부 사진이 '가상 착용(옷을 입은 모습을 컴퓨터로 만든 기능)' 기술로 만들어졌다고 밝혔지만, AI를 쓰는지는 답하지 않았어요.
The New York Times · 11월 21일 06:16 KST - AI 글을 사람처럼 바꾸는 도구 광고, 전후 점수 비교 공개
이 짧은 영상은 Walter Writes AI라는 도구의 유료 광고예요. AI가 쓴 글을 사람이 쓴 것처럼 읽히게 고쳐 주는 도구를 소개해요. 제작자는 문단 하나를 탐지기에 넣어 AI 티가 난 부분을 찾고, 이 도구로 고쳐 쓴 뒤 점수를 비교했다고 해요.
TheAIGRID · 11월 21일 06:15 KST - 앤트로픽 투자·HBM·클로드까지, 한국 기업의 AI 3각 포석
미국 AI 기업 앤트로픽의 기업공개(IPO)를 계기로 한국 기업들이 AI 시장에서 여러 방향으로 존재감을 넓히고 있어요. SK텔레콤은 초기 투자로 큰 평가이익을 얻었어요. 삼성전자와 SK하이닉스는 반도체 공급 협력을 강화하고 있어요. 삼성SDS와 LG CNS는 앤트로픽의 AI 모델 클로드로 기업용 AI 시장에 들어가고 있어요.
뉴스웨이 · 11월 21일 06:10 KST - MIT·IBM 연구팀, 멀티모달 AI의 이해 한계 파헤쳐
MIT과 IBM 연구팀이 텍스트·이미지·소리를 함께 다루는 멀티모달 AI 모델의 약점을 연구하고 있어요. 이 모델들은 겉으로는 여러 정보를 잘 다루지만 실제 이해는 부족한 경우가 많아요. 팀은 MIT의 짐 글래스 연구원과 함께 새 시험 방법과 적은 데이터로 배우는 기법을 만들고 있어요.
MIT News · 11월 21일 06:00 KST