파인튜닝Fine-tuning
만들어진 모델에 특정 데이터를 더 학습시켜 한 분야에 맞추는 일입니다. 좁은 분야에서는 작은 모델을 파인튜닝하는 쪽이 더 정확할 때가 있습니다.
파인튜닝 관련 기사 5건
Nemotron 3.5 Transcribe 공개
엔비디아가 10월 28일 음성 받아쓰기 모델 Nemotron 3.5 Transcribe를 허깅페이스에 공개했습니다. 한국어를 포함한 40개 언어를 받아쓰고 1시간 녹음에서 화자를 8명까지 나누며, 지시문으로 출력 형식을 바꿀 수 있습니다.
구글, LLM에 ‘수면 단계’ 넣어 망각 줄인다
구글 리서치가 10월 27일 언어 모델이 배포된 뒤에도 새 사실을 익히면서 예전 지식을 덜 잊게 하는 ‘수면’ 방식을 소개했습니다. 깨어 있을 때 받은 정보를 잠자는 동안 모델 파라미터로 옮기고 스스로 만든 연습 데이터로 복습합니다.
10년 된 CNN, 피부암 진단서 GPT-6 앞질러
영국 가이스병원 피부과 전문의 매그너스 린치가 2015년 공개된 구글 이미지 신경망을 20분가량 미세조정해 최신 LLM 두 종과 피부 병변 진단을 겨뤘습니다. 조직검사로 확진된 200건 가운데 CNN은 125건, LLM은 84·85건을 맞혔습니다.
캔바 첫 이미지 모델 ‘크래프트’ 공개
캔바가 직접 설계하고 학습시킨 첫 이미지 생성 모델 '캔바 크래프트'를 내놨습니다. 그리기 전에 배치·크기·글자를 먼저 계획하는 2단계 구조여서 이미지 속 글자가 뭉개지는 문제가 줄었다고 회사는 설명합니다. 결과물은 레이어별로 나눠 다시 편집할 수 있습니다.
AI 글이 읽기 어려운 이유
AI가 쓴 글이 점점 읽기 어려워졌다는 체감을 언어학 지표로 따져 본 논문이 나왔습니다. 최신 모델 9종 모두 사람이 쓴 글보다 드문 단어 조합과 어색한 주어 사용이 많았습니다. 연구진은 수학·코드 중심으로 정보 밀도를 최적화한 것을 원인으로 지목했습니다.
함께 보면 좋은 용어
- 프롬프트Prompt
- AI에게 건네는 요청 문장입니다. 무엇을, 어떤 형식으로, 어디까지 할지 적을수록 결과가 안정됩니다.
- 학습 데이터Training data
- AI 모델을 만들 때 읽히는 글·그림·코드 뭉치입니다. 어디서 가져왔는지, 학습 중 외부와 연결되는지가 안전과 저작권 문제로 이어집니다.
- LLMLarge Language Model
- 대규모 언어 모델입니다. 방대한 글로 학습해 글을 읽고 쓰는 AI로, 챗GPT·클로드·제미나이가 대표적입니다.
- 강화학습Reinforcement learning
- 잘하면 보상, 못하면 벌점을 주며 스스로 더 나은 답을 찾게 하는 학습 방식입니다. 추론 모델 훈련에 많이 쓰입니다.
- 단어 오류율(WER)Word error rate
- 음성 받아쓰기가 얼마나 틀렸는지 재는 지표입니다. 정답 문장과 비교해 빠지거나 바뀌거나 더해진 단어의 비율이고 낮을수록 정확합니다.
- 데이터셋Dataset
- 학습이나 평가에 쓰려고 모아 정리한 데이터 묶음입니다.
- 멀티모달Multimodal
- 글뿐 아니라 이미지·소리·영상을 함께 읽고 만드는 AI입니다.
- 모델 카드Model card
- 모델의 성능·한계·안전 시험 결과를 정리해 공개하는 문서입니다. 새 모델이 나올 때 함께 냅니다(시스템 카드라고도 합니다).
영상으로 보고, 기사로 자세히 읽기
30초 영상은 인스타그램과 유튜브 쇼츠에, 그날 나온 소식은 스레드에 가장 먼저 올립니다.