멀티모달Multimodal
글뿐 아니라 이미지·소리·영상을 함께 읽고 만드는 AI입니다.
멀티모달 관련 기사 5건
미스트랄 라지 4, 1조 파라미터 가중치 공개
미스트랄 라지 4(Mistral Large 4)의 가중치가 허깅페이스에 올라왔습니다. 10월 6일 미리 보기로 나온 1조 파라미터 멀티모달 모델을 이제 직접 내려받아 자기 서버에서 돌리거나 API로 쓸 수 있습니다.
리퀴드 AI LFM3, 약 1GB 오픈 모델 6종
리퀴드 AI가 10월 27일 소형 모델 묶음 LFM3를 공개했습니다. 17억~22억 파라미터 모델 6종이 텍스트와 이미지, 음성을 나눠 맡고, 텍스트 모델은 4비트로 줄이면 약 1GB에 들어가 기기 안에서 돌리는 쓰임새를 겨냥했습니다.
10년 된 CNN, 피부암 진단서 GPT-6 앞질러
영국 가이스병원 피부과 전문의 매그너스 린치가 2015년 공개된 구글 이미지 신경망을 20분가량 미세조정해 최신 LLM 두 종과 피부 병변 진단을 겨뤘습니다. 조직검사로 확진된 200건 가운데 CNN은 125건, LLM은 84·85건을 맞혔습니다.
미스트랄 ‘복스트랄 3’, 음성 AI 한 묶음
프랑스 미스트랄AI가 받아쓰기·음성 합성 모델과 음성 에이전트 개발 도구를 묶은 ‘복스트랄 3’를 내놨습니다. 전사 모델은 50개 언어를 지원하고 가격은 분당 0.0035달러부터입니다. 회사는 위스퍼·제미나이 3.5 트랜스크라이브보다 정확하다고 주장합니다.
AI 도구 다섯 단계로 만든 ‘파리 시티 투어’
크리에이터 비체 쿠체가 10월 19일 유튜브에 올린 ‘Paris City Tours | AI Satire’는 가상의 파리 관광 회사 광고를 비튼 풍자 영상입니다. 기획과 이미지, 영상, 음악은 AI 도구로 만들었고 편집은 어도비로 마무리했습니다.
함께 보면 좋은 용어
- 벤치마크Benchmark
- 모델 성능을 같은 조건으로 재는 시험입니다. 회사가 직접 잰 점수는 '자체 발표 기준'이고, 독립 기관이 잰 점수와 다를 수 있습니다.
- 오픈 웨이트Open weight
- 학습이 끝난 모델의 가중치를 누구나 내려받아 쓸 수 있게 공개한 것입니다. 학습 데이터와 코드까지 다 여는 오픈소스와는 구분합니다.
- 파라미터Parameter
- 모델이 학습하며 조정하는 숫자(매개변수)입니다. '1조 파라미터 모델'처럼 모델 크기를 말할 때 씁니다. 많을수록 대체로 똑똑하지만 돌리는 비용도 커집니다.
- 프롬프트Prompt
- AI에게 건네는 요청 문장입니다. 무엇을, 어떤 형식으로, 어디까지 할지 적을수록 결과가 안정됩니다.
- 라이선스License
- 소프트웨어·모델·콘텐츠를 어디까지 써도 되는지 정한 이용 조건입니다. 오픈소스나 오픈 웨이트라도 상업적 이용을 제한하는 경우가 있어 확인이 필요합니다.
- 미스트랄Mistral AI
- 프랑스 AI 회사입니다. 오픈 웨이트 모델과 음성 모델 '복스트랄'을 냅니다.
- 허깅페이스Hugging Face
- AI 모델과 데이터셋을 올리고 내려받는 공유 사이트입니다. 오픈 웨이트 모델 대부분이 여기에 공개됩니다.
- 가중치Weights
- 학습이 끝난 모델 안에 담긴 파라미터 값입니다. 가중치를 공개하면 누구나 그 모델을 내려받아 돌릴 수 있습니다(오픈 웨이트).
영상으로 보고, 기사로 자세히 읽기
30초 영상은 인스타그램과 유튜브 쇼츠에, 그날 나온 소식은 스레드에 가장 먼저 올립니다.