비전 언어 모델(VLM)Vision-language model
뜻
이미지와 글을 함께 받아 사진 속 내용을 설명하거나 질문에 답하는 모델입니다. 모델 이름 뒤에 'VL'이 붙어 있으면 대개 이런 모델입니다.
비전 언어 모델(VLM) 관련 기사 3건
연구지켜보세요
Ai2 토이블록스, 로봇 학습 시험장
Ai2가 11월 6일(미국 시각) 로봇 학습과 평가를 실험처럼 따져 볼 수 있는 시뮬레이션 틀 토이블록스(ToyBlocks)를 공개했습니다. 시연 85,336개와 학습된 모델, 코드가 함께 나왔습니다.
연구지켜보세요
구글, 주관적 이미지 분류기 AI와 다듬는다
구글 리서치(Google Research)가 '건강한 음식'처럼 기준이 사람마다 다른 개념의 이미지 분류기를 만드는 방법 Agile Deliberation을 소개했습니다. 사용자가 프롬프트를 직접 고치지 않고 AI가 보여 주는 애매한 이미지에 답하며 기준을 다듬습니다.
모델·제품지켜보세요
리퀴드 AI LFM3, 약 1GB 오픈 모델 6종
리퀴드 AI가 10월 27일 소형 모델 묶음 LFM3를 공개했습니다. 17억~22억 파라미터 모델 6종이 텍스트와 이미지, 음성을 나눠 맡고, 텍스트 모델은 4비트로 줄이면 약 1GB에 들어가 기기 안에서 돌리는 쓰임새를 겨냥했습니다.
함께 보면 좋은 용어
- 허깅페이스Hugging Face
- AI 모델과 데이터셋을 올리고 내려받는 공유 사이트입니다. 오픈 웨이트 모델 대부분이 여기에 공개됩니다.
- 데이터셋Dataset
- 학습이나 평가에 쓰려고 모아 정리한 데이터 묶음입니다.
- 멀티모달Multimodal
- 글뿐 아니라 이미지·소리·영상을 함께 읽고 만드는 AI입니다.
- 벤치마크Benchmark
- 모델 성능을 같은 조건으로 재는 시험입니다. 회사가 직접 잰 점수는 '자체 발표 기준'이고, 독립 기관이 잰 점수와 다를 수 있습니다.
- 분류기Classifier
- 입력된 이미지나 글이 정해 둔 범주 중 어디에 속하는지 가려내는 AI 모델입니다.
- 소형 언어 모델(SLM)Small language model
- 파라미터 수를 줄여 휴대폰·노트북 같은 작은 기기에서도 돌아가게 만든 언어 모델입니다. 큰 모델보다 성능은 낮지만 빠르고 싸며 인터넷 없이도 쓸 수 있습니다.
- 시뮬레이션Simulation
- 현실의 상황을 컴퓨터 안에서 흉내 내는 것입니다. 로봇은 시뮬레이션에서 연습한 뒤 실제 기계에 옮기는 경우가 많습니다.
- 양자화Quantization
- 모델의 숫자를 더 적은 자릿수로 줄여 가볍게 만드는 기술입니다. 품질을 조금 내주는 대신 메모리와 비용을 크게 줄여 노트북·폰에서도 돌릴 수 있게 합니다.
SHIFT 팔로우
영상으로 보고, 기사로 자세히 읽기
30초 영상은 인스타그램과 유튜브 쇼츠에, 그날 나온 소식은 스레드에 가장 먼저 올립니다.