728x90
반응형
소형 대규모언어모델(sLLM)
구름(KULLM)이라는 한국어 모델
고려대에서 개발한 한국어 특화 모델로, 약 128억 개의 매개변수를 가지고 있다.
코알파카(KoAlpaca), 코비쿠나(KoVicuna) 등의 오픈소스 기반 한국어 언어모델을 등도 검토했지만, 최종적으로 구름을 선택
PEFT(파인튜닝, Parameter Efficient Fine Tuning)과 RAG(검색 증강 생성, Retrieval Augmented Generation)
https://www.mk.co.kr/news/it/10791394
https://byline.network/2023/10/1012/
728x90
'07.AI' 카테고리의 다른 글
인공지능 - 표준화 전략 (0) | 2024.08.30 |
---|---|
인공지능 - 융합서비스(AI+X) 표준화 동향 (0) | 2024.08.26 |
생성형 AI - 소버린 AI(Sovereign AI) (2) | 2024.08.26 |
음성인식 - 자연어처리 (NLP) - GPT-4o (0) | 2024.08.26 |
LLM - SLM - HuggingFace 파이-3(phi-3) (0) | 2024.08.26 |