레플리
글 수 284

LLaMA나 Mistral이 계속 무료로 유지될 수 있을까

조회 수 250 추천 수 0 2024.03.05 16:16:38


얼마 전 MS가 Mistral에 1,500만 유로의 투자를 했습니다. 그 하루 전날 GPT-4급의 Mistral Large를 유료 API로 공개했습니다. 현재 Mistral은 작은 모델들을 오픈소스로 풀고 있는데요. 과연 앞으로도 그렇게 상용/무료 투트랙으로 유지할지 궁금합니다.

 

지금 오픈소스 LLM은 거의 LLaMA나 Mistral을 베이스 모델로 하고 있습니다. 메타는 후발주자로서 돌파구를 마련하기 위해 LLaMA를 무료로 공개했습니다. 어느정도 입지를 다진 후에도 계속 이런 전략을 고수할까요. 아니면 Mistral처럼 상용과 무료를 병행할까요.

 

만약 메타나 Mistral이 완전히 상용 모델로 방향을 튼다면 오픈소스 진영은 별다른 대안이 없습니다. 중국에서 만든 Qwen이나 Yi 같은 모델도 있지만 계속 무료일지는 확실하지 않습니다. 결국 기업은 돈을 벌어야 하니까요.

 

개인적으로는 sLLM 시장이 계속 커지기를 바라고 있습니다. AI 역시 견제와 균형이 필요합니다. 사실 그게 OpenAI의 창립 목적이었죠^^; 아파치나 리눅스처럼 오픈소스 재단이 주도적으로 나서야 되지 않을까요. 다만 학습에 드는 막대한 비용을 어떻게 조달할지가 문제겠지만요.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
BERT 톺아보기 깊은바다 2018-12-17 26395
딥러닝을 사용한 챗봇 개발방법 정리 file 깊은바다 2018-02-03 25475
초거대모델의 파인튜닝 방법 - P-tuning과 LoRA file 깊은바다 2022-04-05 12139
RAG(Retrieval-Augmented Generation) - LLM의 환각을 줄이는 방법 file 깊은바다 2023-07-04 9794
글쓰기 보조 서비스 JasperAI, ChatGPT 때문에 어려움 직면 깊은바다 2023-03-01 9693
딥러닝 RNN으로 구현한 챗봇 깊은바다 2017-08-01 8136
문장을 학습하는 딥러닝 RNN의 Seq2Seq 모델 설명 file 깊은바다 2017-09-15 7327
챗봇에 딥러닝 학습을 적용하기 어려운 이유 file 깊은바다 2018-03-23 6641
KoGPT2, KoBERT, KoELECTRA로 만든 심리상담 챗봇 file 깊은바다 2020-08-05 6373
문장을 입력하면 비슷한 짤방을 보여주는 프로젝트 file 깊은바다 2019-01-28 6172
SKT가 공개한 한글 GPT2 - KoGPT2 깊은바다 2020-02-02 5298
챗봇에서 유사한 문장 자동인식 방법 file 깊은바다 2018-04-27 5154
네이버 영화리뷰 감정분석 with Hugging Face BERT file 깊은바다 2019-12-17 4673
사전학습을 통한 구글의 자연어처리 언어 모델 - BERT file 깊은바다 2018-11-03 4299
인라이플의 한글 BERT 대형모델 깊은바다 2020-05-18 4246