LLM-jp(NII)독점

llm-jp-3-172b-alpha1

이 모델 비교

NII가 개발한 일본어 특화 대규모 언어 모델입니다. 150M~172B까지 8가지 크기로 제공됩니다. llm-jp-corpus v3로 학습했으며, Instruct2/Instruct3를 통해 SFT 및 DPO를 지원합니다. (13B 이하 모델은 Apache 2.0 라이선스)

파라미터

Undisclosed

컨텍스트

라이선스

Proprietary

출시일

2024-09-29

API 가격

이 모델의 API 가격 정보는 현재 공개되지 않았습니다

강점

  • 172B 파라미터의 초대규모 모델로 잠재력이 높습니다.
  • 일본어 학습 데이터에 집중되어 있습니다.
  • 알파 버전으로, 최신 학습 기법이 시도되었을 가능성이 있습니다.

약점

  • 알파 버전으로, 안정성 및 성능이 정식 버전 대비 낮을 수 있습니다.
  • Apache 2.0 라이선스가 아니므로 상업적 사용에 제한이 있습니다.
  • 추론에 막대한 연산 자원이 필요합니다.

활용 사례

  • 일본어 대규모 모델 개발 초기 단계의 연구 및 실험
  • 알파 버전의 특성 및 한계 분석을 위한 연구 프로젝트