(사진=BC카드) 이번에 공개된 LLM 18종은 고가의 GPU 장비 없이도 누구나 초거대 AI를 활용할 수 있도록 동적 양자화 기술이 적용된 것이 특징이다.
동적 양자화란 AI 모델이 사용하는 수치를 압축해 배포한 뒤 실제 활용 시점에 이를 복원하여 연산 성능과 효율성을 동시에 높이는 기술이다.
향후에는 BC카드 소상공인 가맹점주를 위한 AI 기반 가맹점 추천 및 마케팅 캠페인 기획 등 가맹점 지원 서비스도 연내 출시할 계획이다.
뉴스픽의 주요 문장 추출 기술을 사용하여 “이데일리” 기사 내용을 3줄로 요약한 결과입니다. 일부 누락된 내용이 있어 전반적인 이해를 위해서는 본문 전체 읽기를 권장합니다.