토큰 최적화 연구 논문 2편 뉴립스 2026 채택
LG유플러스가 AI 응답 속도를 높이고 배터리 소모는 줄이는 ‘토큰 최적화’ 기술로 세계 최고 권위 AI 학회에서 연구 성과를 인정받았다. 이번 논문 집필에 참여한 LG유플러스 구성원들.ⓒLG유플러스
LG유플러스가 스마트폰에서 인공지능(AI) 처리 속도를 높이고 배터리 소모를 줄이는 토큰 최적화 기술로 세계 3대 AI 학회인 뉴립스(NeurIPS)에서 연구 성과를 인정받았다.
LG유플러스는 AI 토큰 최적화 연구 관련 논문 2편이 ‘뉴립스(NeurIPS, Neural Information Processing Systems) 2026’의 온디바이스 인텔리전스(On-Device Intelligence) 워크숍에 채택됐다고 29일 밝혔다.
뉴립스는 ICML, ICLR과 함께 세계 3대 AI 학회로 꼽힌다. 구글, 메타, 오픈AI 등 글로벌 빅테크 기업과 글로벌 주요 대학 연구진이 참여해 최신 AI 연구 성과를 발표하는 학술대회다. 올해 행사는 오는 12월 6일부터 12일까지 호주 시드니에서 열린다.
최근 AI 서비스 경쟁이 모델 성능을 넘어 ‘토큰을 얼마나 빠르고 효율적으로 처리하느냐’로 확대되고 있다. 토큰은 AI가 질문을 이해하고 답변을 생성할 때 사용하는 데이터 단위로, 토큰을 빠르고 효율적으로 처리할수록 응답 속도를 높이고 전력과 자원 사용을 줄일 수 있다.
LG유플러스는 이 같은 토큰 최적화 기술을 스마트폰 환경에 적용해 제한된 메모리와 전력으로도 소형언어모델(sLM)을 효율적으로 실행하고 학습하는 방법을 연구했다.
먼저 통화 서비스에 활용할 소형언어모델(sLM)을 개발하고, 모델 경량화와 추론 가속 기술을 적용해 스마트폰 환경에 맞게 최적화했다. 그 결과 최신 클라우드 AI 수준의 성능을 유지하면서 기존 방식보다 처리 속도를 약 4.5배 높이고 배터리 소모는 약 77% 줄였다. 성능 저하를 최소화하면서 스마트폰의 제한된 연산 자원과 배터리를 효율적으로 활용할 수 있도록 한 것이 특징이다.
개인 데이터를 외부로 보내지 않고 스마트폰 안에서 AI를 직접 학습하는 기술도 연구했다. AI 학습에 필요한 연산과 메모리 사용을 효율화해 추가 학습 과정을 스마트폰 내부에서 진행했다. 이후 실제 스마트폰 환경에서 성능을 검증한 결과, 개인 데이터를 기기 밖으로 보내지 않고도 서버에서 학습한 것과 같은 수준의 정확도를 보였다.
LG유플러스는 이번 연구에서 확보한 기술을 향후 자사의 다양한 AI 서비스에 활용하는 방안을 검토하고 있다. 구체적으로 스마트폰에서 검증한 최적화 역량을 서버 GPU 환경으로 확대해 고객이 보다 빠르고 편리하게 AI를 이용할 수 있도록 할 계획이다.
이상엽 LG유플러스 CTO는 “이번 뉴립스 논문 채택은 제한된 환경에서도 AI를 빠르고 효율적으로 실행하고 학습하기 위한 연구 성과를 인정받은 것”이라며 “고객이 AI 서비스를 보다 빠르고 편리하게 이용할 수 있도록 관련 기술을 실제 서비스에 적용하고, 향후 서버 환경까지 연구 범위를 확대해 나가겠다”고 말했다.
한편 LG유플러스는 최근 AI 모델 최적화 전문기업 옵트에이아이와 토큰 최적화 기술 공동 연구를 서버 GPU 영역으로 확대한다고 밝혔다. 양사는 초기 공동 연구에서 연산 과정을 개선해 동일한 GPU 자원으로 처리할 수 있는 토큰량을 기존 대비 최대 4배로 늘렸으며, 향후 관련 기술을 LG유플러스의 AI 서비스와 인프라에 단계적으로 적용할 계획이다.
댓글 쓰기