검색창 열기 인더뉴스 부·울·경

Tech 테크

LG AI연구원, 세계 최고 권위 학회 NAACL서 ‘최고논문상’ 수상

URL복사

Wednesday, April 30, 2025, 13:04:50

생성형 AI 모델 성능 평가하는 '빅젠 벤치' 개발해 수상
학회 채택 논문 1400여편 중 최고 연구 성과 인정

 

인더뉴스 이종현 기자ㅣLG AI연구원이 자연어 처리(NLP) 분야 세계 최고 권위 학회 중 하나인 북미 전산언어 학회(NAACL) 2025에서 '최고논문상(Best Paper Award)'을 수상했습니다.

 

LG AI연구원은 지난해 NAACL 2024에서 AI 모델의 문화적 편견에 관한 분석을 통한 AI 시스템의 안정성 및 공정성을 주제로 발표한 연구 논문이 '소셜임팩트상(Social Impact Award)'을 받은 데 이어 올해는 생성형 AI 모델 성능을 평가하는 새로운 벤치마크 연구 논문이 같은 학회로부터 최고논문상을 수상했다고 30일 밝혔습니다.

 

'최고논문상' NAACL 2025에 채택된 1400편이 넘는 논문 중 단 하나만 받는 상으로 자연어 처리 분야에서 새로운 연구 방향을 제시하거나 중요한 문제를 해결한 연구 중 올해 가장 혁신적이고 중요성이 높다고 평가를 받은 연구가 선정됩니다.

 

논문 1 저자인 김승원 카네기멜론대 박사과정 연구생은 LG AI연구원 초지능랩의 인턴 과정 중 이문태 초지능랩장, 이경재 데이터 스쿼드 리더, 서민준 KAIST 교수 연구팀과 함께 생성형 AI 모델 성능을 평가하는 '빅젠 벤치(BIGGEN BENCH)'를 개발해 최고논문상을 수상했습니다.

 

이번 연구에는 연세대, 코넬대, 일리노이대, MIT, 워싱턴대 등 여러 대학의 연구진이 함께 참여했습니다.

 

기존 생성형 AI 모델 평가 방식은 '유용성', '무해성'과 같은 추상적인 개념 지표에 의존하고 있어 사람이 평가했을 때의 결과와 차이가 발생하고 특히 AI 모델이 보유하고 있는 세부 역량에 대한 측정이 어렵다는 한계가 있었습니다.

 

빅젠 벤치는 ▲지시사항 수행 ▲논리적 추론 ▲도구 사용 능력 ▲안전성 ▲다양한 언어와 문화적 맥락 이해 능력 등 생성형 AI 모델이 갖춰야 할 핵심 역량을 9가지로 분류하고 77개의 세부 역할을 잘 수행하는지 평가하는 765개 항목으로 구성되어 있습니다. 이는 실제 사람의 평가와 유사한 결과를 도출하기 위해 생성형 AI 모델을 사용하고 평가할 때 주변의 다양한 상황과 주관적 요소를 고려하는 사람의 평가 방식을 모방한 것입니다.

 

LG AI연구원은 빅젠 벤치를 사용해 103개의 생성형 AI 모델들을 평가한 결과 전문가 집단과의 교차 검증에서 높은 수준의 신뢰도와 타당도를 보여 새로운 벤치마크로의 가능성을 확인했습니다.

 

이문태 LG AI연구원 초지능랩장은 "빅젠 벤치는 생성형 AI의 다양한 능력을 객관적이고 종합적으로 평가할 수 있도록 설계됐으며 기존 벤치마크들의 한계를 극복하고 인간의 정교한 평가기준에 부합하여 AI 모델의 능력을 파악할 수 있다는 장점이 있다"라고 말했습니다.

 

서민준 KAIST 교수는 "빅젠 벤치는 생성형 AI 모델을 평가할 때 사람들이 실제로 사용할 때 느끼는 실용성을 지표화 할 수 있다는 점이 가장 큰 장점"이라며 "빅젠 벤치에서 좋은 결과를 얻는다는 것은 실제로 사용할 때 만족스러운 성능을 보이는 생성형 AI 모델이라는 의미"라고 강조했습니다.

 

LG AI연구원은 연구 과정에서 평가자 역할을 하는 AI 모델 5개 중 하나인 프로메테우스-2(Prometheus-2)도 오픈소스로 공개했습니다. 프로메테우스-2는 글로벌 상용모델 중 최고 성능을 보이는 GPT-4와 큰 차이 없이 평가자 역할을 하며 높은 평가 신뢰도를 보였습니다.

 

LG AI연구원은 빅젠 벤치를 기반으로 생성형 AI 모델 개발 과정에서 세부 항목별 성능을 자동으로 평가하는 후속 연구도 진행 중입니다.

 

LG AI연구원이 2020년 12월 출범 이후 NAACL을 비롯해, NeurIPS, AAAI, CVPR, ICML, ACL 등 AI의 각 분야별 글로벌 최상위 학회에서 발표한 논문은 234편입니다.

 

LG AI연구원은 ▲불량 제품을 감지하는 비전 검사 ▲신물질 합성 및 물성 예측 ▲멀티모달 AI ▲차세대 배터리 개발 ▲의료용 이미지 분석 등 실제 산업에 적용할 수 있는 AI 기술 등 2022년부터 현재까지 국내 120건, 국제(PCT) 108건 등 총 228건의 특허를 출원했습니다.

 

한편, LG AI연구원이 최고논문상을 수상한 NAACL 2025는 ACL(Association for Computational Linguistics), EMNLP(Conference on Empirical Methods in Natural Language Processing)와 함께 세계 3대 자연어 처리 학회로 꼽힙니다.

 

NAACL은 현지시간 29일부터 5월 4일까지 미국 뉴멕시코주 앨버커키에서 열립니다.

English(中文·日本語) news is the result of applying Google Translate. <iN THE NEWS> is not responsible for the content of English(中文·日本語) news.

배너

이종현 기자 flopig2001@inthenews.co.kr

배너

한화생명, 미국 증권사 벨로시티 인수 완료…북미 자본시장에 도전장

한화생명, 미국 증권사 벨로시티 인수 완료…북미 자본시장에 도전장

2025.07.31 17:56:17

인더뉴스 박호식 기자ㅣ한화생명이 미국 증권사 ‘Velocity Clearing(이하 ‘벨로시티’)’ 지분 75% 인수 절차를 성공적으로 마무리하고, 보험 중심의 포트폴리오를 넘어 북미 자본시장으로 전략적 확장을 본격화합니다. 이번 벨로시티 인수는 국내 보험사가 ‘글로벌 자본시장의 중심부’인 미국 증권시장에 진출한 최초의 사례입니다. 이로써 한화생명은 미국 현지 금융사를 통해 수익성을 높이고 우수한 글로벌 금융 상품을 글로벌 고객에게 제공할 수 있는 플랫폼을 마련했습니다. 뉴욕을 거점으로 한 벨로시티는 금융거래 체결 이후 자금과 자산이 실제로 오가는 과정을 직접 처리할 수 있는 역량(청산·결제)을 갖춘 전문 증권사입니다. 2024년말 기준 벨로시티는 총자산 약 12억달러(한화 약 1조6700억원)를 보유하고 있으며, 최근 3년간(2022~2024년) 매출 기준 연평균 성장률(CAGR) 25%를 기록하는 등 높은 성장세를 이어가고 있습니다. 당기순이익 또한 안정적인 증가세를 보이며 인수 이후에도 지속적인 수익성 확대가 예상된다는 설명입니다. 한화생명은 기존 벨로시티 경영진과의 협업을 통해 조기 사업안정화를 추진함과 동시에 한화자산운용 미주법인, 한화AI센터(HAC) 등과 협력해 금융과 기술이 결합된 시너지를 키워 나갈 방침입니다. 한화생명 관계자는 “한화생명이 금융의 핵심지인 미국 시장에서 한국 금융사로서 역량을 펼칠 수 있는 계기를 확보했다는데 큰 의미가 있다”며 “앞으로도 디지털금융 기술과 글로벌네트워크를 바탕으로 사업 역량을 강화하고 지역간 연결을 강화해 안정적인 성장을 이어가겠다”고 밝혔습니다. 벨로시티 마이클 로건(Michael Logan) 대표는 “한화생명의 글로벌 비전과 네트워크가 더해져 벨로시티의 성장속도가 한층 가속화될 것으로 기대하며 앞으로도 양사 간 시너지를 극대화해 나가겠다”고 말했습니다. 한편 한화생명은 각 지역의 금융환경에 맞춘 차별화 전략을 통해 글로벌 금융 생태계를 확장해 나가고 있습니다. 동남아에서는 리테일 금융 경쟁력을 강화하고, 미주에서는 플랫폼 기반의 투자기능을 고도화하면서 전략적 거점을 중심으로 글로벌 사업을 본격화하고 있습니다. 한화생명은 앞으로는 디지털기술과 글로벌 파트너십을 결합해 글로벌 고객에게 종합금융솔루션을 제공하는 브랜드로 도약할 계획이라고 밝혔습니다.




배너