[이데일리 신영빈 기자] KT클라우드가 카카오(035720)와 손잡고 안전한 인공지능(AI) 서비스 운영 환경 구축에 나선다.

KT클라우드는 카카오와 AI 안전성 협력 체계를 구축하고, 공공·금융 등 분야에서 신뢰할 수 있는 AI 활용 환경을 조성한다고 26일 밝혔다.

최근 생성형 AI 활용이 확대되면서 유해 콘텐츠 생성, 프롬프트 주입, 개인정보 유출 등 AI 안전성 이슈의 중요성이 커지고 있다. 특히 공공기관과 금융권, 기업 고객은 AI 도입 과정에서 성능뿐 아니라 보안성, 신뢰성, 규제 준수 요건까지 함께 고려해야 하는 만큼 안전한 AI 운영 환경에 대한 수요가 높아지고 있다.

KT클라우드와 카카오는 KT클라우드의 AI 인프라 플랫폼 역량과 카카오의 AI 안전성 기술을 결합해 고객이 생성형 AI 서비스를 안심하고 개발·운영할 수 있는 기반을 마련한다는 계획이다.

양사는 지난 25일 카카오 판교 아지트에서 협약식을 열고 AI 안전성 협력 방안과 향후 추진 계획을 논의했다. 협약식에는 공용준 KT클라우드 클라우드본부장과 김세웅 카카오 AI 시너지 성과리더가 참석했다.

협력의 첫 단계로 KT클라우드는 지난 4월 선보인 공공고객 대상 검색증강생성(RAG) 기반 생성형 AI 서비스 플랫폼 ‘RAG Suite 2.0’에 카카오의 AI 가드레일 모델 ‘카나나 세이프가드’를 연동한다.

카나나 세이프가드는 한국어와 한국의 문화적·법적 맥락에 특화된 AI 안전성 모델이다. 유해 콘텐츠 생성, 부적절한 응답, 프롬프트 공격 등을 탐지·차단해 생성형 AI 서비스의 안전한 활용을 지원한다.

양사는 가드레일뿐 아니라 모델 안정성 평가 시스템, 다양한 공격 시나리오를 기반으로 취약 영역을 진단하는 AI 레드티밍 시스템 등 AI 안전성 도구를 KT클라우드 고객 환경에 단계적으로 제공할 계획이다.

협력 범위는 운영 플랫폼 분야로도 확대된다. 양사는 KT클라우드 환경에서 수집되는 고객 피드백과 운영 데이터를 바탕으로 AI 안전성 도구를 통합·관리하는 운영 플랫폼을 공동 구축할 예정이다.

이를 통해 고객은 생성형 AI 서비스 개발부터 배포, 운영, 모니터링까지 전 과정에서 체계적인 AI 운영 환경을 구축할 수 있다. 공공기관과 금융권이 요구하는 보안 및 규제 준수 기준에도 효과적으로 대응할 수 있을 것으로 기대된다.

김봉균 KT클라우드 대표는 “생성형 AI가 본격적으로 확산되면서 성능뿐 아니라 책임 있는 AI 활용 기반을 마련하는 것이 중요한 과제가 되고 있다”며 “카카오와의 협력을 통해 AI 인프라와 안전성 기술을 결합하고, 공공과 민간 고객이 신뢰할 수 있는 환경에서 AI 서비스를 개발·운영할 수 있도록 지원하겠다”고 말했다.