'안전한 생태계 조성'…카카오, AI 리스크 관리 체계 구축 [이프카카오2024]

[아이뉴스24 정유림 기자] 카카오는 인공지능(AI) 기술 개발과 운영 과정에서 발생할 수 있는 위험 요소를 사전에 식별하고 이를 관리하는 프로세스(절차)를 정의한 관리 체계(Kakao AI Safety Initiative)를 구축했다고 23일 밝혔다.

이 내용은 전날(22일) 열린 카카오의 개발자 콘퍼런스를 통해 공개됐다. 카카오의 AI 관리 체계는 AI 기술 개발·운영 상의 위험 발생을 최소화하고 안전하고 윤리적인 AI 시스템을 구축하기 위한 종합 지침이다.

기술의 설계부터 개발, 테스트, 배포, 모니터링, 업데이트 등 AI 시스템의 전 생애 주기에서 발생할 수 있는 리스크에 선제적인 대응이 가능하도록 만들었다. AI와 인간이 초래할 수 있는 다양한 종류의 리스크를 폭넓게 관리하며 인간의 부주의나 실수로 발생할 수 있는 영역까지 관리 범위를 포괄적으로 지정했다.

관리 체계는 △카카오 AI 윤리 원칙 △리스크 관리 사이클 △AI 리스크 거버넌스라는 3가지 핵심요소로 구성된다. AI 윤리 원칙의 경우 지난해 3월 발표한 카카오 그룹의 책임 있는 AI를 위한 가이드라인을 기반으로 한다. 사회 윤리와 포용성, 투명성, 프라이버시, 이용자 보호 등 원칙을 담았으며 개발자와 이용자를 대상으로 윤리적인 가이드라인을 제공한다.

리스크 관리 사이클은 리스크를 체계적으로 다루기 위한 접근법으로, 식별-평가-대응의 순환 단계로 구성된다. AI 기술의 비윤리, 불완전 등을 최소화하고 안전성과 신뢰성을 확보할 수 있는 핵심 역할을 한다. 사이클은 AI 시스템의 전체 수명주기에 걸쳐 반복적으로 적용된다.

AI 리스크 거버넌스는 AI 시스템의 개발·배포·사용 등을 관리하고 감독하는 의사 결정 체계를 뜻한다. 조직 내 정책, 절차, 책임 구조, 외부 규제와의 조화를 포함하며 거버넌스 체계 내에서 관련 리스크를 다각도로 검토하게 된다. 거버넌스는 AI 세이프티 조직, 전사 리스크 관리 전담 조직인 ERM위원회, 최고 의사결정 기구의 3단계로 이뤄져 있다.

김경훈 카카오 AI 세이프티 리더는 "AI 시스템 이용에 따른 리스크 발생 주체를 AI와 인간으로 구분하고 발생 주체별 리스크의 특성을 반영해 평가와 대응 방안을 마련했다는 점이 타사와의 차별점"이라고 말했다.

그러면서 "AI 관리 체계는 지난 5월 열린 AI 서울 서밋(Seoul Summit)에서 선언한 서울 AI 기업 서약을 위한 실천"이라며 "이번 체계 구축을 통해 글로벌 환경에 부합하는 수준의 AI 리스크 관리 체계를 마련하고 안전한 AI 생태계 조성을 위한 협력을 이어갈 것"이라고 밝혔다.

카카오는 앞으로도 AI 기술 개발과 운영 과정에서 발생할 수 있는 리스크를 신속하게 식별·대응하고 체계 고도화를 이어간다. 빠르게 변화하는 환경과 기술적 요구에 맞춰 체계를 정밀하게 점검하고 AI 시스템의 신뢰와 안전성을 높이는데 주력한다.