카카오, AI 리스크 관리 체계 '카카오 ASI' 구축

카카오는 인공지능(AI) 기술 개발과 운영 과정에서 발생할 수 있는 리스크를 사전에 식별하고, 이를 관리하는 프로세스를 정의한 리스크 관리 체계인 ‘카카오 AI 이니셔티브(Kakao ASI)를 구축했다고 밝혔다. 해당 내용은 카카오의 개발자 컨퍼런스인 ‘if 2024’의 첫날인 22일 세션을 통해 공개됐다.

카카오 ASI는 AI 기술 개발 및 운영 상의 위험 발생을 최소화하고, 안전하고 윤리적인 AI 시스템을 구축하기 위한 종합 지침이다.

특히, 기술의 설계부터 개발, 테스트, 배포, 모니터링 및 업데이트 등 AI 시스템의 전 생애주기에서 발생할 수 있는 리스크에 선제적인 대응이 가능한 것이 특징이다.

AI와 인간이 초래할 수 있는 다양한 종류의 리스크를 관리하며, 인간의 부주의나 실수로 발생할 수 있는 영역까지 관리 범위를 포괄적으로 지정했다.

카카오 ASI는 ▲카카오 AI 윤리 원칙 ▲리스크 관리 사이클 ▲AI 리스크 거버넌스라는 3가지 핵심요소로 구성된다.

'카카오 AI 윤리 원칙'은 지난2023년 3월 발표한 ‘카카오 그룹의 책임 있는 AI를 위한 가이드라인’을 기반으로 하며, 사회 윤리, 포용성, 투명성, 프라이버시, 이용자 보호 등 원칙을 포함한다.

개발자와 사용자를 대상으로 윤리적인 가이드라인을 제공한다.

'리스크 관리 사이클’은 리스크를 체계적으로 다루기 위한 접근법으로, 식별-평가-대응의 순환 단계로 구성된다.

AI 기술의 비윤리, 불완전 등을 최소화하고, 안전성과 신뢰성을 확보할 수 있는 핵심적인 역할을 한다. 사이클은 AI 시스템의 전체 수명주기에 걸쳐 반복적으로 적용된다.

'AI 리스크 거버넌스'는 AI 시스템의 개발, 배포, 사용 등을 관리하고 감독하는 의사 결정 체계를 뜻한다.

조직 내 정책, 절차, 책임 구조 및 외부 규제와의 조화를 포함하며, 거버넌스 체계 내에서 관련 리스크들을 다각도로 검토하게 된다. 카카오 ASI 거버넌스는 AI 세이프티, 전사 리스크 관리 전담 조직인ERM 위원회, 최고 의사결정 기구의 3단계로 구성돼 있다.

22일 컨퍼런스 세션에 연사자로 나선 김경훈 카카오 AI 세이프티 리더는 "AI 시스템 이용에 따른 리스크의 발생 주체를 AI와 인간으로 구분하고, 발생 주체 별 리스크의 특성을 반영해 평가 및 대응방안을 마련했다는 점이 타사의 AI 리스크 관리 프레임워크와 차별화되는 점"이라고 말했다.

카카오는 카카오 ASI 구축 이후에도 AI 기술 개발과 운영 과정에서 발견되는 리스크를 신속하게 식별 및 대응하고, 지속적으로 체계 고도화를 이어갈 계획이다.

빠르게 변화하는 환경과 기술적 요구에 맞춰 체계를 정밀하게 점검해가고, AI 시스템의 신뢰와 안전성을 꾸준히 높여가기 위해 힘쓸 예정이다.  

카카오 ASI 구축에 관한 내용은 카카오 기업 홈페이지를 통해 발간중인 온라인 매거진 ‘Tech Ethics’를 통해서도 소개됐다. 카카오는 매월 기술 투명성 제고를 위해 주요 계열사의 기술을 ‘Tech Ethics’를 통해 알리고 있다.

김 리더는 "카카오 ASI는 지난 5월 개최된 ‘AI 서울 서밋’에서 선언한 ‘서울 AI 기업 서약'을 위한 실천에 해당한다. AI 윤리와 안전을 위해 다양한 선제적 노력을 이어온 카카오가 이번 ASI 구축을 통해 글로벌 환경에 부합하는 수준의 AI 리스크 관리 체계를 마련하고자 한다"며 "AI 기술의 영향력이 빠르게 확산되고 변화의 속도가 가속화되는 환경에 맞춰 안전한 AI 생태계 조성을 위한 협력을 이어갈 것이며, 카카오 ASI를 통해 윤리 기준을 선도해 갈 수 있도록 노력할 것"이라고 말했다.

황성완 기자 skwsb@smartfn.co.kr