카카오, 안전한 AI 시스템 구축 지침 마련…"지속 점검·고도화"

(서울=뉴스1) 손엄지 기자 = 카카오는 인공지능(AI) 기술 개발과 운영 과정에서 발생할 수 있는 리스크를 사전에 식별하고, 이를 관리하는 프로세스인 '카카오 AI 세이프 이니셔티브'(이하 카카오 ASI)를 구축했다.

카카오는 해당 내용을 지난 22일 열린 카카오 개발자 콘퍼런스 '이프카카오 2024' 첫날 세션에서 공개했다고 23일 밝혔다.

카카오 ASI는 AI 기술 개발과 운영 상의 위험 발생을 최소화하고 안전하고 윤리적인 AI 시스템을 구축하기 위한 종합 지침이다.

이를 통해 기술의 설계부터 개발, 테스트, 배포, 모니터링과 업데이트 등 AI 시스템의 전 생애주기에서 발생할 수 있는 리스크에 선제 대응이 가능하다.

AI와 인간이 초래할 수 있는 다양한 종류의 리스크를 폭넓게 관리하고, 인간의 부주의나 실수로 발생할 수 있는 영역까지 관리 범위를 포괄적으로 지정했다.

카카오 ASI는 △카카오 AI 윤리 원칙 △리스크 관리 사이클 △AI 리스크 거버넌스라는 3가지 핵심요소로 구성된다.

먼저 '카카오 AI 윤리 원칙'은 지난 2023년 3월 발표한 '카카오 그룹의 책임 있는 AI를 위한 가이드라인'을 기반으로 한다.

사회 윤리, 포용성, 투명성, 프라이버시, 이용자 보호 등 원칙을 포함한다. 개발자와 사용자를 대상으로 윤리적인 가이드라인을 제공한다.

'리스크 관리 사이클'은 리스크를 체계적으로 다루기 위한 접근법으로, 식별-평가-대응의 순환 단계로 구성된다.

AI 기술의 비윤리, 불완전 등을 최소화하고, 안전성과 신뢰성을 확보할 수 있는 핵심적인 역할을 한다.

'AI 리스크 거버넌스'는 AI 시스템의 개발, 배포, 사용 등을 관리하고 감독하는 의사 결정 체계를 뜻한다.

조직 내 정책, 절차, 책임 구조와 외부 규제와의 조화를 포함한다. 거버넌스 체계 내에서 관련 리스크들을 다각도로 검토하게 된다.

카카오 ASI 거버넌스는 AI 세이프티(Safety), 전사 리스크 관리 전담 조직인ERM 위원회, 최고 의사결정 기구의 3단계로 구성된다.

카카오 김경훈 AI Safety 리더는 "AI 시스템 이용에 따른 리스크의 발생 주체를 AI와 인간으로 구분했다"면서 "발생 주체 별 리스크의 특성을 반영해 평가하고 대응방안을 마련했다"고 설명했다.

카카오는 AI 기술 개발과 운영 과정에서 발견되는 리스크를 신속하게 대응하고 체계 고도화를 이어갈 계획이다.

김 리더는 "안전한 AI 생태계를 조성하고, 카카오 ASI를 통해 윤리 기준을 선도해 갈 수 있도록 노력할 것"이라고 말했다.

eom@news1.kr