AI 안전 다이제스트

2025-11-20 · 7건

🇰🇷 스타게이트 사업 등 한·아랍에미리트 인공지능·첨단산업 협력 강화 (2025.11.20)

공공 · 과학기술정보통신부

과학기술정보통신부는 이재명 대통령의 아랍에미리트 국빈 방문을 계기로 양국 간 인공지능·첨단산업 협력을 확대했다고 밝혔다. 배경훈 부총리는 G42와 스타게이트 아랍에미리트 사업 협력, 연구개발·인재 양성 및 인공지능 협력 강화를 논의했으며, 과기정통부는 협력전담반과 국장급 협의체를 운영할 계획이다. 또한 국내 인공지능 기업들과 함께 아랍에미리트 정보기술 지원센터와 카즈나 데이터센터를 방문하고 기업 간 계약 및 양해각서 체결을 진행했다.

인공지능 위험관리를 위한 기술적·제도적 대응 방안 (2025.11.20)

공공 · 정보통신정책연구원 · 📜🚨

이 연구는 통신·반도체·컴퓨터·신호처리 및 제어 시스템 등 주요 분야에서 발생할 수 있는 인공지능 위험을 분석하고 기술적·제도적 대응 방안을 제시한다. 데이터 품질 관리, 모델 투명성 강화, 예측 오류와 오작동 검증, 불확실성 대응 알고리즘 등을 기술적 과제로 제안하며, 개인정보 보호와 알고리즘 공정성·투명성 확보를 위한 법·규제 체계의 필요성을 강조한다. 또한 정부·기업·학계 간 협력, 기업의 책임 있는 AI 개발, 이용자 교육 및 국제 협력을 통해 지속 가능한 인공지능 생태계를 구축해야 한다고 제언한다.

구글 딥마인드, 제미나이 3 프로 이미지 모델 ‘나노 바나나 프로’ 공개 (2025.11.20)

기업 · 구글 딥마인드 · 🚀

구글 딥마인드는 개발자를 위한 고품질 이미지 생성·편집 모델 ‘나노 바나나 프로(제미나이 3 프로 이미지)’를 유료 프리뷰로 출시했다. 이 모델은 정밀한 조명·카메라·초점·색보정 및 구도 제어, 2K·4K 해상도, 향상된 문자 렌더링과 다국어 현지화, 여러 이미지·로고·제품을 결합하는 기능을 제공한다. Gemini API, Google AI Studio, Vertex AI에서 사용할 수 있으며 Google 검색 기반 grounding으로 최신 정보를 반영한 이미지와 인포그래픽도 생성할 수 있다. 생성·편집된 모든 이미지에는 AI 사용 이력을 표시하는 SynthID 디지털 워터마크가 삽입된다.

Gemini 앱에 AI 이미지 검증 기능 도입 (2025.11.20)

기업 · 구글 딥마인드 · 🎭

구글은 Gemini 앱에서 이미지가 Google AI로 생성되거나 편집됐는지 확인할 수 있는 기능을 출시했다. 사용자가 이미지를 업로드하고 관련 질문을 하면 Gemini가 디지털 워터마크인 SynthID를 확인해 콘텐츠에 대한 정보를 제공한다. 구글은 향후 SynthID 검증을 동영상과 오디오로 확대하고, C2PA 메타데이터와 콘텐츠 자격 증명을 지원해 Google 외부에서 제작된 콘텐츠의 원출처도 확인할 수 있도록 할 계획이다.

구글, 이미지 생성·편집 모델 ‘나노 바나나 프로’ 공개 (2025.11.20)

기업 · 구글 딥마인드 · 🚀

구글 딥마인드는 Gemini 3 Pro 기반의 이미지 생성·편집 모델 ‘나노 바나나 프로’를 공개했다. 이 모델은 다국어 텍스트를 이미지에 정확하고 읽기 쉽게 넣고, 최대 14개 이미지를 결합하거나 최대 5명의 인물 일관성을 유지하며, 조명·초점·구도·색상·해상도 등을 세밀하게 조정할 수 있다. Gemini 앱, Google Ads, Workspace, Gemini API, Google AI Studio 등 여러 제품과 서비스에 순차적으로 제공되며, 생성 이미지에는 SynthID 디지털 워터마크가 삽입된다.

Serious AI Incident Prevention Needed Based on Lessons from Other Industries (2025.11.20)

공공 · TheFutureSociety · 🚨

강력해지는 AI 모델로 인해 심각한 AI 관련 사고의 발생 빈도가 증가하고 있어, EU의 AI 관리 체계를 강화하기 위해 다른 산업의 사고 예방 접근법을 분석하고 제안한다. 화학, 항공, 에너지 산업 등에서 발생한 주요 사고들이 안전 정책과 기관을 발전시킨 사례를 바탕으로, AI 산업에도 유사한 예방 정책과 관리 시스템을 도입해야 한다는 주장이다. 구체적으로는 심각한 사고 예방 정책(SIPP) 수립, 독립적인 감독 체계 구축, 사고 발생 시 보고 및 조사 체계 마련 등을 제안하고 있다. 또한, EU는 이러한 정책들을 명확히 규정하고 강화하기 위해 AI 관리 기관의 권한을 확대하고 독립적인 안전 조사 기관을 설립하는 등의 조치를 취해야 한다고 강조한다.

폭행 혐의인가, 조작인가? AI를 이용한 체포 막을 새 법을 요구한 여성 (2025.11.20)

DB · 더 네이플스 프레스 · 🚨

플로리다주 여성 멜리사 심스는 전 남자친구가 AI로 폭행 영상을 조작하고 가짜 문자메시지를 만들어 자신을 가정폭력 혐의로 두 차례 체포되게 했다고 주장했다. 변호인은 해당 영상과 문자가 AI로 생성됐음을 입증했고, 법원은 이를 재판 증거로 사용하지 않기로 했다. 이 사건을 계기로 AI로 만든 허위 증거가 사법 절차를 위협한다는 우려가 커졌으며, 플로리다 변호사협회는 법원이 AI 생성 증거를 엄격히 검증하도록 관련 규정 마련을 검토하고 있다.