AI 안전 다이제스트

2026-09-06 · 12건

🇨🇳 오픈 모델은 AI의 통일전선 (2026.9.6)

언론 · ChinaTalk · 🔓🚀

중국 오픈 모델의 성능이 빠르게 개선되면서 미국 폐쇄형 모델과의 격차가 좁혀지고 있으며, AI 경쟁은 일방적 패배가 아닌 장기전으로 전환됐다고 분석한다. K3와 Qwen 3.8 Max 등 오픈 모델은 비용과 접근성 측면에서 경쟁력을 확보했고, 특히 270억 개 매개변수의 Qwen 3.8은 소비자용 GPU에서도 실행할 수 있어 지능의 대중화를 앞당겼다고 평가한다. 다만 Grok 등 폐쇄형 모델도 빠르게 발전하고 있어 오픈 모델 진영의 우위가 확정된 것은 아니며, 국내 칩으로 학습·추론 전 과정을 수행하는 등 컴퓨팅의 국산화가 장기 경쟁의 핵심 과제로 제시된다.

🇰🇷 구글 어스의 롤백: 스푸트니크는 왜 나노 바나나가 되었나 (2026.9.6)

언론 · AI-Ethics-KR · 🛡️🧪

구글은 7월 30일 구글 어스에 생성형 AI 나노 바나나 2를 활용해 위성 이미지를 편집하는 기능을 추가했지만, 전쟁·재난 현장과 군사 시설 이미지가 조작될 수 있다는 우려가 제기됐다. 구글은 생성 이미지에 디지털 워터마크를 넣고 AI로 생성 여부를 확인할 수 있다고 설명했으나, 전문가와 언론은 구글 어스가 가진 위성 이미지의 객관성과 신뢰가 훼손될 수 있다고 지적했다. 구글은 안전장치를 강화하겠다며 발표 하루 만에 해당 기능을 철회했다.

🇺🇸 Zoe Lofgren 의원, FISA 감시와 수정헌법 제4조 논의 (2026.9.6)

언론 · TechPolicyPress · 🗳️

Zoe Lofgren 의원은 FISA 702가 해외 비미국인의 통신을 영장 없이 수집하는 데 유용하지만, 미국인의 통신도 데이터베이스에 포함돼 FBI 등이 영장 없이 검색할 수 있는 문제가 있다고 지적했다. 그는 과거 시위 참가자, 선거운동 기부자, 의원, 언론인 등의 통신이 부적절하게 검색됐다며, 미국인을 대상으로 데이터베이스를 조회할 때는 영장을 요구해야 한다고 주장했다. FISA 702의 만료 시한은 지났지만 기존 감시 명령은 2027년 초까지 이어질 수 있으며, 관련 개혁안은 의회에서 다시 논의될 전망이다.

🇺🇸 버지니아, 확인된 위험에 대응해 AI 챗봇 규제 검토 (2026.9.6)

언론 · TechPolicyPress · ⚖️🧒

버지니아 총회의 기술·과학 공동위원회(JCOTS)는 AI 챗봇과 미성년자 관련 법안이 회기 중 무산된 뒤, 챗봇 사용으로 인한 피해를 줄일 정책 방안을 검토하는 보충 보고서를 마련했다. 해당 법안들은 연방정부의 AI 규제 접근과 주정부의 부담스러운 규제에 대한 제재 우려, 특히 BEAD broadband funding 철회 가능성 때문에 추진되지 못했다. 보고서는 자살, 망상적 악화 등 챗봇과 관련된 사례가 공론화된 가운데, ‘companion chatbot’이라는 제품 분류보다 챗봇의 설계와 행동, 이용자와의 감정적 상호작용을 중심으로 규제 필요성을 살펴본다.

🇪🇺 이번 노동절, 채용에 미치는 AI의 영향을 생각하다 (2026.9.6)

언론 · TechPolicyPress · ⚖️🎭

뉴스레터는 AI 채용 도구가 설명하기 어려운 이유로 자격을 갖춘 지원자를 탈락시킬 수 있으며, 차별적 영향에 관한 법률 약화가 문제를 악화시킬 수 있다고 전한다. 또한 AI 동반자 챗봇 규제, 학교 내 AI 사용 제한, 유럽연합의 ChatGPT·Roblox 대형 플랫폼 지정, 독일의 이민·난민 절차 AI 활용과 관련한 권리·편향 우려를 다룬다. EU AI Act의 투명성 규정은 8월 2일부터 시행됐으며, 뉴스레터는 Meta 합의, Google 광고기술 반독점 구제조치, 허위정보와 이주 문제 등 기술 정책 현안도 소개한다.

뉴욕, 초·중학교 AI 사용 금지…“어떤 챗봇도 성장·고민 재현할 수 없다” (2026.9.6)

언론 · 미디어오늘

뉴욕시는 가을 새 학기부터 공립 초등학교와 중학교에서 1년간 AI 도구 사용을 금지하고, 초등학교 3학년까지 개인용 모니터가 있는 전자기기 사용도 제한한다. 중학생의 화면 기기 사용은 하루 45분 이내로 제한되며, 교사의 채점 목적 AI 활용도 금지된다. 고등학생은 일부 AI 도구만 제한적으로 사용할 수 있고, 모든 고등학생에게 AI 리터러시 교육이 제공된다.

🇨🇳 데이터센터 건설을 둘러싸고 엇갈린 트럼프 행정부의 AI 정책 (2026.9.6)

언론 · 경향신문 · 🗳️

트럼프 대통령과 밴스 부통령은 데이터센터 건설 확대에는 공감했지만, AI의 위험성과 사회·영적 영향에 대해서는 상반된 발언을 내놨다. 트럼프 행정부는 AI를 경제성장과 대중국 경쟁의 핵심 수단으로 보고 있으나, 데이터센터의 고용 효과가 제한적인 반면 전력·물 소비가 크다는 지적이 나오며 반대 여론이 커지고 있다. 데이터센터 문제가 11월 중간선거의 쟁점으로 떠오르면서 행정부 내부의 정책적·정치적 딜레마도 부각되고 있다.

🇰🇷 정부, AI 예산 9.4조원 투입해 보안·전 국민 서비스 추진 (2026.9.6)

언론 · 천지일보 · 🔒

과학기술정보통신부는 2027년도 AI 관련 예산을 전년보다 84.3% 늘린 9조4211억원으로 편성하고, 기술 자립과 국가 AI 서비스 확대를 추진한다. 네이버클라우드가 주도하고 32개 기관이 참여하는 컨소시엄은 네이버와 LG의 AI 모델을 기반으로 700B 규모의 사이버 보안 특화 AI를 개발하며, 정부는 GPU B200 256장을 지원한다. 또한 SK텔레콤·KT·카카오 컨소시엄이 참여하는 ‘모두의 AI’에 2500억원을 투입해 12월 대국민 서비스 출시를 목표로 하고, 약 1000만 명이 국산 AI를 무료로 이용할 수 있도록 엔비디아 B200 약 2000장 규모의 임차 비용도 지원한다.

LLM이 구동하는 기업 서비스 워크플로의 안전성 평가 벤치마크 JailFlowEval (2026.9.6)

연구 · 🧪

JailFlowEval은 단일 대화가 아니라 기업 업무 흐름을 따라 유해한 의도가 이어지는 위험을 평가하는 벤치마크다. plan, exec, review, improve 네 가지 워크플로 맥락에서 유해 의도를 단계별 기록으로 만들고, 744개의 평가 기록을 구축했다. 10개 모델을 평가한 결과, workflow-aware 하위 과제가 prompt-level 평가에서 포착하지 못한 unsafe continuation risks를 드러냈으며, 모델과 평가 지표에 따라 가장 위험한 워크플로 단계가 달랐다.

충돌 스냅샷 기반 시간 역방향 안전 핵심 시나리오 생성 (2026.9.6)

연구 · 🦾

자율주행 차량의 훈련과 평가를 위해 더 현실적이고 다양한 안전 핵심 교통 시나리오를 생성하는 COSTER를 제안한다. 교통 사전 지식으로 충돌 시점과 위치를 정한 뒤 새 차량을 목표 차량과 접촉한 상태로 삽입하고, 조건부 변분 오토인코더로 삽입 차량의 궤적을 시간 역방향으로 복원한다. COSTER는 기존 방법보다 시나리오의 현실성, 다양성, 데이터 효율성에서 우수했다. COSTER로 생성한 시나리오를 학습한 에이전트는 Waymo Open Motion Dataset의 안전 핵심 시나리오에서 충돌률을 31% 낮추면서 ego task completion도 향상했다.