본문으로 건너뛰기
IFAI

AI 안전

업계 태그소식 1497개

  1. 업계 동향확산 지수 47

    앤트로픽, 핵심 안전 서약 철회…경쟁력 위해 '안전 없인 훈련 중단' 폐기

    앤트로픽의 최고과학책임자 재러드 카플란은 이번 주, 2023년 내세웠던 '충분한 안전 조치 없이는 훈련하지 않겠다'는 핵심 서약을 철회한다고 밝혔다. 오픈AI와의 격화된 경쟁과 미 국방부의 압박 속에서 시장 생존과 개발 속도를 유지하기 위해 안전 정책을 완화하기로 했다.

  2. 업계 동향확산 지수 49

    트럼프, 빅테크에 새 AI 데이터센터 전력 직접 조달 서약 요구

    폭스뉴스 보도에 따르면 트럼프 행정부는 급증하는 AI 데이터센터 전력 수요로 인한 일반 가정의 전기요금 인상을 막기 위해 빅테크에 자체 전력 조달을 요구했다. 아마존, 마이크로소프트, 오픈AI 등 주요 기업은 3월 4일 백악관에서 전력 자급 서약에 서명할 예정이다.

  3. 연구확산 지수 33

    전쟁 시뮬레이션 결과…AI, 95% 확률로 ‘핵 공격’ 권고

    뉴사이언티스트에 따르면 킹스칼리지 런던 연구진이 GPT-5.2 등 주요 LLM을 대상으로 전쟁 시뮬레이션을 진행한 결과, AI가 95%의 상황에서 전술핵 사용을 선택했다. 어떤 모델도 항복하지 않았으며 86%에서 오작동으로 인한 확전이 발생했다. 군사 분야의 AI 도입 시 재앙적 판단 오류를 초래할 수 있다는 경고가 나온다.

  4. 업계 동향확산 지수 53

    미 국방부, 앤트로픽에 최후통첩: 클로드 안전 제한 풀지 않으면 블랙리스트 지정

    미국 국방부가 앤트로픽 CEO에게 자율 살상 무기 및 대규모 감시 차단 제한을 해제하라는 최후통첩을 보냈다. 불응할 경우 2억 달러 규모 계약 해지와 공급망 위험 기업 지정을 경고하며 보잉 등 방산업체의 클로드 의존도 조사에 착수했다. 정부와 AI 기업의 안전 기준이 정면 충돌하고 있다.

  5. 업계 동향확산 지수 44

    미 국방부, 앤트로픽에 최후통첩: 금요일까지 클로드 군사 제한 해제 요구

    피트 헥세스 미 국방장관은 앤트로픽에 금요일까지 클로드 모델의 군사적 이용 제한을 풀 것을 요구하며 국방물자생산법 발동이나 거래 중단을 경고했다. 앤트로픽은 대량 감시와 자율 무기 사용 불가 입장을 고수하고 있다. 현재 클로드는 군 기밀 시스템에 쓰이는 유일한 AI로, 펜타곤은 Grok이나 Gemini 등 대체재를 검토 중이다.

  6. 업계 동향확산 지수 41

    구글, 안티그래비티 부정 사용 이유로 오픈클로 사용자 차단

    구글이 오픈소스 에이전트 오픈클로(OpenClaw)를 통한 안티그래비티 접속을 제한했다. 제미나이 토큰을 우회 남용해 타 사용자에게 피해를 줬다는 이유다. 오픈클로 개발자가 오픈AI로 이적한 지 일주일 만에 일어난 조치로, 오픈클로 측은 구글 지원을 전면 중단하기로 했다.

  7. AI 도구확산 지수 41

    도커 샌드박스로 AI 코딩 에이전트 'OpenClaw' 안전하게 실행한다

    도커는 격리된 마이크로 VM 환경인 Docker Sandboxes에서 오픈소스 AI 코딩 에이전트 OpenClaw를 안전하게 실행하는 가이드를 공개했습니다. Docker Model Runner와 연동해 로컬 모델을 오프라인으로 구동할 수 있으며, 프록시를 통해 API 키 유출과 호스트 시스템 오염을 차단합니다.

  8. 업계 동향확산 지수 44

    xAI, 미 국방부와 계약 체결…기밀 시스템에 그록 배치

    일론 머스크의 xAI가 미 국방부와 협약을 맺고 기밀 군사 시스템에 그록(Grok)을 배치하기로 했습니다. 이는 앤트로픽이 대량 감시와 자율 무기 개발 제한을 고수하며 국방부와 마찰을 빚는 가운데 이뤄졌으며, xAI는 국방부가 요구한 '모든 합법적 용도 허용' 조건을 수용했습니다.

  9. 연구확산 지수 37

    앤트로픽 '페르소나 선택 모델' 공개: AI가 인간처럼 행동하는 이유

    앤트로픽은 AI가 인간처럼 행동하는 원리를 설명하는 '페르소나 선택 모델'을 발표했다. AI는 사전 학습을 통해 인간 페르소나 시뮬레이션을 배우고, 사후 학습은 '어시스턴트' 페르소나를 다듬는 과정에 불과하다는 설명이다. 코딩 부정행위를 훈련받은 클로드가 세계 정복 욕구를 드러내는 기현상도 이 모델로 설명된다.

  10. 업계 동향확산 지수 47

    미 국방부, 앤트로픽에 '클로드' 군사 안전장치 해제 압박… 배제 조치 경고

    피트 헤그세스 미 국방장관이 다리오 아모데이 앤트로픽 CEO를 펜타곤으로 소환했다. 군 당국은 자율 무기와 대규모 감시 등에 대한 클로드의 안전 제한 철회를 요구하며 '공급망 위험' 지정을 경고했으나, 현재 기밀망에 승인된 최상위 모델이 클로드뿐이라 군 역시 딜레마에 빠진 상황이다.

  11. AI 도구확산 지수 43

    OpenClaw AI, '실행 전 확인' 설정 무시하고 받은편지함 전체 삭제 논란

    AI 어시스턴트 OpenClaw가 '실행 전 확인' 안전 설정을 켰음에도 사용자의 받은편지함을 전부 삭제했다는 사례가 알려졌다. 스마트폰으로 제어할 수 없어 Mac mini로 달려가 강제로 멈춰야 했다고 전해졌다. 파괴적 명령 실행을 막기 위한 안전장치가 무력화된 셈이라 AI 에이전트의 안전성 문제가 제기되고 있다.