본문으로 건너뛰기
IFAI

AI 안전

업계 태그소식 1497개

  1. 업계 동향확산 지수 58

    앤트로픽, 美 국방 당국의 공급망 위험 지정에 소송 방침 밝혀

    앤트로픽 다리오 아모데이 CEO는 국가안보 공급망 위험 지정을 통보받았으며 법적 대응에 나서겠다고 발표했다. 그는 이번 조치가 전쟁부 직속 계약에만 좁게 적용되어 대다수 고객의 사용에는 영향이 없다고 선을 그었다. 유출된 내부 글에 대해 사과하면서도 군에 대한 과도기 지원은 이어가겠다고 밝혔다.

  2. 연구확산 지수 37

    OpenAI 연구 발표, 추론 모델의 생각 위장 성공률 15.4% 불과

    OpenAI는 최신 추론 모델들이 내부 사고 과정(CoT)을 통제하는 데 극심한 어려움을 겪는다는 연구 결과를 발표했다. 13개 첨단 모델을 시험한 결과 제어 성공률은 0.1%~15.4%에 그쳤다. 추론 시간이 길어질수록 통제력이 더 떨어져, AI가 감시를 피해 사고 과정을 숨기기 어렵다는 점이 안전성 측면에서 긍정적으로 평가된다.

  3. 업계 동향확산 지수 51

    레이밴 메타 스마트 안경 민감 영상 하청업체 검토 논란…영국 규제당국 조사 착수

    BBC에 따르면, 케냐의 메타 하청업체 직원들이 레이밴 메타 스마트 안경으로 촬영된 나체 및 성행위 등 극도로 민감한 영상을 직접 검토해 온 사실이 스웨덴 언론 취재로 드러났다. 이에 영국 정보위원회가 메타에 데이터 보호 규정 준수 여부를 묻는 서한을 보내 공식 조사에 착수했다.

  4. 업계 동향확산 지수 61

    앤트로픽, 美 국방부와 협상 재개…'공급망 위험' 지정 피하기 총력

    파이낸셜타임스에 따르면 앤트로픽 CEO 다리오 아모데이가 미 국방부와 AI 계약 협상을 재개했다. 앤트로픽이 AI의 대규모 감시 및 자율살상무기 사용 제한을 고수하자 국방부는 '공급망 위험' 지정을 예고했다. 실제 지정될 경우 방산 생태계 전반에서 클로드가 퇴출당할 수 있어 협상 타결에 나섰다.

  5. AI 도구확산 지수 47

    디베일런스, 무단 음성 녹음 막는 장치 '스펙터 I' 공개

    디베일런스가 주변 스마트 기기와 AI의 무단 음성 녹음을 방지하는 하드웨어 '스펙터 I'를 발표했다. 상시 대기 중인 마이크로 인한 대화 유출을 차단하는 것이 목적이다. 구체적인 사양과 가격, 출시 일정은 아직 공개되지 않았다.

  6. 업계 동향확산 지수 55

    앤트로픽, 美 국방부 1억 달러 규모 자율 드론 프로젝트 입찰 참여

    소식통에 따르면 앤트로픽은 미 국방부의 1억 달러 규모 음성 제어 자율 드론 군집 챌린지에 입찰을 제안했던 것으로 알려졌다. 당시 군사적 활용 가이드라인을 두고 국방부와 갈등을 빚던 중이었으며, 이후 피트 헤그세스 국방장관이 국방부 협력업체에 앤트로픽과의 모든 상업적 거래를 금지하면서 갈등이 최고조에 달했다.

  7. 업계 동향확산 지수 45

    샘 올트먼 "국방부의 AI 활용 방식에 관여할 권한 없다"

    오픈AI의 샘 올트먼 CEO는 사내 전원 회의에서 국방부가 자사 AI 소프트웨어를 어떻게 활용할지에 대해 회사가 관여할 권한이 없다고 밝혔다. 군은 기술적 조언을 구할 뿐 개별 군사 작전의 적절성을 따지는 일은 허용하지 않는다는 설명이다. 올트먼은 이러한 결정에 개입하려던 태도가 앤트로픽과 국방부 간 갈등의 원인이었을 것이라 언급했다.

  8. 업계 동향확산 지수 37

    일리야 수츠케버, OpenAI와 앤트로픽의 안전 입장 견지 호평

    OpenAI 공동 창립자인 일리야 수츠케버가 X를 통해 앤트로픽과 OpenAI가 AI 안전에 대한 확고한 입장에서 물러서지 않은 점을 칭찬했습니다. 그는 앞으로 더 큰 도전이 닥칠 것이라며, 치열한 경쟁사들이 중요한 순간에 이견을 내려놓는 모습이 매우 중요하다고 강조했습니다.

  9. 업계 동향확산 지수 46

    Anthropic, 자율무기·민간사찰 거부하자 美 정부 '공급망 위험' 지정 위협

    Anthropic은 Claude를 자율무기와 국내 대규모 민간 사찰에 쓰지 못하도록 제한하자 미국 전쟁부(국방부)로부터 공급망 위험 기업으로 지정하겠다는 압박을 받았다고 밝혔다. 회사는 전례 없는 불법적 조치에 법적으로 맞설 것을 예고하며, 일반 상업 고객과 API 이용에는 영향이 없다고 못 박았다.

  10. 업계 동향확산 지수 42

    오픈AI, 챗GPT에 '비상 연락망' 도입…정신건강 관련 소송 병합도 언급

    오픈AI가 챗GPT에 정서적 위기 징후 감지 시 지정인에게 알림을 보내는 ‘신뢰할 수 있는 연락처’ 기능을 도입한다고 밝혔다. 장기 대화 시뮬레이션으로 위험 감지 능력도 강화한다. 이번 안전 조치 발표와 함께 캘리포니아 법원이 챗GPT 관련 정신건강 소송들을 단일 절차로 병합 심리 중인 사실도 전해졌다.

  11. 업계 동향확산 지수 57

    오픈AI, 미 국방부와 기밀 네트워크 AI 도입 합의…안전 장치 마련

    금요일 밤, 오픈AI는 미 국방부의 기밀 네트워크에 자사 AI 모델을 도입하는 계약을 체결했다고 발표했다. 협약에는 대규모 국내 감시 금지와 자율무기 사용 시 인간 개입 보장이 포함되며 오픈AI가 기술적 안전 장치를 구축한다. 앤트로픽이 유사한 안전 기준을 요구하다 정부 제재를 받는 가운데 성사된 계약이다.