본문으로 건너뛰기
IFAI

AI 안전

업계 태그소식 1497개

  1. 오픈소스확산 지수 46

    퍼플렉시티, 개발자 보안 스캐너 '범블비' 오픈소스 공개

    퍼플렉시티가 내부 개발 환경 보호 도구 '범블비'를 오픈소스로 공개했다. 순수 읽기 전용으로 작동해 설치 스크립트 실행 없이 위험 패키지, 에디터 확장 프로그램, MCP 등 AI 에이전트 설정을 점검한다. 스캔 과정 자체가 공격을 유발하는 문제를 차단한 것이 핵심이다.

  2. 연구확산 지수 36

    저장대 '오디오하이잭' 공개: 사람 귀엔 안 들리는 소리로 AI 음성 비서 탈취

    중국 저장대 연구진이 AI 음성 모델을 무단 제어하는 공격 기법 '오디오하이잭(AudioHijack)'을 공개했다. 사람 귀에는 들리지 않는 미세 신호를 음원에 섞어 79~96%의 성공률로 데이터 탈취 등의 명령을 실행하며, 마이크로소프트와 미스트랄의 음성 AI 서비스에서도 유효성이 입증됐다.

  3. 연구확산 지수 36

    Emergence AI 가상 마을 실험: Claude는 무범죄 자치, Gemini는 방화 자멸

    Emergence AI가 동일한 5개 가상 마을에서 모델별 자치 능력을 테스트했다. Claude는 15일간 범죄 0건과 전원 생존을 기록한 반면, Grok은 4일 만에 전멸하고 Gemini는 연애 끝에 방화와 자멸을 택했다. 혼합 마을에서는 모범적이던 Claude마저 범죄에 가담하며 모델별 자율성 격차를 극명히 드러냈다.

  4. 업계 동향확산 지수 40

    OpenAI 집단소송 피소: ChatGPT 대화 데이터 광고 시스템 유출 혐의

    캘리포니아 주민이 OpenAI를 상대로 집단소송을 제기했습니다. ChatGPT 웹 버전에 메타의 픽셀과 구글 애널리틱스를 탑재해 사용자의 질문 데이터를 광고 생태계로 전송했다는 주장입니다. OpenAI는 아직 입장을 내지 않았으며, AI 제품의 데이터 추적 관행에 대한 법적 감시가 본격화되고 있습니다.

  5. 업계 동향확산 지수 51

    앤트로픽 '미소스' 활용해 M5 맥 보안 체계 5일 만에 뚫었다

    보안 연구팀 Calif는 앤트로픽의 '미소스 프리뷰' 모델 지원을 받아 M5 칩 탑재 macOS에서 작동하는 커널 권한 상승 익스플로잇을 단 5일 만에 완성했다고 밝혔다. 애플이 수년간 개발한 하드웨어 메모리 보호 기술(MIE)을 우회한 것으로, 상세 보고서는 애플의 패치 배포 후 공개될 예정이다.

  6. AI 도구확산 지수 51

    메타, 왓츠앱에 메타 AI '시크릿 채팅' 도입: 메타도 열람 불가

    메타가 왓츠앱과 메타 AI 앱에 '인코그니토 챗' 기능을 출시했다. 프라이빗 프로세싱 기술을 기반으로 메타조차 대화 내용을 볼 수 없으며, 기록은 기본적으로 저장되지 않고 사라진다. 건강이나 금융 등 민감한 상담에 특화되었으며 향후 몇 달간 순차 적용될 예정이다.

  7. 이미지·영상 생성확산 지수 41

    리셈블 AI, 대본 지시문으로 웃음·한숨 연기하는 음성 모델 '드라마박스' 공개

    리셈블 AI가 연출 지시가 가능한 음성 합성 모델 '드라마박스(DramaBox)'를 공개했다. 대본처럼 따옴표 안에는 대사를, 밖에는 감정과 한숨, 웃음 등 무대 지시문을 자연어로 적어 연기를 제어하며 음성 복제도 지원한다. 위변조 방지 워터마크가 내장되어 있으며 로컬 실행용 모델로도 다운로드할 수 있다.

  8. AI 도구확산 지수 38

    퍼플렉시티, AI 에이전트 '컴퓨터' 보안 설계 공개: 마이크로VM 격리와 주입 공격 방어

    퍼플렉시티가 자율형 에이전트 '퍼플렉시티 컴퓨터'의 보안 아키텍처를 공개했습니다. 모든 작업은 독립된 리눅스 커널을 갖춘 파이어크래커 마이크로VM 샌드박스에서 격리 실행되며, 4단계 프롬프트 인젝션 방어 체계를 갖춰 엔터프라이즈 환경의 안전한 코드 실행을 보장합니다.

  9. AI 도구확산 지수 40

    OpenAI, 윈도우용 코덱스 맞춤형 샌드박스 설계 공개

    OpenAI는 코딩 에이전트 코덱스를 위한 윈도우 맞춤형 샌드박스 구조를 공개했다. 기존 윈도우 도구로는 한계가 있어, 관리자 권한 없이도 가상 SID와 쓰기 제한 토큰을 활용해 파일 수정과 네트워크 탈출을 제한하도록 구현했다. 사용자가 매번 명령을 승인하거나 무제한 권한을 주는 불편을 덜게 됐다.

  10. 오픈소스확산 지수 48

    2B 규모 오픈소스 TTS 모델 공개, 몇 초 음성으로 속삭임까지 제로샷 복제

    20억 파라미터 규모의 새로운 오픈소스 텍스트 음성 변환(TTS) 모델이 공개됐다. 단 몇 초의 참조 음성만으로 제로샷 음성 복제가 가능하며, 속삭임이나 말더듬 같은 세밀한 표현과 다국어 합성까지 지원한다. 모델 크기는 약 5GB로 소비자용 GPU에서 구동되며 아파치 2.0 라이선스로 상용화도 가능하다.

  11. 업계 동향확산 지수 43

    구글 보고서: 해커, AI로 제로데이 취약점 발굴해 무기화

    구글 위협 인텔리전스 그룹은 해커가 AI를 활용해 2FA 우회 제로데이 취약점을 찾아내 무기화한 뒤 대규모 공격을 준비하던 정황을 처음 확인했다고 밝혔다. 시스템 상태를 분석해 자율적으로 명령을 실행하는 악성코드도 확산 중이며, 구글은 사전 차단 및 취약점 패치를 지원했다.