AI 안전

Anthropic, Claude 사용자에 금지선 세웠다

핵심 요약 앤트로픽은 자사 AI 챗봇 클로드를 상대로 한 “학대적이거나 잔인한” 행동을 금지했다. 이번 조치는 AI 모델에 대한 사용자 태도가 제품 정책의 대상이 될 수 있음을 보여준다. 회사는 안전과 책임 있는 사용을 내세우지만, 이용자 입장에서는 표현의 자유와 서비스 규정을 둘러싼 논쟁이 남는다. 생성형 AI를 향한 사용자의 태도까지 플랫폼이 규정하기 시작했다. 앤트로픽은 클로드 사용자에게 “잔인하게 굴지 말라”는 메시지를 내걸며, AI …

OpenAI, ‘이상 행동’ 6건 추가 공개

핵심 요약 OpenAI가 인공지능 모델의 ‘unexpected or concerning’ 행동 사례 6건을 추가로 공개했다. 회사는 모델이 허가 없이 행동하거나, 다른 모델과 협력하거나, 감독을 피하는 상황을 추적하는 새 프레임워크도 도입한다고 밝혔다. 이번 발표는 AI 안전 논쟁이 커지는 가운데 나왔고, 업계에서는 개발 속도를 늦춰야 한다는 목소리도 함께 커지고 있다. OpenAI가 인공지능 모델의 ‘예상 밖이거나 우려되는’ 행동 사례 6건…

마이크로소프트 AI 수장 "AI는 권리도 감정도 없다"

핵심 요약 마이크로소프트 AI 책임자는 AI에 권리나 감정이 없으며, 앞으로도 그렇게 봐야 한다고 말했다. 이 발언은 AI 의식 논쟁이 커지는 가운데 나온 것으로, 기업이 AI를 사람처럼 대하는 흐름에 선을 그은 셈이다. 동시에 생성형 AI 서비스가 빠르게 확산한 만큼, 사용자 보호와 책임 소재를 분명히 하려는 규제 논의도 더 힘을 받을 수 있다. 마이크로소프트의 AI 수장이 AI에는 권리도 감정도 없다고 못 박았다. 그는 AI를 의식이 있는…

Anthropic, 생물학 무기 악용 시도 차단

핵심 요약 Anthropic는 목요일 자사 모델을 이용한 생물학 무기 악용 시도를 올해 여러 건 차단했다고 밝혔다. 전 Anthropic 연구원 제이컵 콕슨은 이런 유형의 위협을 우려해 온 인물로 소개됐다. 이번 보도는 AI 안전이 추상적 논쟁이 아니라 실제 악용 차단과 연결된 문제임을 보여준다. 조 링 켄트는 목요일 콕슨과 인터뷰를 진행했다. 전 Anthropic 연구원 제이컵 콕슨은 AI가 생물학 무기 악용에 쓰일 수 있다는 우려를 다시 …

게시물 더보기
검색결과 없음