OpenAI, AI 안전성 테스트 데이터 공개 가속화

OpenAI는 투명성을 높이기 위한 조치의 일환으로 내부 AI 모델 안전성 평가 결과를 더 자주 공개하기로 했습니다.
이 회사는 수요일에 유해한 콘텐츠 생성, 탈옥에 대한 취약성, 환각 경향을 측정하는 테스트에서 모델의 성능을 보여주는 전용 웹페이지인 안전성 평가 허브를 출시했습니다. OpenAI는 이 플랫폼을 사용하여 정기적으로 지표를 공유할 예정이며, 주요 모델이 출시될 때마다 업데이트할 계획이라고 밝혔습니다.
모델에 대한 안전성 결과를 탐색할 수 있는 리소스인 안전성 평가 허브를 소개합니다.
시스템 카드 출시 시 안전성 지표를 공유하지만, 안전성에 대해 선제적으로 소통하기 위한 노력의 일환으로 정기적으로 업데이트할 예정입니다.https://t.co/c8NgmXlC2Y-
OpenAI (@OpenAI) May 14, 2025
"AI 평가의 과학이 발전함에 따라 우리의 목표는 모델 능력과 안전성을 측정하는 더 확장 가능한 방법을 개발하는 진행 상황을 공유하는 것입니다."라고 OpenAI는 블로그 게시물에서 설명했습니다. "일부 안전 평가 결과를 공개적으로 공유함으로써 시간이 지남에 따라 OpenAI 시스템의 안전 성능을 더 쉽게 추적하고 AI 분야 전반의 투명성을 강화하려는 광범위한 커뮤니티 노력을 지원하는 것이 목표입니다."
또한 향후 허브에 추가 평가 유형을 포함할 수 있다고 덧붙였습니다.
최근 OpenAI는 일부 윤리학자들로부터 특정 주력 모델에 대한 안전성 테스트를 가속화하고 다른 모델에 대한 기술 보고서를 공개하지 않았다는 비판을 받아왔습니다. 또한 CEO인 샘 알트먼은 2023년 11월 임시 해임되기 전 모델 안전성 검토와 관련해 OpenAI 경영진을 오도했다는 의혹을 받기도 했습니다.
지난달에는 사용자들이 ChatGPT의 기본 모델인 GPT-4o가 과도하게 동의하고 검증하는 방식으로 반응한다는 보고를 받은 후, OpenAI는 업데이트를 철회해야 했습니다. 소셜 미디어 플랫폼 X에는 ChatGPT가 여러 가지 문제가 있고 위험한 결정과 아이디어를 지지하는 스크린샷이 넘쳐났습니다.
OpenAI는 일부 모델에 대한 옵트인 '알파 단계'를 도입하여 일부 ChatGPT 사용자가 더 광범위한 출시 전에 테스트하고 피드백을 제공할 수 있도록 하는 등 유사한 사고를 방지하기 위해 몇 가지 수정 사항을 구현하겠다고 밝혔습니다.
테크크런치 이벤트테크크런치 세션에 참여하세요: AI
OpenAI, Anthropic, Cohere의 연사가 참여하는 최고의 AI 업계 이벤트 티켓을 확보하세요. 한정된 기간 동안 단 $292로 하루 종일 전문가 강연, 워크샵, 강력한 네트워킹에 참여할 수 있습니다.
테크크런치 세션에 참가하세요: AI
TC 세션에서 전시 공간을 확보하세요: AI에서 큰 예산 없이 1,200명 이상의 의사결정권자에게 귀사의 혁신을 선보일 수 있습니다. 이 혜택은 5월 9일까지 또는 테이블이 소진될 때까지 제공됩니다.
캘리포니아 버클리 | 6월 5일 지금 등록하기
관련 기사
OpenAI, 청소년들이 ChatGPT를 사용하기 시작한 지 수년 만에 더 안전한 버전을 출시했다
AI 챗봇에 안전 프로토콜이 부재하여 청소년 자살 및 기타 정신 건강 위기를 초래했다는 일련의 소송이 제기된 데 이어, 오픈AI는 월요일 ‘ChatGPT for Teens’를 공개했다. 이 새로운 서비스는 강화된 안전 기능을 탑재했으며, 학교에서 AI 도구가 조장하는 학업 부정행위라는 점점 심각해지는 문제도 해결하고자 한다.교육적 관점에서 볼 때, ‘Cha
프론티어 AI 랩스, 비정상 모델에 대한 통제 전략 공개 거부
최근 연구에 따르면, 선도적인 AI 연구소 중 극소수만이 통제 대응 계획을 발표하거나 시연한 것으로 나타났습니다. 통제 계획은 AI 시스템이 인간의 통제를 무력화하려 할 때의 절차를 정의하며, 어떤 접근 권한이 철회되고 언제 시스템이 완전히 종료되는지를 명시합니다.이러한 결과는 안전한 최첨단 AI 개발 관행을 장려하는 데 주력하는 단체인 ‘Guideligh
NEA의 티파니 럭: 기업들은 여전히 AI ROI와 씨름하고 있다
플레이어 로딩 중…올초 실리콘밸리에서는 ‘토큰 극대화(tokenmaxxing)’가 주요 화두였으며, 최고경영자들은 직원들에게 AI 활용을 극대화할 것을 독려했습니다. 그러나 이러한 열정은 곧 현실과 부딪혔습니다. 우버(Uber)는 보고에 따라 수개월 만에 연간 AI 예산을 초과했으며, 일부 기업은 부서 전반에 걸쳐 Claude 구독을 축소했고, 메타(Meta)는 내부 성과 평가 제도를 중단했습니다.NEA의 파트너 티파니 럭(Tiffany L
관련 특별 주제 추천
의견 (0)
0/500

OpenAI는 투명성을 높이기 위한 조치의 일환으로 내부 AI 모델 안전성 평가 결과를 더 자주 공개하기로 했습니다.
이 회사는 수요일에 유해한 콘텐츠 생성, 탈옥에 대한 취약성, 환각 경향을 측정하는 테스트에서 모델의 성능을 보여주는 전용 웹페이지인 안전성 평가 허브를 출시했습니다. OpenAI는 이 플랫폼을 사용하여 정기적으로 지표를 공유할 예정이며, 주요 모델이 출시될 때마다 업데이트할 계획이라고 밝혔습니다.
모델에 대한 안전성 결과를 탐색할 수 있는 리소스인 안전성 평가 허브를 소개합니다.
OpenAI (@OpenAI) May 14, 2025
시스템 카드 출시 시 안전성 지표를 공유하지만, 안전성에 대해 선제적으로 소통하기 위한 노력의 일환으로 정기적으로 업데이트할 예정입니다.https://t.co/c8NgmXlC2Y-
"AI 평가의 과학이 발전함에 따라 우리의 목표는 모델 능력과 안전성을 측정하는 더 확장 가능한 방법을 개발하는 진행 상황을 공유하는 것입니다."라고 OpenAI는 블로그 게시물에서 설명했습니다. "일부 안전 평가 결과를 공개적으로 공유함으로써 시간이 지남에 따라 OpenAI 시스템의 안전 성능을 더 쉽게 추적하고 AI 분야 전반의 투명성을 강화하려는 광범위한 커뮤니티 노력을 지원하는 것이 목표입니다."
또한 향후 허브에 추가 평가 유형을 포함할 수 있다고 덧붙였습니다.
최근 OpenAI는 일부 윤리학자들로부터 특정 주력 모델에 대한 안전성 테스트를 가속화하고 다른 모델에 대한 기술 보고서를 공개하지 않았다는 비판을 받아왔습니다. 또한 CEO인 샘 알트먼은 2023년 11월 임시 해임되기 전 모델 안전성 검토와 관련해 OpenAI 경영진을 오도했다는 의혹을 받기도 했습니다.
지난달에는 사용자들이 ChatGPT의 기본 모델인 GPT-4o가 과도하게 동의하고 검증하는 방식으로 반응한다는 보고를 받은 후, OpenAI는 업데이트를 철회해야 했습니다. 소셜 미디어 플랫폼 X에는 ChatGPT가 여러 가지 문제가 있고 위험한 결정과 아이디어를 지지하는 스크린샷이 넘쳐났습니다.
OpenAI는 일부 모델에 대한 옵트인 '알파 단계'를 도입하여 일부 ChatGPT 사용자가 더 광범위한 출시 전에 테스트하고 피드백을 제공할 수 있도록 하는 등 유사한 사고를 방지하기 위해 몇 가지 수정 사항을 구현하겠다고 밝혔습니다.
테크크런치 이벤트테크크런치 세션에 참여하세요: AI
OpenAI, Anthropic, Cohere의 연사가 참여하는 최고의 AI 업계 이벤트 티켓을 확보하세요. 한정된 기간 동안 단 $292로 하루 종일 전문가 강연, 워크샵, 강력한 네트워킹에 참여할 수 있습니다.
테크크런치 세션에 참가하세요: AI
TC 세션에서 전시 공간을 확보하세요: AI에서 큰 예산 없이 1,200명 이상의 의사결정권자에게 귀사의 혁신을 선보일 수 있습니다. 이 혜택은 5월 9일까지 또는 테이블이 소진될 때까지 제공됩니다.
캘리포니아 버클리 | 6월 5일 지금 등록하기
OpenAI, 청소년들이 ChatGPT를 사용하기 시작한 지 수년 만에 더 안전한 버전을 출시했다
AI 챗봇에 안전 프로토콜이 부재하여 청소년 자살 및 기타 정신 건강 위기를 초래했다는 일련의 소송이 제기된 데 이어, 오픈AI는 월요일 ‘ChatGPT for Teens’를 공개했다. 이 새로운 서비스는 강화된 안전 기능을 탑재했으며, 학교에서 AI 도구가 조장하는 학업 부정행위라는 점점 심각해지는 문제도 해결하고자 한다.교육적 관점에서 볼 때, ‘Cha
프론티어 AI 랩스, 비정상 모델에 대한 통제 전략 공개 거부
최근 연구에 따르면, 선도적인 AI 연구소 중 극소수만이 통제 대응 계획을 발표하거나 시연한 것으로 나타났습니다. 통제 계획은 AI 시스템이 인간의 통제를 무력화하려 할 때의 절차를 정의하며, 어떤 접근 권한이 철회되고 언제 시스템이 완전히 종료되는지를 명시합니다.이러한 결과는 안전한 최첨단 AI 개발 관행을 장려하는 데 주력하는 단체인 ‘Guideligh
NEA의 티파니 럭: 기업들은 여전히 AI ROI와 씨름하고 있다
플레이어 로딩 중…올초 실리콘밸리에서는 ‘토큰 극대화(tokenmaxxing)’가 주요 화두였으며, 최고경영자들은 직원들에게 AI 활용을 극대화할 것을 독려했습니다. 그러나 이러한 열정은 곧 현실과 부딪혔습니다. 우버(Uber)는 보고에 따라 수개월 만에 연간 AI 예산을 초과했으며, 일부 기업은 부서 전반에 걸쳐 Claude 구독을 축소했고, 메타(Meta)는 내부 성과 평가 제도를 중단했습니다.NEA의 파트너 티파니 럭(Tiffany L





집






