오픈AI 수석 과학자가 AI가 곧 자기 개선 단계에 진입할 수 있다고 경고하며, 산업계가 자발적으로 속도를 늦출 것을 기대합니다

야쿠프 파초키 오픈에이아이 수석 과학자는 인공지능이 전례 없는 속도로 발전하고 있어 인간의 감독과 통제가 복잡해지고 있다고 경고했다. 그는 인공지능 개발자들에게 안전을 최우선으로 고려해 진전을 자발적으로 늦출 것을 촉구했다.
"자기 개선 모델이 곧 등장할 것이다"
최근 기고문에서 파초키는 인공지능 시스템이 컴퓨터를 제어하고 인간 및 다른 인공지능과 협력하며 독립적인 연구를 수행할 정도로 빠르게 진화했다고 지적했다. 그는 이러한 모델들이 곧 인간의 개입 없이 스스로를 향상시키는 '재귀적 자기 개선'에 도달할 것이라고 경고했다.
"이것은 극도의 주의가 요구된다"라고 파초키는 썼다. "나는 통제되지 않고 빠른 기계 지능의 성장에 따른 여파에 대해 아무도 준비되어 있지 않다는 점이 우려된다."
보편적 안전 기준 이전에 자발적 중단이 선행되어야 한다
파초키는 개발자들이 인공지능을 인간 이익에 더 엄격하게 유도하거나 "필요할 때 개발을 중단"할 수 있다고 제안했다. 그는 보편적 안전 기준이 마련되기 전에 자발적인 속도 저하가 관행으로 자리 잡기를 희망했다.
이 견해는 최근 오픈에이아이의 발표와 맥을 같이한다. 동사는 개발 가속화를 위해 인공지능 에이전트를 사용하지만, 안전성과 정렬이 모델 능력의 발전 속도를 따라가지 못할 수 있다고 시인한다. 더 강력한 시스템은 모니터링하기가 더 어렵다. 파초키는 아직 어떤 연구소도 신뢰할 수 있는 인공지능 정렬을 달성하지 못했다고 이전에 밝힌 바 있으며, 정부들이 국제적 협력을 최우선으로 고려할 것을 촉구했다.
관련 기사
OpenAI는 IPO 연기 확인, 알트만은 2026년 출시를 비현실적이라고 주장
생성형 AI 선두주자 OpenAI의 CEO 샘 알트먼은 최근 Fortune와의 인터뷰에서 회사가 초기 공개 상장(IPO)을 서두르지 않고 있다고 명확히 밝혔다. 현재의 시장 상황과 기술적 성숙도를 고려할 때, 2026년 IPO를 목표로 하는 것은 전략적으로 적절하지 않을 수 있다.이전에 비밀리에 IPO 신청서를 제출했다는 보도가 있었음에도 불구하고, 알트먼은 OpenAI가 비즈니스가 완전히 가동되고 AI 기술이 사회적으로 광범위하게 성숙할 때에
블루 버그 엠보디드, 모듈형 휴머노이드 로봇 ‘샤오바이’ 공개…가격은 9,800위안부터
시안교통대학교의 기술 이전 기관인 란충(Lan Chong)은 9월 14일 새로운 모듈형 휴머노이드 로봇인 ‘만티스 스탠다드(Mantis Standard) “바이샤오(Bai Xiao)”’를 공개했다. 이 모델은 휴머노이드 로봇 분야의 기존 진입 장벽을 낮춤으로써 0.98백만 위안이라는 저렴한 가격으로 출시되어 업계의 큰 관심을 불러일으켰다.단순한 표준 휴머노
아마존이 케이트 스페이드를 포함한 소매업체들을 위한 AI 쇼핑 어시스턴트를 출시하다
아마존은 AWS 기반의 새로운 에이전틱 쇼핑 어시스턴트를 통해 외부 소매업체들에게 AI 쇼핑 기능을 확장하고 있으며, 케이트 스페이드가 초기 도입 브랜드 중 하나입니다.이 서비스를 통해 소매업체들은 자체 웹사이트 및 앱용 AI 쇼핑 어시스턴트를 구축할 수 있습니다. 아마존에 따르면, 각 배포는 소매업체의 제품 카탈로그, 고객 기반, 쇼핑 환경 및 브랜드 톤앤매너에 맞게 맞춤화될 수 있습니다.아마존 자체 온라인 스토어를 위해 처음 개발된 기술을
관련 특별 주제 추천
의견 (0)
0/500

야쿠프 파초키 오픈에이아이 수석 과학자는 인공지능이 전례 없는 속도로 발전하고 있어 인간의 감독과 통제가 복잡해지고 있다고 경고했다. 그는 인공지능 개발자들에게 안전을 최우선으로 고려해 진전을 자발적으로 늦출 것을 촉구했다.
"자기 개선 모델이 곧 등장할 것이다"
최근 기고문에서 파초키는 인공지능 시스템이 컴퓨터를 제어하고 인간 및 다른 인공지능과 협력하며 독립적인 연구를 수행할 정도로 빠르게 진화했다고 지적했다. 그는 이러한 모델들이 곧 인간의 개입 없이 스스로를 향상시키는 '재귀적 자기 개선'에 도달할 것이라고 경고했다.
"이것은 극도의 주의가 요구된다"라고 파초키는 썼다. "나는 통제되지 않고 빠른 기계 지능의 성장에 따른 여파에 대해 아무도 준비되어 있지 않다는 점이 우려된다."
보편적 안전 기준 이전에 자발적 중단이 선행되어야 한다
파초키는 개발자들이 인공지능을 인간 이익에 더 엄격하게 유도하거나 "필요할 때 개발을 중단"할 수 있다고 제안했다. 그는 보편적 안전 기준이 마련되기 전에 자발적인 속도 저하가 관행으로 자리 잡기를 희망했다.
이 견해는 최근 오픈에이아이의 발표와 맥을 같이한다. 동사는 개발 가속화를 위해 인공지능 에이전트를 사용하지만, 안전성과 정렬이 모델 능력의 발전 속도를 따라가지 못할 수 있다고 시인한다. 더 강력한 시스템은 모니터링하기가 더 어렵다. 파초키는 아직 어떤 연구소도 신뢰할 수 있는 인공지능 정렬을 달성하지 못했다고 이전에 밝힌 바 있으며, 정부들이 국제적 협력을 최우선으로 고려할 것을 촉구했다.
OpenAI는 IPO 연기 확인, 알트만은 2026년 출시를 비현실적이라고 주장
생성형 AI 선두주자 OpenAI의 CEO 샘 알트먼은 최근 Fortune와의 인터뷰에서 회사가 초기 공개 상장(IPO)을 서두르지 않고 있다고 명확히 밝혔다. 현재의 시장 상황과 기술적 성숙도를 고려할 때, 2026년 IPO를 목표로 하는 것은 전략적으로 적절하지 않을 수 있다.이전에 비밀리에 IPO 신청서를 제출했다는 보도가 있었음에도 불구하고, 알트먼은 OpenAI가 비즈니스가 완전히 가동되고 AI 기술이 사회적으로 광범위하게 성숙할 때에
블루 버그 엠보디드, 모듈형 휴머노이드 로봇 ‘샤오바이’ 공개…가격은 9,800위안부터
시안교통대학교의 기술 이전 기관인 란충(Lan Chong)은 9월 14일 새로운 모듈형 휴머노이드 로봇인 ‘만티스 스탠다드(Mantis Standard) “바이샤오(Bai Xiao)”’를 공개했다. 이 모델은 휴머노이드 로봇 분야의 기존 진입 장벽을 낮춤으로써 0.98백만 위안이라는 저렴한 가격으로 출시되어 업계의 큰 관심을 불러일으켰다.단순한 표준 휴머노
아마존이 케이트 스페이드를 포함한 소매업체들을 위한 AI 쇼핑 어시스턴트를 출시하다
아마존은 AWS 기반의 새로운 에이전틱 쇼핑 어시스턴트를 통해 외부 소매업체들에게 AI 쇼핑 기능을 확장하고 있으며, 케이트 스페이드가 초기 도입 브랜드 중 하나입니다.이 서비스를 통해 소매업체들은 자체 웹사이트 및 앱용 AI 쇼핑 어시스턴트를 구축할 수 있습니다. 아마존에 따르면, 각 배포는 소매업체의 제품 카탈로그, 고객 기반, 쇼핑 환경 및 브랜드 톤앤매너에 맞게 맞춤화될 수 있습니다.아마존 자체 온라인 스토어를 위해 처음 개발된 기술을





집






