집CAMIA 개인정보 유출로 노출된 AI 모델의 기억된 데이터
획기적인 새로운 개인정보 공격은 개인 데이터가 AI 시스템 학습에 사용되었는지 여부를 탐지하여 취약점을 노출시킵니다.
Brave와 싱가포르 국립대학교 연구진이 공동으로 개발한 CAMIA(컨텍스트 인식 멤버십 추론 공격)는 AI 모델 메모리를 분석하는 기존 방법보다 훨씬 뛰어난 성능을 발휘합니다.
AI 업계는 모델이 의도치 않게 민감한 학습 정보를 보유하게 되는 '데이터 암기'에 대한 우려가 커지고 있습니다. 의료 AI는 환자 기록을 공개할 수 있고, 기업에서 학습한 모델은 기밀 이메일을 역추적할 수 있습니다.
최근 LinkedIn에서 AI 학습에 사용자 데이터를 활용하려는 계획과 같이 개인정보 보호에 대한 논쟁이 심화되면서 생성된 콘텐츠에 민감한 정보가 포함될 수 있는 잠재적 위험이 부각되고 있습니다.
보안 전문가들은 데이터 유출을 탐지하기 위해 멤버십 추론 공격(MIA)을 사용합니다. 이러한 테스트는 기본적으로 모델에게 다음과 같이 질문합니다: "이 특정 사례가 교육에 포함되었나요?" 공격이 성공하면 위험한 개인정보 유출이 확인됩니다.
이 원리는 익숙한 학습 데이터를 새로운 정보와 다르게 처리하는 모델에서 비롯되며, MIA는 이러한 행동 차이를 체계적으로 악용합니다.
기존의 MIA는 단순한 분류 모델을 위해 설계되었기 때문에 최신 생성형 AI에는 효과가 없는 것으로 판명되었습니다. 대규모 언어 모델은 텍스트를 순차적으로 생성하기 때문에 전체적인 평가가 누출을 발견하는 데 부적절합니다.
CAMIA의 혁신은 AI 암기가 맥락에 따라 달라진다는 점을 인식합니다. 모델은 후속 반응이 불확실할 때 암기된 콘텐츠에 가장 많이 의존합니다.
"해리포터는...에 의해...쓰여진..."이라는 문구를 생각해 보십시오. 해리의 세계..." - 모델은 암기보다는 문맥적 단서를 통해 "포터"를 쉽게 예측합니다.
하지만 '해리'만 주어졌을 때 '포터'를 예측하려면 학습 데이터를 실제로 암기해야 합니다. 모호한 문맥에서 높은 신뢰도의 예측은 암기된 내용을 강력하게 나타냅니다.
CAMIA는 생성형 AI를 위해 특별히 설계된 최초의 프라이버시 공격입니다. 텍스트 생성 중 불확실성 변동을 추적하여 문맥에 따른 추측과 실제 기억을 구분합니다.
Pythia 및 GPT-Neo 모델을 사용하여 MIMIR 벤치마크에서 테스트한 결과 인상적인 결과를 얻었습니다. 28억 개의 파라미터를 가진 Pythia 모델에 대해 CAMIA는 최소 1%의 오탐률을 유지하면서 탐지 정확도를 거의 두 배로 높였습니다.
이 공격은 효율적으로 작동하여 A100 GPU에서 1,000개의 샘플을 처리하는 데 약 38분이 소요되어 실제 모델 감사에 사용할 수 있습니다.
이 연구는 검증되지 않은 데이터 세트에 대한 대규모 모델 훈련에 내재된 개인정보 보호 위험을 강조합니다. 연구팀은 AI의 유용성과 사용자 보호의 균형을 맞추는 개인정보 보호 기술을 장려하는 것을 목표로 하고 있습니다.
참조: 엔터프라이즈 AI 모델의 실제 생산성을 벤치마킹하는 삼성
암스테르담, 캘리포니아, 런던에서 열리는 AI & 빅 데이터 엑스포에서 AI와 빅 데이터의 발전을 살펴보세요. TechEx와 제휴한 이 행사는 주요 기술 컨퍼런스와 함께 포괄적인 인사이트를 제공합니다.
AI 뉴스는 TechForge Media에서 제공합니다. 예정된 엔터프라이즈 기술 이벤트와 웨비나를 알아보세요.
관련 기사
메타, 직원들이 노골적인 콘텐츠를 시청했다는 보도에 따라 AI 안경 개인정보 보호 문제로 소송에 직면
메타가 자사의 AI 스마트 안경과 관련된 개인정보 보호 문제로 새로운 소송에 직면했다. 스웨덴 언론의 취재에 따르면, 케냐에 기반을 둔 하청업체 직원들이 고객의 영상을 검토해 온 것으로 드러났다. 이 영상에는 나체, 성행위, 화장실 이용 장면 등 민감한 내용이 포함된 것으로 알려졌다.메타는 이미지의 얼굴을 흐리게 처리한다고 밝혔으나, 언론 보도에 따르면 이
오픈AI의 샘 알트먼, 초지능 시대의 도래 선언
오픈AI의 샘 알트만 최고경영자(CEO)는 인류가 인공 초지능 시대에 진입했으며 되돌릴 수 없다고 선언했다."우리는 되돌릴 수 없는 지점을 넘어섰으며, 상승이 시작됐다"고 알트먼은 말한다. "우리는 디지털 초지능을 창조하는 문턱에 서 있으며, 지금까지는 상상했던 것보다 놀랍게도 덜 낯설다."로봇이 아직 거리에서 흔히 보이지도 않고 질병도 여전히 존재하는 등
인공지능 붐, 닷컴 시대 버블 우려를 재현하다
인공지능(AI) 분야에 수십억 달러 규모의 투자가 쏟아지면서 뜨거운 논쟁이 벌어지고 있다: 이 산업이 닷컴 버블과 같은 거품 현상으로 치닫고 있는 것인가?투자자들은 열기가 식거나 칩 및 인프라에 대한 막대한 지출이 기대 수익을 내지 못하고 있다는 징후를 경계하고 있다. 최근 BofA 글로벌 리서치 설문조사에서 펀드 매니저의 54%가 AI 주식이 이미 버블
관련 특별 주제 추천
사업
최고의 AI 가격 최적화 소프트웨어: 경쟁사 추적 및 스토어 가격 자동 조정
XIX.AI에서 2026년 최고의 AI 가격 최적화 소프트웨어를 만나보세요. 저희가 엄선한 이 목록에는 경쟁사를 추적하고 최대 수익을 위해 매장 가격을 자동으로 조정해 주는, 최고 평점을 받은 혁신적인 도구들이 포함되어 있습니다. 실제 테스트 결과를 바탕으로 무료 버전과 유료 버전을 비교해 보세요. 지금 바로 가격 경쟁력의 우위를 확보하세요.
10 도구
xix.ai
암호
최고의 AI 코드 검토 도구: 깔끔한 코드 준수 자동화 및 레거시 리포지토리 파일 리팩토링
XIX.AI에서 2026년 최고의 AI 코드 검토 도구를 만나보세요. 엄선된 이 목록에는 깔끔한 코드 준수 여부를 자동으로 확인하고 레거시 리포지토리 파일을 리팩토링하는 데 있어 판도를 바꿀 만한 최고 등급의 도구들이 포함되어 있습니다. 실제 테스트 결과와 매주 업데이트되는 순위를 통해 무료 및 유료 옵션을 비교해 보세요. 지금 바로 AI의 경쟁력을 확보하세요.
10 도구
xix.ai
텍스트 음성 변환
난독증 환자를 위한 최고의 AI 음성 합성 앱: 학생들의 학습 및 독서 효율성 향상
난독증 지원을 위해 엄선된 2026년 최신 최고 평점 AI TTS 앱을 만나보세요. 전문가들이 선정한 이 순위는 무료 및 유료 도구를 비교 분석하여, 읽기 효율과 학습 효과를 높여주는 강력한 기능들을 소개합니다. 학생들의 잠재력을 최대한 발휘할 수 있도록 도와줄, 꼭 사용해봐야 할 혁신적인 솔루션을 확인해 보세요. XIX.AI에서 여정을 시작해 보세요.
10 도구
xix.ai
만화 창작
소년 만화를 위한 최고의 AI 생성기: 박진감 넘치는 액션 장면과 에너지 효과 만들기
XIX.AI에서 2026년 최고의 소년 만화 AI 생성기를 만나보세요. 엄선된 최고 평점 목록에는 박진감 넘치는 액션 장면과 역동적인 에너지 효과를 연출할 수 있는 강력한 도구들이 포함되어 있습니다. 실제 테스트를 통해 무료 버전과 유료 버전을 비교해 보세요. 여러분의 창의력을 마음껏 발휘하여 오늘 바로 장대한 만화를 만들어 보세요!
15 도구
xix.ai
사업
최고의 AI 경비 관리 앱: 영수증을 스캔하고 기업 경비를 자동으로 분류하세요
2026년 최신 최고의 AI 경비 관리 도구: 영수증을 스캔하고 기업 경비를 자동으로 분류해 주는 최고 평점의 도구들. 손쉬운 경비 관리, 정확한 재무 추적, 효율적인 규정 준수를 위한 강력하고 혁신적인 솔루션을 만나보세요. 무료 및 유료 옵션을 엄선하여 매주 업데이트되는 비교 자료를 통해 귀사에 딱 맞는 도구를 찾으실 수 있습니다. XIX.AI의 전문가 추천 목록으로 AI의 장점을 최대한 활용하세요.
10 도구
xix.ai
사업
최고의 AI 채용 도구: 이력서 심사 및 후보자 면접 일정 자동화
XIX.AI에서 2026년 최신 최고 평점을 받은 AI 채용 도구를 확인해 보세요. 저희가 엄선한 이 목록에는 이력서 심사 및 후보자 면접 일정 자동화를 위한 강력하고 혁신적인 솔루션이 포함되어 있습니다. 실제 테스트 결과와 매주 업데이트되는 순위를 바탕으로 무료 및 유료 옵션을 비교해 보세요. 지금 바로 귀사에 딱 맞는 채용 도우미를 찾아 채용 프로세스를 효율화하세요!
10 도구
xix.ai
의견 (3)
0/500
![BenGarcía]()
This is wild! 🤯 So basically they can tell if my personal data was used to train an AI? That's both cool and terrifying. What if companies get sued over this? Privacy laws need to catch up fast, because memorization is a real issue.
![MarkHarris]()
Also das mit dem CAMIA-Angriff klingt echt nicht gut. KI-Modelle sollen doch keine persönlichen Daten speichern, oder? Wenn jetzt jeder prüfen kann, ob seine eigenen Daten im Training waren, wo soll das hinführen? Da müssen dringend strengere Datenschutzregeln für KI-Entwicklung her. Ist ja fast schon beängstigend, was da alles rauskommen könnte... 🤔
![RalphSmith]()
Слышали про CAMIA? Это кошмар для приватности! Теперь любой может узнать, использовались ли их данные для обучения ИИ. Время удалять свои фото из интернета 📸 А вы как думаете - стоит ли запретить сбор личных данных для ИИ?
획기적인 새로운 개인정보 공격은 개인 데이터가 AI 시스템 학습에 사용되었는지 여부를 탐지하여 취약점을 노출시킵니다.
Brave와 싱가포르 국립대학교 연구진이 공동으로 개발한 CAMIA(컨텍스트 인식 멤버십 추론 공격)는 AI 모델 메모리를 분석하는 기존 방법보다 훨씬 뛰어난 성능을 발휘합니다.
AI 업계는 모델이 의도치 않게 민감한 학습 정보를 보유하게 되는 '데이터 암기'에 대한 우려가 커지고 있습니다. 의료 AI는 환자 기록을 공개할 수 있고, 기업에서 학습한 모델은 기밀 이메일을 역추적할 수 있습니다.
최근 LinkedIn에서 AI 학습에 사용자 데이터를 활용하려는 계획과 같이 개인정보 보호에 대한 논쟁이 심화되면서 생성된 콘텐츠에 민감한 정보가 포함될 수 있는 잠재적 위험이 부각되고 있습니다.
보안 전문가들은 데이터 유출을 탐지하기 위해 멤버십 추론 공격(MIA)을 사용합니다. 이러한 테스트는 기본적으로 모델에게 다음과 같이 질문합니다: "이 특정 사례가 교육에 포함되었나요?" 공격이 성공하면 위험한 개인정보 유출이 확인됩니다.
이 원리는 익숙한 학습 데이터를 새로운 정보와 다르게 처리하는 모델에서 비롯되며, MIA는 이러한 행동 차이를 체계적으로 악용합니다.
기존의 MIA는 단순한 분류 모델을 위해 설계되었기 때문에 최신 생성형 AI에는 효과가 없는 것으로 판명되었습니다. 대규모 언어 모델은 텍스트를 순차적으로 생성하기 때문에 전체적인 평가가 누출을 발견하는 데 부적절합니다.
CAMIA의 혁신은 AI 암기가 맥락에 따라 달라진다는 점을 인식합니다. 모델은 후속 반응이 불확실할 때 암기된 콘텐츠에 가장 많이 의존합니다.
"해리포터는...에 의해...쓰여진..."이라는 문구를 생각해 보십시오. 해리의 세계..." - 모델은 암기보다는 문맥적 단서를 통해 "포터"를 쉽게 예측합니다.
하지만 '해리'만 주어졌을 때 '포터'를 예측하려면 학습 데이터를 실제로 암기해야 합니다. 모호한 문맥에서 높은 신뢰도의 예측은 암기된 내용을 강력하게 나타냅니다.
CAMIA는 생성형 AI를 위해 특별히 설계된 최초의 프라이버시 공격입니다. 텍스트 생성 중 불확실성 변동을 추적하여 문맥에 따른 추측과 실제 기억을 구분합니다.
Pythia 및 GPT-Neo 모델을 사용하여 MIMIR 벤치마크에서 테스트한 결과 인상적인 결과를 얻었습니다. 28억 개의 파라미터를 가진 Pythia 모델에 대해 CAMIA는 최소 1%의 오탐률을 유지하면서 탐지 정확도를 거의 두 배로 높였습니다.
이 공격은 효율적으로 작동하여 A100 GPU에서 1,000개의 샘플을 처리하는 데 약 38분이 소요되어 실제 모델 감사에 사용할 수 있습니다.
이 연구는 검증되지 않은 데이터 세트에 대한 대규모 모델 훈련에 내재된 개인정보 보호 위험을 강조합니다. 연구팀은 AI의 유용성과 사용자 보호의 균형을 맞추는 개인정보 보호 기술을 장려하는 것을 목표로 하고 있습니다.
참조: 엔터프라이즈 AI 모델의 실제 생산성을 벤치마킹하는 삼성
암스테르담, 캘리포니아, 런던에서 열리는 AI & 빅 데이터 엑스포에서 AI와 빅 데이터의 발전을 살펴보세요. TechEx와 제휴한 이 행사는 주요 기술 컨퍼런스와 함께 포괄적인 인사이트를 제공합니다.
AI 뉴스는 TechForge Media에서 제공합니다. 예정된 엔터프라이즈 기술 이벤트와 웨비나를 알아보세요.
메타, 직원들이 노골적인 콘텐츠를 시청했다는 보도에 따라 AI 안경 개인정보 보호 문제로 소송에 직면
메타가 자사의 AI 스마트 안경과 관련된 개인정보 보호 문제로 새로운 소송에 직면했다. 스웨덴 언론의 취재에 따르면, 케냐에 기반을 둔 하청업체 직원들이 고객의 영상을 검토해 온 것으로 드러났다. 이 영상에는 나체, 성행위, 화장실 이용 장면 등 민감한 내용이 포함된 것으로 알려졌다.메타는 이미지의 얼굴을 흐리게 처리한다고 밝혔으나, 언론 보도에 따르면 이
오픈AI의 샘 알트먼, 초지능 시대의 도래 선언
오픈AI의 샘 알트만 최고경영자(CEO)는 인류가 인공 초지능 시대에 진입했으며 되돌릴 수 없다고 선언했다."우리는 되돌릴 수 없는 지점을 넘어섰으며, 상승이 시작됐다"고 알트먼은 말한다. "우리는 디지털 초지능을 창조하는 문턱에 서 있으며, 지금까지는 상상했던 것보다 놀랍게도 덜 낯설다."로봇이 아직 거리에서 흔히 보이지도 않고 질병도 여전히 존재하는 등
인공지능 붐, 닷컴 시대 버블 우려를 재현하다
인공지능(AI) 분야에 수십억 달러 규모의 투자가 쏟아지면서 뜨거운 논쟁이 벌어지고 있다: 이 산업이 닷컴 버블과 같은 거품 현상으로 치닫고 있는 것인가?투자자들은 열기가 식거나 칩 및 인프라에 대한 막대한 지출이 기대 수익을 내지 못하고 있다는 징후를 경계하고 있다. 최근 BofA 글로벌 리서치 설문조사에서 펀드 매니저의 54%가 AI 주식이 이미 버블
XIX.AI에서 2026년 최고의 AI 가격 최적화 소프트웨어를 만나보세요. 저희가 엄선한 이 목록에는 경쟁사를 추적하고 최대 수익을 위해 매장 가격을 자동으로 조정해 주는, 최고 평점을 받은 혁신적인 도구들이 포함되어 있습니다. 실제 테스트 결과를 바탕으로 무료 버전과 유료 버전을 비교해 보세요. 지금 바로 가격 경쟁력의 우위를 확보하세요.
10 도구
xix.ai
XIX.AI에서 2026년 최고의 AI 코드 검토 도구를 만나보세요. 엄선된 이 목록에는 깔끔한 코드 준수 여부를 자동으로 확인하고 레거시 리포지토리 파일을 리팩토링하는 데 있어 판도를 바꿀 만한 최고 등급의 도구들이 포함되어 있습니다. 실제 테스트 결과와 매주 업데이트되는 순위를 통해 무료 및 유료 옵션을 비교해 보세요. 지금 바로 AI의 경쟁력을 확보하세요.
10 도구
xix.ai
난독증 지원을 위해 엄선된 2026년 최신 최고 평점 AI TTS 앱을 만나보세요. 전문가들이 선정한 이 순위는 무료 및 유료 도구를 비교 분석하여, 읽기 효율과 학습 효과를 높여주는 강력한 기능들을 소개합니다. 학생들의 잠재력을 최대한 발휘할 수 있도록 도와줄, 꼭 사용해봐야 할 혁신적인 솔루션을 확인해 보세요. XIX.AI에서 여정을 시작해 보세요.
10 도구
xix.ai
XIX.AI에서 2026년 최고의 소년 만화 AI 생성기를 만나보세요. 엄선된 최고 평점 목록에는 박진감 넘치는 액션 장면과 역동적인 에너지 효과를 연출할 수 있는 강력한 도구들이 포함되어 있습니다. 실제 테스트를 통해 무료 버전과 유료 버전을 비교해 보세요. 여러분의 창의력을 마음껏 발휘하여 오늘 바로 장대한 만화를 만들어 보세요!
15 도구
xix.ai
2026년 최신 최고의 AI 경비 관리 도구: 영수증을 스캔하고 기업 경비를 자동으로 분류해 주는 최고 평점의 도구들. 손쉬운 경비 관리, 정확한 재무 추적, 효율적인 규정 준수를 위한 강력하고 혁신적인 솔루션을 만나보세요. 무료 및 유료 옵션을 엄선하여 매주 업데이트되는 비교 자료를 통해 귀사에 딱 맞는 도구를 찾으실 수 있습니다. XIX.AI의 전문가 추천 목록으로 AI의 장점을 최대한 활용하세요.
10 도구
xix.ai
XIX.AI에서 2026년 최신 최고 평점을 받은 AI 채용 도구를 확인해 보세요. 저희가 엄선한 이 목록에는 이력서 심사 및 후보자 면접 일정 자동화를 위한 강력하고 혁신적인 솔루션이 포함되어 있습니다. 실제 테스트 결과와 매주 업데이트되는 순위를 바탕으로 무료 및 유료 옵션을 비교해 보세요. 지금 바로 귀사에 딱 맞는 채용 도우미를 찾아 채용 프로세스를 효율화하세요!
10 도구
xix.ai
This is wild! 🤯 So basically they can tell if my personal data was used to train an AI? That's both cool and terrifying. What if companies get sued over this? Privacy laws need to catch up fast, because memorization is a real issue.
Also das mit dem CAMIA-Angriff klingt echt nicht gut. KI-Modelle sollen doch keine persönlichen Daten speichern, oder? Wenn jetzt jeder prüfen kann, ob seine eigenen Daten im Training waren, wo soll das hinführen? Da müssen dringend strengere Datenschutzregeln für KI-Entwicklung her. Ist ja fast schon beängstigend, was da alles rauskommen könnte... 🤔
Слышали про CAMIA? Это кошмар для приватности! Теперь любой может узнать, использовались ли их данные для обучения ИИ. Время удалять свои фото из интернета 📸 А вы как думаете - стоит ли запретить сбор личных данных для ИИ?
