AWS, Nova 2 Lite와 SAM 3으로 이미지 내 개인정보 자동 삭제 자동화
Amazon Web Services가 Amazon Nova 2 Lite, Meta SAM 3, Amazon Textract 서비스를 결합한 이미지 내 개인정보(PII) 자동 삭제를 위한 6단계 파이프라인을 발표했습니다. 이 솔루션은 자체 모델 훈련 없이 GDPR 및 PCI DSS 표준 준수를 목표로 합니다.
이 기사는 AI가 1차 출처를 기반으로 생성했습니다.
사진은 자동 개인정보 보호에서 가장 어려운 영역 중 하나입니다: 얼굴이 부분적으로 가려질 수 있고, 신분증이 임의의 각도로 회전되어 있을 수 있으며, 지문이 프레임 가장자리에 거의 보이지 않을 수 있습니다. 한 가지 유형의 감지에 특화된 기존 도구—컴퓨터 비전 없는 OCR이나 OCR 없는 컴퓨터 비전—는 바로 이런 엣지 케이스에서 정기적으로 실패합니다. Amazon Web Services가 자체 모델 훈련 없이 대규모로 이미지에서 개인정보(PII)를 자동으로 삭제하기 위해 Amazon Nova 2 Lite, Meta SAM 3, Amazon Textract를 결합한 6단계 파이프라인을 발표합니다.
파이프라인은 어떻게 작동합니까?
전체 데이터 흐름은 S3 이벤트 알림으로 트리거된 AWS Step Functions가 조율합니다.
1단계 — 업로드 및 트리거: 이미지가 Amazon S3에 저장됩니다. EventBridge 규칙이 수동 실행이나 폴링 로직 없이 Step Functions 워크플로를 자동으로 활성화합니다.
2단계 — 검증 및 초기 스크리닝: Nova 2 Lite가 파일 형식을 확인하고 PII의 존재 여부를 평가합니다. 눈에 보이는 PII가 없는 이미지는 비용이 많이 드는 다운스트림 서비스를 시작하지 않고 즉시 파이프라인에서 나갑니다. 이 초기 필터링은 대규모 처리 비용을 직접 절감합니다.
3단계 — 병렬 시각적 감지: Amazon SageMaker AI에 배포된 SAM 3(Meta’s Segment Anything Model 3)이 얼굴, 번호판, 기타 시각적 생체 인식 요소에 대한 픽셀 수준의 세그멘테이션 마스크를 생성합니다. SAM 3은 전체 처리 시간을 최소화하기 위해 4단계와 병렬로 작동합니다.
4단계 — 병렬 텍스트 감지: Amazon Textract가 각 블록의 픽셀 좌표와 함께 이미지의 모든 텍스트를 추출합니다. Nova 2 Lite는 그 다음 어떤 텍스트 조각이 민감한지 맥락적으로 평가합니다—법적 문서의 사람 이름은 배경 브랜드 티셔츠의 같은 이름과 다르게 처리됩니다.
5단계 — 삭제 및 검증: Pillow 라이브러리를 사용하는 AWS Lambda 함수가 SAM 3과 Textract의 좌표를 결합하고 식별된 영역을 흐리게 하거나 덮습니다. Nova 2 Lite가 삭제 결과의 최종 품질 검사를 수행합니다.
6단계 — 출력 라우팅: 검증을 통과한 이미지는 noPII 폴더로 이동합니다. 불확실한 이미지는 수동 검토를 위한 격리 폴더로 이동합니다—자동화가 엣지 케이스에서 인간 감독을 대체하는 것이 아니라 보완하도록 보장합니다.
기존에 실패했던 엣지 케이스
이 접근 방식의 핵심 기여는 바로 엣지 케이스 해결입니다. OCR만 사용하는 시스템은 얼굴을 보지 못하고; 컴퓨터 비전에만 의존하는 시스템은 문서의 텍스트를 읽지 못합니다. Nova 2 Lite는 두 채널을 조율하고 개별 도구가 제공할 수 없는 맥락적 평가를 제공합니다.
- 부분 얼굴 — SAM 3은 얼굴이 측면 각도에서만 보이거나 물체에 부분적으로 가려진 경우에도 세그멘트합니다
- 반사 — 유리나 거울에 반사된 얼굴도 직접 보이는 것과 마찬가지로 감지하고 삭제합니다
- 임의 방향의 신분증 — Textract의 좌표 시스템은 프레임 내 문서의 회전과 무관하게 작동합니다
- 문서가 있는 광각 사진 — 표준 OCR이 무시할 프레임 구석의 작은 문서들도 감지에 포함됩니다
시스템이 인식하는 텍스트 PII는 이름, 식별 번호, 주소, 전화번호, MAC 주소, 차량 VIN 번호를 포함합니다. 시각적 PII는 얼굴, 지문, 기타 생체 인식 데이터를 포함합니다.
규제 적용 및 비용 효율성
파이프라인은 GDPR 및 결제 카드 데이터 보호를 위한 PCI DSS 표준 준수를 위해 설계되었습니다. 수천 또는 수백만 건의 문서를 처리하는 조직은 자체 모델을 훈련하지 않고 이 솔루션을 구현할 수 있습니다—개발 비용과 커스텀 모델의 출처 및 감사 가능성과 관련된 규제 위험을 모두 줄입니다.
Nova 2 Lite는 전체 파이프라인에서 지능적인 조율자로 작동합니다: PII가 없는 이미지의 초기 필터링은 SAM 3와 Textract—계산적으로 가장 비용이 많이 드는 세그먼트—가 필요하지 않은 사진을 처리하지 않음을 의미합니다. 맥락적 라우팅은 파이프라인 내의 불필요한 다운스트림 호출 수도 줄입니다. AWS 사용량 기반 요금제와 함께, 두 최적화 모두 대규모 처리 비용을 직접 줄이는 데 반영됩니다.
솔루션은 표준 AWS 계정과 적절한 IAM 권한만 있으면 Amazon Bedrock과 SageMaker AI에서 즉시 구현 가능합니다.
자주 묻는 질문
- 시스템이 인식하고 삭제하는 개인정보 범주는 무엇입니까?
- 텍스트 PII는 이름, 식별 번호, 주소, 전화번호, MAC 주소, 차량 VIN 번호를 포함합니다. 시각적 PII는 얼굴, 지문, 기타 생체 인식 데이터—부분적으로 보이거나 반사된 얼굴과 임의 방향의 문서 포함—를 포함합니다.
- 시스템이 올바르게 삭제되었는지 확신할 수 없는 사진은 어떻게 됩니까?
- Nova 2 Lite는 Lambda 삭제 후 최종 검증을 수행합니다. 확인을 통과한 이미지는 noPII 폴더로, 불확실한 이미지는 수동 검토를 위한 격리 폴더로 이동합니다—엣지 케이스에 대한 인간 감독을 보장합니다.
- 이 파이프라인이 준수하는 데 도움이 되는 규제 표준은 무엇입니까?
- 이 솔루션은 GDPR 및 데이터 보호를 위한 PCI DSS 표준 준수를 위해 설계되었습니다. 커스텀 모델 훈련 없이 대규모로 적용 가능하여 개발 비용과 모델 출처 관련 규제 위험을 줄입니다.