Awesome Comprehensive Deepfake Detection

놀랍고 포괄적인 딥페이크 탐지

이 저장소는 다음 설문 조사에서 자세히 설명된 고급 단일 모드 및 다중 모드 딥페이크 탐지에 대한 포괄적인 조사를 제공합니다.

단일 모드에서 다중 모드로의 진화 얼굴 딥페이크 탐지: 설문 조사

핑 리우 ¹ , 치치 타오 ² , 조이 티아니 저우 ^2,3

¹ 네바다 대학교, 리노
² CFAR(프론티어 AI 연구 센터), A*STAR
³ 온라인 안전 첨단 기술 센터(CATOS)

우리 목록에 포함되어야 할 추가 작품이 있다고 생각되면 주저하지 말고 이메일([email protected]/[email protected]/[email protected])을 보내주십시오. ) 또는 문제를 제기하세요. 귀하의 제안과 의견은 당사 리소스의 완전성과 정확성을 보장하는 데 매우 중요합니다.

콘텐츠

---

• 관련 설문조사

• 딥페이크/AIGC 생성 및 탐지

• 다중 모드 사실 확인

• 얼굴 딥페이크 데이터세트

• 단일 모달 GAN 생성 데이터 세트

• 단일 모달 확산 생성 데이터 세트

• 다중 모드 시청각 데이터세트

• 다중 모드 텍스트-시각적 데이터 세트

• 단일 모달(시각적) 딥페이크 탐지

• GAN을 위한 사전 예방적 방법

• 확산 모델을 위한 사전 예방적 방법

• 순진한 탐지

• 고급 탐지

• 확산 모델 감지

• 순차적 딥페이크 탐지

• 입력 레벨

• 모델 수준

• 학습 수준

• 수동적 탐지

• 사전 예방적 탐지

• 다중 모드 딥페이크 탐지

• 독립적 학습

• 공동 학습

• 매칭 기반 학습

• 기타

• 중간융합

• 후기 융합

• 다중 작업 전략

• 정규화

• 시청각 딥페이크 탐지

• 텍스트-시각적 딥페이크 탐지

• 신뢰할 수 있는 딥페이크 탐지

• 적대적 공격

• 백도어 공격

• 불일치 최소화

• 방어 전략

---

관련 설문조사

딥페이크/AIGC 생성 및 탐지

[arXiv 2024] 다중 양식에 걸친 수동적 딥페이크 탐지: 종합적인 설문조사 보고서

[arxiv 2024] 딥페이크 생성 및 탐지: 벤치마크 및 설문지 프로젝트

[arxiv 2024] 대규모 AI 모델에서 생성된 멀티미디어 감지: 설문지 프로젝트

[ECAI 2023] GAN 생성 얼굴 탐지: 설문 조사 및 새로운 관점 논문

[NeurIPS 2023] DeepfakeBench: 딥페이크 탐지 논문 프로젝트 종합 벤치마크

[arxiv 2023] 딥페이크 탐지: 신뢰성 관점에서 본 종합 연구 논문

[IJCV 2022] 악성 딥페이크 대응: 설문조사, 배틀그라운드, 호라이즌 페이퍼 프로젝트

다중 모드 사실 확인

[EMNLP 2023] 멀티모달 자동화 팩트체크: 설문지

---

얼굴 딥페이크 데이터세트

단일 모달 GAN 생성 데이터 세트

데이터세트	년도	일	조작된 양식	실제 동영상 수	가짜 동영상 수	종이	링크
페이스포렌식++(FF++)	2019	분류	시각적	1,000	4,000	FaceForensics++: 조작된 얼굴 이미지를 감지하는 방법 학습	다운로드
DFD	2019	분류	시각적	363	3,068	딥페이크 탐지 연구에 데이터 기여	다운로드
DFFD	2020	분류	시각적	1,000	3,000	디지털 얼굴 조작 탐지에 대하여	다운로드
페이스시프터	2020	분류	시각적	-	1,000	FaceShifter: 충실도가 높고 폐색을 인식하는 얼굴 교환을 향하여	다운로드
DFDC	2020	분류	시각적	23,654	104,500	DFDC(DeepFake 탐지 챌린지) 데이터세트	다운로드
셀럽-DF	2020	분류	시각적	590	5,639	Celeb-df: 딥페이크 법의학을 위한 대규모의 까다로운 데이터세트	다운로드
DeeperForensics-1.0	2020	분류	시각적	50,000	10,000	DeeperForensics-1.0: 실제 얼굴 위조 탐지를 위한 대규모 데이터 세트	다운로드
와일드딥페이크	2020	분류	시각적	3,805	3,509	WildDeepfake: 딥페이크 탐지를 위한 도전적인 실제 데이터세트	다운로드
KODF	2020	분류	시각적	62,166	175,776	KoDF: 대규모 한국 딥페이크 탐지 데이터세트	다운로드
FFIW_10k	2021	분류 및 공간 접지	시각적	10,000	10,000	야생에서의 얼굴 법의학	다운로드
위조넷	2021	분류 및 공간 접지 및 임시 접지	시각적	99,630	12,1617	Forgerynet: 포괄적인 위조 분석을 위한 다목적 벤치마크	다운로드
DF-플래터	2023년	분류	시각적	133,260	132,496	DF-Platter: 다중 얼굴 이종 딥페이크 데이터세트	다운로드

단일 모달 확산 생성 데이터 세트

데이터세트	년도	일	조작된 양식	실제 이미지 수	가짜 이미지 #개	종이	링크
DeepFake얼굴	2023년	분류	시각적	30,000	90,000	딥페이크 탐지의 견고성과 일반화 가능성: 확산 모델을 사용한 연구	다운로드
차이	2024년	분류	시각적	23,661	537,466	확산형 얼굴 위조 탐지	다운로드
확산얼굴	2024년	분류	시각적	30,000	600,000	DiffusionFace: 확산 기반 얼굴 위조 분석을 위한 포괄적인 데이터 세트를 향하여	다운로드
확산DB-페이스	2024년	분류	시각적	94,120	24,794	확산 딥페이크	다운로드
JourneyDB-페이스	2024년	분류	시각적	94,120	87,833	확산 딥페이크	다운로드

다중 모드 시청각 데이터세트

데이터세트	년도	일	조작된 양식	실제 동영상 수	가짜 동영상 수	종이	링크
가짜AV명사	2021	분류	시각 및 오디오	500	19,500	FakeAVCeleb: 새로운 오디오-비디오 다중 모드 딥페이크 데이터세트	다운로드
TMC	2022년	분류 및 임시 접지	시각 및 오디오	2,563	4,380	신뢰할 수 있는 미디어 챌린지 데이터 세트 및 사용자 연구	-
LAV-DF	2022년	분류 및 임시 접지	시각 및 오디오	36,431	99,873	정말 그런 뜻인가요? 시간적 위조 위치화를 위한 콘텐츠 기반 시청각 딥페이크 데이터 세트 및 다중 모드 방법	다운로드
DefakeAVMiT	2023년	분류	시각 및 오디오	540	6,480	AVoiD-DF: 딥페이크 탐지를 위한 시청각 공동 학습	-
AV-Deepfake1M	2023년	분류 및 임시 접지	시각 및 오디오	286,721	860,039	AV-Deepfake1M: 대규모 LLM 기반 시청각 Deepfake 데이터 세트	다운로드
MMDFD	2023년	분류	시각 및 오디오 및 텍스트	1,500	5,000	MMDFD- 딥페이크 탐지를 위한 다중 모드 사용자 정의 데이터 세트	-
폴리글롯가짜	2024년	분류	시각 및 오디오 및 텍스트	766	14,472	PolyGlotFake: 새로운 다국어 및 다중 모드 DeepFake 데이터 세트	다운로드

다중 모드 텍스트-시각적 데이터세트

데이터세트	년도	일	조작된 양식	실제 이미지-텍스트 쌍 수	가짜 이미지-텍스트 쌍 수	종이	링크
DGM4	2023년	분류 및 공간 접지 및 텍스트 접지	시각 및 텍스트	77,426	152,574	DGM4: 다중 모드 미디어 조작 및 그 이상 감지 및 접지	다운로드

---

단일 모달(시각적) 딥페이크 탐지

수동적 탐지

순진한 탐지

시각적 인공물

1. [CVPR 2024] 일반화 가능한 딥페이크 탐지를 위한 CNN 기반 생성 네트워크의 업샘플링 작업 재고 논문

2. [CVPR 2024] LAA-Net: 품질에 구애받지 않고 일반화 가능한 딥페이크 탐지 논문을 위한 현지화된 Artifact Attention Network

3. [arXiv 2024] 데이터 독립적인 연산자: 일반화 가능한 딥페이크 탐지 논문을 위한 훈련이 필요 없는 아티팩트 표현 추출기

4. [arXiv 2024] AI 생성 이미지 감지 논문에 필요한 것은 단 하나의 간단한 패치입니다

5. [arXiv 2024] GenFace: 대규모 얼굴 위조 벤치마크 및 Cross Appearance-Edge 학습 논문

6. [TMM 2023] GLFF: AI 합성 이미지 검출 논문을 위한 전역 및 로컬 특징 융합

7. [CVPRW 2023] 합성 이미지의 흥미로운 특성: 생성적 적대 네트워크에서 확산 모델까지 논문

8. [arXiv 2023] 확산 노이즈 기능: 정확하고 빠르게 생성되는 이미지 감지 논문

9. [CVPR 2021] 다중주의 딥페이크 탐지 논문

10. [CVPR 2020] 와일드 페이퍼에서 위조 얼굴 검출을 위한 글로벌 텍스처 강화

11. [ICCV 2019] FaceForensics++: 조작된 얼굴 이미지 탐지 학습 논문

12. [WIFS 2018] Mesonet: 소형 얼굴영상 위변조 탐지 네트워크 Paper

일관성 기반

1. [arXiv 2024] 플러그 앤 플레이를 통한 딥페이크 비디오 감지 일반화: 비디오 레벨 블렌딩 및 시공간 어댑터 튜닝 논문

2. [arXiv 2024] UniForensics: 일반 얼굴 표현 논문을 통한 얼굴 위조 탐지

3. [arXiv 2024] 얼굴 위조 영상 탐지를 위한 자연스러운 표현 학습 논문

4. [IJCV 2024] 얼굴 딥페이크 검출 논문의 썸네일 레이아웃을 통한 시공간 불일치 학습

5. [CVPR 2024] 딥페이크 영상 탐지 논문 일반화를 위한 스타일 잠재 흐름 활용

6. [arxiv 2024] 3D 시공간 궤적 기반 압축 딥페이크 영상 탐지 논문

7. [AAAI 2023] 다중 헤드 상대 상호 작용을 통한 소음 기반 딥페이크 탐지 논문

8. [ICCV 2023] TALL: 딥페이크 영상 탐지를 위한 썸네일 레이아웃 논문

9. [CVPR 2023] 보다 일반적인 영상 얼굴 위조 탐지 논문을 위한 AltFreezing

10. [TCSVT 2023] MRE-Net: 딥페이크 영상 탐지를 위한 다중 속도 여기 네트워크 논문

11. [WACV 2023] TI2Net: 딥페이크 탐지를 위한 시간적 신원 불일치 네트워크 논문

12. [ACM MM Asia 2022] 잠재 패턴 센싱: 예측 표현 학습을 통한 딥페이크 영상 탐지 논문

13. [CVPR 2021] 입술은 거짓말을 하지 않습니다: 얼굴 위조 탐지에 대한 일반화 가능하고 강력한 접근 방식 논문

14. [ICCV 2021] 보다 일반적인 영상 얼굴 위조 탐지를 위한 시간적 일관성 탐색 논문

15. [ACM MM 2020] DeepRhythm: 주의를 기울이는 시각적 심장박동 리듬으로 DeepFake 노출

16. [WIFS 2018] Ictu Oculi: 눈 깜빡이는 종이를 감지해 AI가 만든 가짜 영상 노출

고급 탐지

입력 레벨

데이터 증대

1. [arXiv 2024] 일반 딥페이크 탐지를 위한 품질 중심 프레임워크 논문

2. [arXiv 2024] 동적 커리큘럼 문서를 통한 일반 딥페이크 탐지를 향하여

3. [ECCV 2024] 만들 때까지 가짜 만들기: 일반 딥페이크 탐지 논문에 대한 커리큘럼 동적 위조 확대

4. [arXiv 2024] Deepfake 탐지기 훈련에 Deepfake 데이터를 남겨둘 수 있나요? 종이

5. [arXiv 2024] ED4: 딥페이크 탐지를 위한 명시적 데이터 수준 편향성 제거 논문

6. [arXiv 2024] FSBI: 주파수 강화된 자체 혼합 이미지를 사용한 딥페이크 탐지 논문

7. [arXiv 2024] FreqBlender: 주파수 지식 논문을 혼합하여 DeepFake 탐지 강화

8. [ICCV 2023] SeeABLE: 딥페이크 노출을 위한 Soft Discrepancy와 Bounded Contrastive Learning 논문

9. [arXiv 2023] 일반화 가능한 딥페이크 탐지 논문을 위한 잠재 공간 증대로 위조 특이성 초월

10. [CVPR 2022] 자체 혼합 이미지 논문으로 딥페이크 탐지

11. [CVPR 2022] 적대적 예의 자기 지도 학습: 딥페이크 탐지를 위한 좋은 일반화를 향하여 논문

12. [CVPR 2021] 위조안면탐지종이 대표 위변조 채굴

13. [ICCV 2021] 딥페이크 탐지를 위한 학습 자기 일관성 논문

주파수 공간 기반

1. [arXiv 2024] 일반화 가능한 딥페이크 위조 탐지를 위한 웨이블릿 변환 활용 논문

2. [arXiv 2024] 딥페이크 탐지를 위한 다중 컨텍스트 및 빈도 집계 네트워크 논문

3. [AAAI 2024] 주파수 인식 딥페이크 탐지: 주파수 공간 학습 논문을 통한 일반화 가능성 향상

4. [ICASSP 2024] 범용 딥페이크 탐지 종이를 위한 주파수 마스킹

5. [CVPR 2023] 딥페이크 탐지를 위한 콘텐츠 기반 공간-주파수 관계 추론을 통한 동적 그래프 학습 논문

6. [AAAI 2022] FrePGAN: 주파수 수준 섭동을 이용한 강력한 딥페이크 탐지 논문

7. [AAAI 2022] ADD: 저품질 압축 딥페이크 이미지 탐지를 위한 Frequency Attention 및 Multi-View 기반 지식 증류 논문

8. [CVPR 2021] 공간 위상 얕은 학습: 주파수 영역 논문에서 얼굴 위조 탐지에 대한 재고

9. [CVPR 2021] 고주파 특징을 이용한 얼굴 위조 탐지 일반화 논문

10. [CVPR 2021] 얼굴 위조 탐지를 위한 단일 중심 손실을 감독하는 주파수 인식 판별 특징 학습 논문

11. [AAAI 2021] 얼굴 위조 탐지를 위한 로컬 관계 학습 논문

12. [ECCV 2020] Thinking in Frequency: 주파수 인식 단서 마이닝을 통한 얼굴 위조 탐지 논문

모델 수준

변압기 기반

1. [TMM 2024] DIP: 일반 딥페이크 탐지 논문을 위한 불일치 패턴의 확산학습

2. [arXiv 2024] FakeFormer: 일반화 가능한 딥페이크 탐지 논문을 위한 효율적인 취약점 기반 변환기

3. [arXiv 2024] 일반화 가능한 딥페이크 위조 탐지를 위한 웨이블릿 변환 활용 논문

4. [arXiv 2024] 정교한 백본페이퍼를 통한 얼굴 위조 탐지

5. [arXiv 2024] 거인의 어깨 위에 서서: 일반 딥페이크 탐지 논문을 위한 시각 언어 모델 재프로그래밍

6. [arXiv 2024] 안내 및 융합: 일반화 가능한 딥페이크 탐지 논문을 위한 기능 안내 및 다단계 기능 융합을 갖춘 효율적인 Frozen CLIP-ViT

7. [arXiv 2024] 오픈셋 딥페이크 탐지: 위조 스타일 혼합 용지를 사용한 매개변수 효율적인 적응 방법

8. [arXiv 2024] 딥페이크 탐지 논문을 위한 Vision Transformer에 대한 시기적절한 설문 조사

9. [arXiv 2024] 딥페이크 탐지를 위한 Self-Supervised Vision Transformers 탐색: 비교 분석 논문

10. [arXiv 2024] 전송 가능한 AI 생성 이미지 검출 논문을 위한 하위 전문가의 혼합

11. [arXiv 2024] MoE-FFD: 일반화되고 매개변수 효율적인 얼굴 위조 탐지 논문을 위한 전문가의 혼합

12. [CVPR 2023] AUNet: 얼굴 위조 탐지를 위한 Action Unit 간의 관계 학습 논문

13. [ACM MM 2023] UMMAFormer: 시간 위조 현지화를 위한 범용 멀티모달 적응형 변환기 프레임워크 논문

14. [ICCVW 2023] Undercover Deepfakes: 비디오 용지에서 가짜 세그먼트 탐지

15. [arXiv 2023] DeepFake-Adapter: DeepFake 탐지용 듀얼 레벨 어댑터

16. [MIPR 2023] Low-Rank Adaptation Paper를 이용한 Vision Transformer를 통한 일반 얼굴 위조 탐지 강화

VLM 기반

1. [arXiv 2024] Vision Foundation 모델 논문을 통해 훈련이 필요 없는 AI 생성 이미지 감지 이해 및 개선

2. [arXiv 2024] 포렌식 어댑터: 일반화 가능한 얼굴 위조 탐지 문서에 CLIP 적용

3. [arXiv 2024] ForgeryGPT: 설명 가능한 이미지 위조 탐지 및 현지화를 위한 다중 모드 대형 언어 모델 논문

4. [ACCV 2024] DPL: 듀얼 프로그레시브 학습 논문을 통한 교차 품질 딥페이크 탐지

5. [WACV 2025] DeCLIP: 딥페이크 현지화를 위한 CLIP 표현 디코딩 논문

6. [arXiv 2024] X2-DFD: 설명 가능하고 확장 가능한 딥페이크 탐지를 위한 프레임워크 논문

7. [arXiv 2024] MFCLIP: 일반화 가능한 확산형 얼굴 위조 탐지 용지를 위한 다중 모달 세밀한 CLIP

8. [arXiv 2024] FFAA: 멀티모달 대형 언어 모델 기반 설명 가능한 오픈 월드 얼굴 위조 분석 보조 논문

9. [arXiv 2024] C2P-CLIP: 딥페이크 탐지 논문의 일반화를 강화하기 위해 CLIP에 카테고리 공통 프롬프트를 삽입

10. [arXiv 2024] GM-DF: 일반화된 다중 시나리오 딥페이크 탐지 논문

11. [arXiv 2024] 기초 모델 종이의 얼굴 특징 유도 적응을 통한 보다 일반적인 비디오 기반 딥페이크 탐지를 향하여

12. [arXiv 2024] FakeBench: 대형 멀티모달 모델 논문을 통해 가짜 이미지의 아킬레스건 발견

13. [CVPR 워크숍 2024] ChatGPT가 DeepFake를 탐지할 수 있나요? 미디어 포렌식을 위한 다중 모드 대형 언어 모델 사용에 관한 연구 논문

14. [arXiv 2024] SHIELD: 다중 모달 대형 언어 모델을 사용한 얼굴 스푸핑 및 위조 탐지를 위한 평가 벤치마크 논문

15. [arXiv 2024] 딥페이크 탐지를 위한 상식추론 논문

16. [ACM ICMRW 2024] 딥페이크 탐지를 위한 설명 가능한 AI 방법의 정량적 평가를 향하여 논문

17. [arxiv 2023] 얼굴 위조 탐지 논문을 위한 위조 인식 적응형 비전 변환기

18. [arXiv 2023] 일반 시각언어 얼굴 위조 탐지 논문을 향하여

학습 수준

고급 손실

1. [ToMM 2024] 일반 딥페이크 탐지를 위한 도메인 불변 및 패치 판별 특징 학습 논문

2. [ICME 2023] 일반 얼굴 위조 탐지를 위한 도메인 불변 특징 학습 논문

3. [ICDM 2023] 얼굴 위조 탐지 논문을 위한 동심 링 손실

풀린 표현

1. [arXiv 2024] 딥페이크 탐지 논문을 위한 점진적인 분리 및 혼합 신원 정화를 통해 유물 캡처

2. [CVPR 2024] 딥페이크 탐지 논문의 공정성 일반화 유지

3. [arXiv 2024] 일반화 가능한 딥페이크 탐지 논문을 위한 위조 의미론 분리

4. [arXiv 2023] 심층 정보 분해 논문을 통한 데이터세트 간 딥페이크 탐지 개선

5. [ICCV 2023] UCF: 일반화 가능한 딥페이크 탐지 논문의 공통 기능 발굴

6. [ECCV 2022] 얼굴 위조 탐지 논문을 위한 풀린 콘텐츠 정보 탐색

재건

1. [CVPR 2023] MARLIN: 얼굴 영상 표현을 위한 Masked Autoencoder 학습 논문

2. [CVPR 2022] 얼굴 위조 탐지 논문을 위한 엔드 투 엔드 재구성 분류 학습

3. [IJCAI 2021] 스펙트럼 너머: 재합성 논문을 통한 딥페이크 탐지

4. [CVPRW 2020] OC-FakeDect: One-class Variational Autoencoder 논문을 이용한 딥페이크 분류

조작 현지화

1. [CVPR 2024] EditGuard: 변조 현지화 및 저작권 보호를 위한 다양한 이미지 워터마킹 문서

2. [WACV 2024] 확산 생성 이미지의 약한 감독 딥페이크 위치화 논문

3. [arXiv 2024] Delocate: 무작위로 위치가 변조된 흔적지를 사용한 딥페이크 동영상 탐지 및 위치화

4. [CVPR 2023] MaLP: Proactive Scheme을 이용한 조작 현지화 논문

5. [CVPR 2023] 암묵적 신원 유출: 딥페이크 탐지 일반화 논문 개선의 걸림돌

6. [ACM MM 2023] 위치 파악 및 검증: 향상된 딥페이크 탐지를 위한 2스트림 네트워크 논문

7. [CVPR 2020] 보다 일반적인 얼굴 위조 탐지 논문을 위한 얼굴 엑스레이(Face X-Ray)

8. [CVPR 2020] 디지털 얼굴 조작 종이 탐지에 대하여

신원 불일치

1. [NeurIPS 2024] DiffusionFake: Guided Stable Diffusion Paper를 통한 딥페이크 탐지 일반화 강화

2. [CVPR 2023] 암묵적 신원 기반 딥페이크 얼굴 스와핑 탐지 논문

3. [CVPR 2022] 신원 일관성 트랜스포머 페이퍼로 유명인을 DeepFake로부터 보호하다

4. [TPAMI 2021] 얼굴과 컨텍스트 페이퍼의 불일치를 기반으로 한 DeepFake 탐지

5. [ICCV 2021] ID-Reveal: 신원인식 DeepFake 영상 탐지 논문

지식 증류

1. [arXiv 2023] DomainForensics: 양방향 적응 논문을 통해 도메인 전반에 걸쳐 얼굴 위조 노출

2. [AAAI 2022] ADD: 저품질 압축 딥페이크 이미지 탐지를 위한 Frequency Attention 및 Multi-View 기반 지식 증류 논문

3. [ACM MM 2021] CoReD: 증류지를 이용한 연속 표현으로 위조 미디어 탐지 일반화

4. [CVPRW 2021] FReTAL: 지식 증류 및 표현 학습을 이용한 딥페이크 탐지 일반화 논문

5. [Journal of Mathematical Imaging and Vision 2015] Sliced ​​및 Radon Wasserstein Barycenters of Measures 논문

세분화된 예측

1. [arXiv 2024] DeepFake 탐지를 위한 의미 중심 멀티태스크 학습: 공동 임베딩 접근 방식 논문

2. [ToMM 2024] Deepfake 탐지 마스터링: GAN 및 확산 모델 이미지 구별을 위한 최첨단 접근 방식 논문

3. [CVPR 2023] 계층적 세밀한 이미지 위조 탐지 및 위치화 논문

4. [ICCV 2023] 일반화 가능한 얼굴 위조 탐지 용지를 위한 제어 가능한 가이드 스페이스

확산 모델 감지

1. [arXiv 2024] 위조 이미지 탐지를 위한 데이터 세트 정렬의 효율성에 관한 논문

2. [CVPR 2024] LaRE^2: 확산 생성 이미지 검출 논문을 위한 잠재 재구성 오류 기반 방법

3. [VISAPP 2024] 확산모델 딥페이크 종이 탐지를 향하여

4. [arXiv 2024] 확산형 얼굴 위조 탐지 논문

5. [ICCV 2023] 확산형 이미지 검출 용지 'DIRE'

6. [ICASSP 2023] 확산모델을 통해 생성된 합성영상 검출에 관한 논문

7. [ICCVW 2023] Local Intrinsic Dimensionality Paper를 활용하여 Deep Diffusion 모델에서 생성된 이미지 검출

8. [ICMLW 2023] 가짜 노출: 효과적인 확산 생성 이미지 탐지 논문

순차적 딥페이크 탐지

1. [ECCV 2022] 순차적 딥페이크 조작 종이 탐지 및 복구

2. [arXiv 2023] 강력한 순차적 딥페이크 탐지 논문

3. [CVPR 2024] 다중 라벨 순위 논문을 통한 DeepFake 분류 및 위치화를 위한 대조 학습

4. [TIFS 2024] 순차적 딥페이크 탐지 자원을 위한 다중 협업 및 다중 감독 네트워크 논문

5. [Transactions on Consumer Electronics 2024] 소비자 IoT 논문에서 Spectral With Pyramid Attention을 통한 순차적 딥페이크 조작 탐지

사전 예방적 탐지

GAN을 위한 사전 예방적 방법

1. [arXiv 2024] 눈에 보이는 곳에 얼굴 숨기기: 얼굴 감지 종이를 방해하여 DeepFake 방어

2. [arXiv 2024] 얼굴 특징의 중요성: 동적 워터마크 기반 사전 예방적 딥페이크 탐지 접근 방식 논문

3. [arXiv 2024] ID-Guard: 신분증 파괴를 통한 얼굴 조작 방지를 위한 범용 프레임워크

4. [IJCAI 2024] 워터마크는 딥페이크 탐지기의 버그인가? 사전 예방적 법의학 보고서 재고

5. [TIFS 2024] 듀얼 디펜스: 얼굴 교환 종이에 대한 적대적이고 추적 가능하며 보이지 않는 강력한 워터마킹

6. [CVPR 2023] MaLP: Proactive Scheme을 이용한 조작 현지화 논문

7. [ACM MM 2023] SepMark: 통합 소스 추적 및 딥페이크 탐지를 위한 심층 분리 워터마킹 기술

8. [arXiv 2023] 특징 추출이 더 중요함: 앙상블 특징 추출기 공격을 통한 범용 딥페이크 중단 논문

9. [arXiv 2023] 딥페이크 얼굴 교환 종이에 대한 강력한 신원 인식 워터마크

10. [CVPR 2022] 사전적 이미지 조작 탐지 논문

11. [ICLR 2022] 확장 가능한 지문 인식 용지를 활용한 생성 모델의 책임 있는 공개

12. [ECCV 2022] TAFIM: 얼굴 이미지 조작에 대한 표적적 적대 공격 논문

13. [AAAI 2022] CMUA-Watermark: 딥페이크 종이에 맞서기 위한 크로스모델 범용 적대 워터마크

14. [IJCAI 2022] 위조 방지: 적대적 지각 인식 섭동을 통한 은밀하고 강력한 DeepFake 중단 공격을 향하여 논문

15. [AAAI 2021] 안면조작에 대한 선제적 방어 논문

16. [CVPRW 2020] 딥페이크 파괴: 조건부 이미지 번역 네트워크 및 얼굴 조작 시스템에 대한 적대적 공격 논문

17. [WACVW 2020] 적대적 공격으로 이미지 변환 기반 DeepFake 알고리즘 파괴 논문

확산 모델을 위한 사전 예방적 방법

1. [ICLR 2024] 진단: 텍스트-이미지 확산 모델에서 무단 데이터 사용 감지 논문

2. [NeurIPSW 2024] DiffusionShield: 생성 확산 모델에 대한 데이터 저작권 보호를 위한 워터마크 논문

3. [ICCV 2023] The Stable Signature: Rooting Watermarks in Latent Diffusion Models 논문

4. [TPS-ISA 2023] 오디오 생성 확산 모델을 위한 보이지 않는 워터마킹 논문

5. [arXiv 2023] 워터마킹 확산 모델 레시피 논문

6. [arXiv 2023] LEAT: 잠재 앙상블 공격 논문을 통해 실제 시나리오에서 강력한 딥페이크 중단을 향하여

---

다중 모드 딥페이크 탐지

시청각 딥페이크 탐지

독립적 학습

1. [Applied Soft Computing 2023] AVFakeNet: 시청각 딥페이크 감지를 위한 통합 엔드투엔드 Dense Swin 딥러닝 모델 논문

2. [APSIPA ASC 2022] 앙상블 학습 논문을 활용한 다중모달 위변조 탐지

3. [ICCV 2021] 공동 시청각 딥페이크 탐지 논문

4. [ACM MMW 2021] 유니모달 및 멀티모달 탐지기를 이용한 오디오-비디오 멀티모달 딥페이크 데이터세트 평가 논문

공동 학습

중간융합

교차주의

1. [BMVC 2024] 세밀한 불일치 논문으로 시청각 딥페이크 탐지

2. [arXiv 2024] 시청각 딥페이크 탐지 및 위치 파악을 위한 상황별 교차 모달 주의 논문

3. [TIFS 2023] AVoiD-DF: 딥페이크 종이 탐지를 위한 시청각 공동 학습

4. [arXiv 2022] 가짜 말하는 얼굴 영상 탐지를 위한 시청각 주의 기반 멀티모달 네트워크 논문

5. [ICCV 2021] 공동 시청각 딥페이크 탐지 논문

후기 융합

연결 및 추가

1. [arXiv 2024] 멀티모달 딥페이크 탐지 논문을 위한 시청각 기능 통합

2. [arXiv 2024] AVT2-DWF: 시청각 융합 및 동적 가중치 전략을 통한 딥페이크 탐지 개선 논문

3. [이미지커뮤니케이션 2023] 딥페이크 탐지를 위한 다중모달 위변조 단서 확대 논문

4. [arXiv 2023] DF-TransFusion: 립-오디오 크로스 어텐션 및 얼굴 셀프 어텐션 페이퍼를 통한 멀티모달 딥페이크 탐지

5. [DICTA 2022] 정말 그런 뜻인가요? 콘텐츠 기반 시청각 딥페이크 데이터세트 및 시간적 위조 현지화를 위한 다중 모드 방법 논문

6. [APSIPA ASC 2022] 앙상블 학습 논문을 활용한 다중모달 위변조 탐지

7. [ACM MMW 2021] 유니모달 및 멀티모달 탐지기를 이용한 오디오-비디오 멀티모달 딥페이크 데이터세트 평가 논문

주목

1. [ICASSP 2024] 시청각 딥페이크 탐지를 위한 교차 양식 및 양식 내 정규화 논문

2. [arXiv 2024] AVT2-DWF: 시청각 융합 및 동적 가중치 전략을 통한 딥페이크 탐지 개선 논문

3. [arXiv 2023] MIS-AVoiDD: 시청각 딥페이크 탐지를 위한 양식 불변 및 특정 표현 논문

MLP 믹서 레이어

1. [CVPRW 2023] Multimodaltrace: 시청각 표현 학습 논문을 이용한 딥페이크 탐지

다중 작업 전략

1. [arXiv 2024] DiMoDif: 시청각 딥페이크 탐지 및 위치 파악을 위한 담론 양식 정보 차별화 논문

2. [ICME 2024] 일반화 가능한 크로스 모달 딥페이크 탐지를 위한 명시적 상관 학습 논문

3. [TIFS 2023] AVoiD-DF: 딥페이크 종이 탐지를 위한 시청각 공동 학습

4. [CVPRW 2023] Multimodaltrace: 시청각 표현 학습 논문을 이용한 딥페이크 탐지

5. [arXiv 2024] 멀티모달 딥페이크 탐지 논문을 위한 시청각 기능 통합

6. [ICCV 2021] 공동 시청각 딥페이크 탐지 논문

정규화

1. [ICASSP 2024] 시청각 딥페이크 탐지를 위한 교차 양식 및 양식 내 정규화 논문

2. [TIFS 2023] AVoiD-DF: 딥페이크 종이 탐지를 위한 시청각 공동 학습

3. [이미지커뮤니케이션 2023] 딥페이크 탐지를 위한 다중모달 위변조 단서 확대 논문

4. [arXiv 2023] MIS-AVoiDD: 시청각 딥페이크 탐지를 위한 양식 불변 및 특정 표현 논문

매칭 기반 학습

1. [ICIP 2024] 통계인지형 시청각 딥페이크 탐지기 논문

2. [ToMM 2023] 음성-얼굴의 동질성이 딥페이크 종이를 말해준다

3. [arXiv 2023] 내부 및 교차 모드 불일치를 이용한 비지도 다중 모드 딥페이크 탐지 논문

기타

1. [arXiv 2024] 비지도 학습을 통한 시청각 딥페이크 탐지 데이터세트의 지름길 우회 논문

2. [CVPR 2024] AVFF: 비디오 딥페이크 탐지를 위한 시청각 기능 융합 논문

3. [CVPR 2023] 시청각 변칙탐지 논문을 통한 자율영상포렌식

4. [ToMM 2023] 설명 가능한 딥페이크 탐지 논문을 위한 다중 모드 신경 기호 접근 방식

5. [TCSVT 2023] PVASS-MDD: 멀티모달 딥페이크 탐지를 위한 예측적 시각-오디오 정렬 자가 감독 논문

6. [CVPRW 2023] 시청각 관심자 딥페이크 탐지 논문

시각적 텍스트 딥페이크 탐지

1. [TPAMI 2024] 종이 너머의 다중 모드 미디어 조작 감지 및 접지

2. [ICASSP 2024] 다중 모달 조작 감지 및 접지 논문을 위한 모달리티별 기능 활용

3. [ICME 2024] 인공물 적대적 제거를 통한 얼굴 위조 탐지를 위한 반사실적 설명 논문

4. [arXiv 2023] 다중 모드 조작 감지 및 접지를 위한 통합 주파수 지원 프레임워크 논문

5. [CVPR 2023] 다중 모드 미디어 조작 용지 감지 및 접지

도전

1. [ACM MM 2024] 1M-딥페이크 탐지 챌린지 논문

---

신뢰할 수 있는 딥페이크 탐지

적대적 공격

1. [ECCVW 2024] 딥페이크 탐지 논문에서 초해상도 공격의 강점과 약점 탐색

2. [arXiv 2024] 초고해상도 종이를 통해 딥페이크 탐지를 속이는 적대적 확대

3. [AAAI 2024] TraceEvader: 위조 모델 저작자 표시 회피를 통해 DeepFake를 더 추적 불가능하게 만들기

4. [ICASSP 2024] AdvShadow: Adversarial Shadow Attack 논문을 통한 DeepFake 탐지 회피

5. [CVPR 2023] 속성 조건부 적대 얼굴 논문으로 포렌식 분류기 회피

6. [ICCV 2023] 적대적 조작 생성을 위한 주파수 인식 GAN 논문

7. [TCSVT 2023] 암시적 공간 영역 노치 필터링 논문을 통한 DeepFake 탐지 회피

8. [arXiv 2023] 얼굴 위조 탐지 논문에 대한 의사결정 기반 블랙박스 공격 탐색

9. [arXiv 2023] 얼굴 위조 탐지 논문에 대한 의사결정 기반 블랙박스 공격 탐색

10. [arXiv 2023] AVA: DeepFake 탐지 논문을 우회하는 눈에 띄지 않는 속성 변형 기반 적대적 공격

11. [arXiv 2023] 가짜를 현실로 바꾸기: 딥페이크 탐지 논문에 대한 적대적 공격

12. [CVPR 2022] 얼굴 위조 탐지를 위한 주파수 적대 공격 탐색 논문

13. [WDCW 2022] 적대적 섭동 논문을 통한 시퀀스 기반 딥페이크 탐지 모델의 견고성 평가

14. [ICIP 2021] 가짜 이미지 탐지 논문에 대한 눈에 띄지 않는 적대적 사례

15. [CVPRW2021] DeepFake 탐지에 대한 적대적 위협: 실용적인 관점의 논문

16. [WACV 2021] 적대적 딥페이크(Adversarial Deepfakes): 적대적 예시 논문에 대한 딥페이크 탐지기의 취약성 평가

17. [CVPRW 2020] 화이트박스 및 블랙박스 공격으로 딥페이크 이미지 탐지기 회피 논문

18. [ECCVW 2020] RL 기반 텍스처 패치를 이용한 딥페이크 탐지에 대한 적대적 공격 논문

19. [IJCNN 2020] Adversarial Perturbations Fool Deepfake Detectors 논문

백도어 공격

1. [ICLR 2024] 중독된 위조 얼굴: 얼굴 위조 탐지 논문에 대한 백도어 공격을 향하여

2. [arXiv 2024] 자연 트리거로 백도어 얼굴 위조 탐지가 가능합니까? 종이

3. [빅다이아 2023] Real is not True: 딥페이크 탐지 논문에 대한 백도어 공격

불일치 최소화

1. [AAAI 2024] 대조 학습 기반 STIG(Spectrum Translation for Refinement of Image Generation) 및 스펙트럼 필터 프로파일 논문

2. [WACVW 2024] 노이즈 제거 확산 모델로 생성된 공격에 대한 DeepFake 탐지기의 취약성 논문

3. [CVPR 2023] 적대적 통계적 일관성 논문을 통한 DeepFake 탐지기 회피

4. [신뢰할 수 있고 안전한 컴퓨팅에 대한 IEEE 거래 2023] DeepFakes를 더욱 허위로 만들기: 흔적 제거 공격을 통한 심층 얼굴 위조 탐지 회피 논문

5. [CVPR 2022] Spectral Domain Imprints Paper에서 GAN으로 생성된 가짜 이미지를 탐지하기 전에 두 번 생각하세요

6. [ACM MM 2022] 적대적 시각적 재구성 논문을 통한 DeepFake 퇴치

7. [CVPR 2021] 얼굴 매니폴드 페이퍼에서 적대적 가짜 이미지 탐색

8. [ACM MM 2020] FakePolisher: Shallow Reconstruction Paper로 DeepFake의 탐지 회피성을 높임

9. [arXiv 2020] FakeRetouch: 고의적인 노이즈 페이퍼를 활용하여 DeepFakes 탐지 회피

방어 전략

1. [WACV 2024] D4: Disjoint Ensembles Paper를 이용한 적대적 확산 딥페이크 탐지

2. [TIFS 2024] DF-RAP: 실제 소셜 네트워크 시나리오에서 딥페이크 방어를 위한 강력한 적대적 교란 논문

3. [ICMM 2024] 적대적 특징 유사성 학습 논문을 통한 적대적으로 강력한 딥페이크 탐지

4. [arXiv 2024] 딥페이크 탐지기에 대한 XAI 기반 적대적 공격 탐지 논문

5. [FG 2023] FaceGuard: 적대적인 얼굴 이미지에 대한 자기 감독 방어 논문

6. [IEEE 심포지엄 시리즈 컴퓨팅 지능 2022] 적대적으로 강력한 딥페이크 영상 탐지 논문

7. [Journal of Electronic Imaging 2021] EnsembleDet: 딥페이크 탐지에 대한 적대적 공격에 대한 앙상블 논문

8. [arXiv 2021] 융합 컨벌루션 신경망 예측을 사용한 적대적으로 강력한 딥페이크 미디어 탐지 논문

---

효율적인 딥페이크 탐지

1. [arXiv 2024] 실제 논문에서 실시간 딥페이크 탐지

2. [CVPR 2024 DFAD 워크샵] 거짓말보다 빠르게: 바이너리 신경망을 이용한 실시간 딥페이크 탐지 Paper

---

개인 정보 보호 딥페이크 탐지

1. [arXiv 2024] 개인화된 표현 논문을 활용한 연합 얼굴 위조 탐지 학습

2. [TIFS 2023] FedForgery: 잔여 연합 학습을 이용한 일반화된 얼굴 위조 탐지 논문

3. [2022 IEEE 24차 멀티미디어 신호 처리 국제 워크숍(MMSP)] 데이터 프라이버시 보호 논문을 통한 딥페이크 탐지