“카메라는 절대 거짓말을 하지 않는다”는 생각은 지난 세기에 나온 것입니다.

새로운 컴퓨터 프로그램은 매력적인 방식으로 비디오를 조작할 수 있습니다. 화면에 있는 사람이 다른 비디오에 있는 사람의 움직임과 표정을 미러링할 수 있습니다. 그리고 이 프로그램은 얼굴 표정 이상의 것을 조작할 수 있습니다. 또한 머리와 몸통의 자세와 눈의 움직임을 조정할 수 있습니다. 결과: 매우 생생한 가짜.

연구원들은 8월 16일 캐나다에서 비디오 마법을 선보였습니다. 그들은 브리티시 컬럼비아주 밴쿠버에서 열린 2018 SIGGRAPH 회의에 참가하고 있었습니다.

이러한 비디오 위조는 “놀랍도록 사실적”이라고 Adam Finkelstein은 말합니다. 그는 작업에 참여하지 않은 뉴저지 프린스턴 대학의 컴퓨터 과학자입니다. 배우의 입술이 보이스오버와 완벽하게 일치하도록 움직이는 더빙 영화를 만드는 이 시스템을 상상해 보십시오. 그러면 죽은 배우가 새 영화에 출연할 수 있습니다. 컴퓨터는 단순히 오래된 영상을 사용하여 배우를 되살리면 이제 다른 사람의 행동에 말하고 응답할 수 있다고 그는 말합니다.

더 걱정스러운 점은 이 기술이 인터넷 사용자에게 가짜 뉴스를 전체 수준으로 가져올 수 있는 힘을 줄 수 있다는 것입니다. 완전히 사실적으로 보이는 가짜 비디오에 공인을 넣을 수 있습니다.

컴퓨터는 두 개의 비디오를 프레임별로 스캔하는 것으로 시작합니다. 사람의 66개 얼굴 “랜드마크”를 추적합니다. 이러한 랜드마크는 눈, 코 및 입을 따라 있는 지점일 수 있습니다. 각 프레임의 위치를 플로팅하여 기본적으로 입술, 머리 기울기, 눈이 향하는 위치와 같은 기능이 프레임 간에 이동하는 방식을 매핑할 수 있습니다.

한 테스트에서 이 시스템은 버락 오바마 전 대통령의 표정과 움직임을 블라디미르 푸틴 러시아 대통령에게 반영했습니다. 이를 위해 프로그램은 푸틴의 이미지를 왜곡했습니다. 그것은 푸틴을 변형시켜 그의 얼굴과 몸에 있는 랜드마크가 이제 오바마 비디오에 있는 것과 프레임별로 일치하도록 했습니다.

이 프로그램은 또한 그림자를 조정할 수 있습니다. 푸틴의 머리카락을 바꿀 수 있습니다. 새로운 머리 포즈에 맞게 어깨 높이를 조정할 수도 있습니다. 그 결과 푸틴이 오바마를 섬뜩할 정도로 정확하게 흉내내는 영상이 나왔다.

컴퓨터 과학자인 Christian Theobalt는 독일 Saarbrücken에 있는 Max Planck Institute for Informatics에서 근무하고 있습니다. 그의 팀은 135명의 지원자를 대상으로 프로그램을 테스트했습니다. 그들 모두는 실제 비디오와 위조 비디오의 5초 클립을 시청했습니다. 그 후 그들은 클립이 진짜인지 가짜인지 보고했습니다.

가짜는 절반 정도 시청자를 속였습니다. 그리고 이 사람들은 조작된 영상을 평소보다 더 의심했을 수도 있습니다. 결국, 그들은 연구에 참여하고 있다는 것을 알았습니다. 그들은 집에서 온라인으로 비디오를 보기만 했다면 비디오를 의심할 이유가 훨씬 적었을 것입니다. 테스트 참여자들이 진짜 영상을 볼 때도 영상 5개 중 1개는 진짜인지 의심하는 경향이 있었다.

새로운 소프트웨어는 완벽하지 않습니다. 고정된(움직이지 않는) 카메라로 촬영한 비디오만 조정할 수 있습니다. 변함없는 배경 앞에서 누군가의 머리와 어깨도 액자에 넣어졌을 것이다. 그리고 시스템은 누군가의 포즈를 너무 많이 바꿀 수 없습니다. 예를 들어, 푸틴이 카메라를 향해 직접 말하는 클립은 그가 돌아서도록 편집할 수 없었습니다. 왜? 소프트웨어는 푸틴의 머리 뒤가 어떻게 생겼는지 알지 못할 것입니다.

그럼에도 불구하고 이러한 유형의 디지털 인형극이 위험한 잘못된 정보를 퍼뜨리는 데 어떻게 사용될 수 있는지 상상할 수 있습니다.

Kyle Olszewski는 로스앤젤레스에 있는 University of Southern California의 컴퓨터 과학자입니다. “이 물질을 개발하고 있는 연구원들은 시대를 앞서가고 있습니다.”라고 그는 말합니다. 운이 좋다면 그들이 가능하다고 보여준 것이 다른 사람들이 인터넷 비디오를 더 회의적으로 취급하도록 장려할 수 있다고 그는 말합니다.

또한 그는 “이러한 유형의 조작을 수행하는 방법을 배우는 것은 [또한] 이를 감지하는 방법을 이해하는 단계입니다.”라고 덧붙입니다. 예를 들어, 미래의 컴퓨터 프로그램은 가짜 동영상을 찾아내는 전문가가 되기 위해 진짜 동영상과 위조 동영상의 세부 사항을 조사할 수 있습니다.