한장의 사진이나 그림으로 살아있는 초상화를 만드는 삼성의 신기술

한장의 사진이나 그림으로 살아있는 초상화를 만드는 삼성의 신기술

현대 기술이 너무 빨리 개선 되면서 우리는 이 발전이 유용 하거나 단순히 우리 사회에 독성이 있는지에 대해 생각할 시간이 

없어 보인다. 

최근 많은 사람들이 인터넷을 통해 표면화 된 "딥 페이크(deepfakes)"에 대해 우려를 보이고 있다. 

간단히 말해서 deepfakes는 비디오에 다른사람 얼굴을 넣을 수 있는 가능성을 제공 하며,이는 사람의 동의 없이 

불법 가짜 콘텐츠를 만들 수 있는 많은 기회를 제공한다. 

지금 이 기술은 더 개선됨과 동시에 놀라운 아주 무서운 기술이 될것이다.

최근 모스크바의 Samsung AI 연구실 개발자들은 새로운 차원의 deepfakes를 가져오는 새로운 도구를 만들었다.

그들은 "살아있는 초상화"라고 할수 있는것을 창조했고 그들이 필요로 하는 것은 가짜 비디오로 전환 할수 있는 하나의 사진이다.

이 발견은 소수 샷 및 원샷 학습이라고 불리며 필요한 모든 것은 애니메이션 이미지로 전환하는 단일 이미지이다.

 사실 몇 가지 샷을 추가로 제공하면 그 결과는 더욱 두드러진다.

그러나 모든 사람들을 가장 놀라게 한것은 이 기술이 가장 상징적인 이미지를 쉽게 애니메이션 할 수 있다는 사실이다.

최근의 논문에서 연구원 들은 이 기술을 만드는 이유를 설명했다. 

"최근의 몇몇 작품들은 나선형 신경망을 훈련하여 매우 사실적인 인간머리 이미지를 얻을 수 있다는 것을 보여주었다. 

개인화된 이야기 헤드모델을 만들기 위해 이 작품은 한 사람의 이미지의 큰 데이터 세트에 대한 교육이 필요하다. 

그러나 많은 실용적인 시나리오에서 이러한 개인화된 이야기 헤드 모델은 사람의 몇 가지 이미지 보기에서 배워야할 필요가 

잠재적으로 하나의 이미지이다. 

우리는 이러한 몇 가지 촬영 능력을 가진 시스템을 제시 한다. "

"비디오의 대형 데이터 세트에 대해 오랜 시간동안 메타 학습을 수행한 후에는 대용량 생성기 및 판별자에 대한 적법한 

교육 문제로 이전에는 볼 수 없었던 사람들의 신경 토킹 헤드 모델에 대한 단발 및 단발 학습을 할 수있게 되었다."

"결정적으로 시스템은 개인별 방법으로 생성기와 판별기 매개 변수를 초기화 할 수 있으므로 수천만개의 매개 변수를 

조정할 필요가 있더라도 교육을 단지 몇 개의 이미지를 기반으로 신속하게 수행 할 수 있다. 

우리는 그러한 접근방식이 새로운 사람들과 심지어 초상화 그림의 매우 사실적이고 개인화된 토크 헤드 모델을 배울 수 

있음을 보여준다. "

발표 비디오에서 연구자들은 제공된 다른 앵글에서 사진의 양이 많을수록 결과가 더 현실적이라는 것을 보여준다.

"현재 우리 방법의 핵심 한계는 모방 표현이다. (특히, 현재의 랜드마크 세트는 어떤 방식으로든 시선을 나타내지 않음)

그리고 랜드마크 적응이 부족하다. 

다른 사람의 표식을 사용하면 눈에 띄는 성격이 일치하지 않게된다. 

따라서 이러한 불일치없이 "가짜"인형극 동영상을 제작하려면 몇 가지 획기적인 개작이 필요하다. 

"개발자는이 기술을 설명하면서 논문을 추가했다.

새로운 기술에 대한 자세한 내용은 비디오를 시청하세오.

많은 사람들이 이러한 "살아있는 초상"에 놀라지만 미래에 사용할 수있는 것에 대한 우려도 나타 냈다.