미 육군 특수부대원들이 딥페이크와 드론을 이용해 정보전 훈련을 하는 방법

음성 샘플과 게임용 노트북으로 이 육군 심리 작전 교관은 피자 주문, 의사에게 전화하기, 또는 그냥 안녕하세요 등 무엇이든 말하는 것처럼 보이게 할 수 있습니다.

평시에는 당략이다. 전쟁에서는 적병의 목소리를 흉내 내어 속임수를 쓰거나 적을 함정에 빠뜨리거나 귀순을 부추길 수 있는 도구이다.

유령 기계라고 불리는 이 도구는 육군 특수작전군 교관들이 병사들을 목표로 하고 영향을 미칠 수 있는 정부의 능력을 얼마나 값싸고 쉽게 구할 수 있는 기술로 변화시키고 있는지를 작전원들에게 가르치는 데 도움이 된다.

고스트 머신의 기본 아이디어는 새로운 것이 아닙니다. 최소한 제 2차 세계 대전 이후로 군대는 연합군의 항복을 격려하기 위해 협력자들의 목소리를 방송해 왔습니다. 2010년대에 ARSOF 멤버들은 멤버들의 가족들의 메시지를 방송함으로써 우간다 군벌 조셉 코니의 군대 내에서 망명을 장려했습니다.

그러나 그런 음성 방송은 화자의 실제적인 존재와 기꺼이 참여할 것을 요구했다. 이제, ARSOF 병사는 이론적으로 가로채어진 통신이나 공공 데이터로부터 적의 지휘관의 목소리를 복사할 수 있고, 그들의 지휘관이 잡혔다고 생각하도록 속이는 데 사용할 수 있다.

강사는 ARSOF의 연례 역량 훈련 기간 동안 심리전 기술을 보여주는 스탠드에서 "주요 제한 사항은 하드웨어와 프로그램을 훈련시킬 데이터의 양"이라고 말했다.

"성능이 낮은 하드웨어를 가지고 있다면, 조금 더 많은 데이터가 필요합니다. 고성능 하드웨어를 가지고 있다면, 단 1분 또는 30초의 [오디오]만으로도 복제에 탁월한 일을 할 수 있을 것입니다."라고 육군 특수 작전 정책 때문에 자신의 이름인 아킬레스로 부르라고 요청한 강사는 말했다.

아킬레스는 "고스트 머신은 특히 데이터의 양 덕분에 ARSOF 훈련 시나리오를 위해 가짜 팟캐스트를 운영하는 남성의 목소리를 복제하는 데 능숙하다"고 말했다.

아킬레스는 "우리는 그의 오디오를 기가바이트(GB)로 가지고 있다"며 "[고스트 머신]에서 그의 목소리를 사용하면 완벽하다"고 말했다. 그는 "카피가 너무 훌륭하고 팟캐스터의 호흡 패턴과 일시 정지까지 정확하게 만들어낸다"고 덧붙였다.

고스트 머신에 탑재된 한 예에서, 이 프로그램은 가상의 중국 적군 사령관이 그의 군대에게 항복하라고 말하는 것을 복제했다.

아킬레스는 영어로 된 메시지를 중국어로 번역하는 데 사용되는 자동 번역 위젯의 정확성에 대해 말을 할 수 없었다. 하지만 그는 모국어 사용자로서의 지식을 바탕으로 스페인어 번역이 "정말 잘 했다"고 말했다.

아킬레스는 군인들을 소프트웨어 디자이너로 훈련시키기 위해 특별 작전 자금이 지원되는 프로젝트를 거쳤고, 그 후 프로젝트를 시작하는 것을 도왔습니다. 그것은 한 기계 학습 공학자 계약자에 의해 설계되었고, 제작부터 최종 제품까지 약 6주가 걸렸습니다.

그는 프로그램의 주요 비용은 아킬레스를 훈련시키는 것과 계약자를 고용하는 것이었다고 말했다. 이 프로그램의 인터페이스는 오픈 소스인 그라디오 앱에서 실행되며, 알고리즘은 상업적으로 이용 가능한 인공지능 모델에 의해 작동된다.

아킬레스는 연습에 사용되는 별도의 대형 언어 모델은 ARSOF의 로빈 세이지 연습의 중심에 있는 가상의 국가인 파인랜드 공화국을 기반으로 라디오 스크립트와 같은 전체 콘텐츠를 만들 수 있다고 말했다.

적이 들을 수 있는 적절한 위치에 오디오를 제공하는 것은 또 다른 과제이지만, 다른 ARSOF 강사들은 작업 중이라고 말했다.

과거에는 부대가 스피커를 적의 일반 방향으로 설치하여 누르기 놀이를 하곤 했다. 그러나 그렇게 하려면 확성기를 전방에 가깝게 만들어야 하고, 그 때에도 스피커가 크지 않으면 적이 메시지를 듣지 못할 수도 있다.

심리 작전에서 ARSOF 병력을 훈련하고 있는 또 다른 군인인 네이선은 이제 강사들이 드론에 매달린 스피커가 어떻게 적진을 향해 날아와 메시지를 터뜨릴 수 있는지 학생들에게 가르친다고 말했다.

나단이 자동차 스피커 부품으로 만든 40달러짜리 스피커가 전시되어 있었는데, 그는 이것이 그가 자라면서 습득한 기술이라고 말했다.

그는 "스피커와 드론의 결합은 부분적으로 우크라이나에서 볼 수 있는 전술을 반영하는 것"이라며 러시아 군인들이 우크라이나 드론에 항복하는 수많은 사례를 언급했다. 한 영상에서 우크라이나 드론이 러시아 군인에게 항복 지시를 내리고, 그는 드론을 따라 우크라이나 라인으로 돌아간다.

ARSOF 심리작전병들은 "이번 사례는 기술 발전과 전단지를 떨어뜨리는 것과 같은 오랜 기간 동안 검증된 기술을 결합하는 것이 어떻게 작동할 수 있는지를 보여준다"고 말했다.

결국, 그러한 낙하는 미국이 적들의 "실제 위치"를 알 것을 요구하며, 위협적인 수준을 더한다고 또 다른 ARSOF 군인인 조지는 말했다.