TwinSyncbot最全使用教程來啦!沒看過的小伙伴千萬別錯過!
要說2023年什么最火?當然是生成式人工智能。這不近期剛在Discord上發(fā)現(xiàn)了一款AI數(shù)字人視頻編輯工具,不需要訓練數(shù)字人,能夠基于源視頻快速完成換臉、同步說話,生成新的視頻,還有照片說話功能,挺有趣的,相信也有不少小伙伴應(yīng)該也有在關(guān)注。這個工具叫TwinSyncbot,想嘗鮮的小伙伴可以加入他們的服務(wù)器用用看。我來說說我的使用體驗,剛好給剛使用的小伙伴出個教程,更快地上手使用。

TwinSyncbot是美國硅谷一家叫TwinSync Corporation面向discord研發(fā)的一款基于人工智能技術(shù)的數(shù)字人視頻制作工具,該discordbot使用了TwinSync最新的AI唇形同步技術(shù)和無訓練克隆算法模型,無需提前訓練,能夠?qū)崿F(xiàn)數(shù)字人的唇形與音頻高度同步,使得口型與音頻內(nèi)容完美匹配。此外,它還可以捕捉和復制用戶的面部表情和動作,為數(shù)字人增添更加真實的特征,僅憑上傳的源視頻、圖片、文本、音頻,就能快速生成新的視頻,目前TwinSyncbot上線了3個功能,分別是photo-talking、faceshift、talksync,都是輸入相應(yīng)指令,填寫視頻、音頻、圖片的地址就能快速使用照片說話、換臉、視頻說話等功能。
?

(TwinSync官方教學視頻)
上面是他們官方發(fā)出來的教學視頻,大家可以看一下,看不懂的小伙伴也別著急,下面我會為各位小伙伴詳細圖文解說下各個功能。
對了,想嘗鮮該bot的小伙伴要注意,要登陸discord的應(yīng)用端而非web端,因為使用TwinSyncbot的指令時,需要復制上傳成功后的視頻、圖片、音頻的鏈接,目前discord只有應(yīng)用端才有此功能,一定要注意。下面我說下每個功能指令的使用方法。
首先看下照片說話功能,也就是photo-talking,具體的使用方法是:在TwinSync服務(wù)器中的#photo-talking頻道中,將需要使用的照片成功上傳到該頻道中,然后右擊圖片,復制圖片的鏈接,然后在下方輸入框中使用“/photo-talking”指令,然后根據(jù)需要選擇發(fā)音人、填寫圖片的鏈接、輸入說話的文本,點擊發(fā)送即可,生成成功后,結(jié)果會以DM形式私發(fā)給你。



需要注意的是,右擊圖片復制圖片鏈接時,一定復制的是圖片的鏈接,而不是復制消息的鏈接。
下面看下?lián)Q臉功能,就是faceshift,具體操作如下:在TwinSync服務(wù)器中的#faceshift頻道中,將需要使用的換臉的源視頻和換臉照片成功上傳到該頻道中,然后同理,右擊源視頻和換臉照片,復制它們的地址鏈接備用,接著在該頻道中的輸入框輸入“/deepface”指令,依次輸入源視頻和換臉照片的地址鏈接,發(fā)送即可,生成結(jié)果還是以DM形式私發(fā)給你。



最后,看下視頻說話功能,對應(yīng)的就是talksync,使用方式其實和照片說話、換臉是一樣的,具體方法如下:在TwinSync服務(wù)器中的#talksync頻道中,將需要使用的源視頻和源音頻成功上傳到該頻道中,然后分別右擊復制他們的鏈接備用,在該頻道輸入框輸入“/videotalking”指令,分別填寫上面復制好的源視頻和源音頻的鏈接,發(fā)送,生成結(jié)果還是DM私信查看。

這里需要注意的是,在復制源音頻的鏈接時,一定要右擊音頻的名稱才能復制鏈接,不少小伙伴會在這里右擊音頻區(qū)域,會發(fā)現(xiàn)沒有復制鏈接的選項,所以,一定要右擊音頻名稱,重要的事情說3遍。

所以,TwinSyncbot總體使用下來體驗還是很好的,能夠使用的場景有很多,不管是社交服務(wù)器中提供更加生動的交流體驗,使得聊天更加有趣、互動更加豐富,還是游戲服務(wù)器中增強游戲的沉浸感和娛樂性,都能夠帶來全新的體驗,不過很多細節(jié)需要注意,我再次總結(jié)下需要注意的點:
第一,需要使用Discord的應(yīng)用端而非web端(個人覺得PC應(yīng)用端使用比較方便,當然,移動應(yīng)用端也可以使用);
第二,使用的源視頻和源照片格式,必須符合官方的要求,這個可以在#rule頻道中查看;
第三,為達到比較好的效果,上傳的源視頻必須滿足以下條件:只包含單人、頭部位置穩(wěn)定,人物始終在鏡頭里面、無大角度側(cè)臉、無面部遮擋且露出脖子;
第四,復制源視頻、源音頻、圖片時,一定是右擊“復制鏈接”,而非“復制消息鏈接”,特別是復制音頻鏈接時,需要右擊音頻的名稱;
?
好啦,基本了解這些后,就能熟練使用TwinSyncbot啦,大家快去試試吧!