Talk預(yù)告 | 香港中文大學(xué)MMLab在讀博士生周航: 視覺引導(dǎo)的音樂聲源分離與立體聲生成
本周為將門-TechBeat技術(shù)社區(qū)第245期線上Talk!也是ECCV?2020系列Talk第③彈!
北京時間9月29日(周二)晚8點,香港中文大學(xué)多媒體實驗室博士生—周航的Talk將準(zhǔn)時在將門TechBeat技術(shù)社區(qū)開播!
他與大家分享的主題是: “視覺引導(dǎo)的音樂聲源分離與立體聲生成”。屆時將會介紹其所在港中文團隊發(fā)表在ECCV 2020上結(jié)合聲源分離和立體聲生成兩個方向的最新工作。

Talk·信息
▼
主題:視覺引導(dǎo)的音樂聲源分離與立體聲生成
嘉賓:香港中文大學(xué)多媒體實驗室博士生周航
時間:北京時間?9月29日 (周二) 20:00
地點:將門TechBeat技術(shù)社區(qū)
http://www.techbeat.net/
Talk·提綱
▼
本次分享中,周航將首先概括性地介紹音頻-視覺的多模態(tài)聯(lián)合學(xué)習(xí)任務(wù)的主要研究對象與引用場景,并深入視覺信息在音樂控制領(lǐng)域的應(yīng)用。具體來說,其團隊關(guān)注于計算機視覺與音樂處理中,聲源分離和立體聲生成這兩大主流任務(wù)的關(guān)系。
他將首先分別從兩個方向各選取一篇代表性的工作,介紹這兩個方向研究的問題定義的基本框架。接著會詳細(xì)講解其港中文團隊發(fā)表在ECCV 2020上結(jié)合這兩個方向的最新工作:?視覺引導(dǎo)的聲源分離輔助立體聲生成方法Sep-Stereo。
本次分享的主要內(nèi)容如下:
音頻-視覺聯(lián)合學(xué)習(xí)任務(wù)總覽
視覺引導(dǎo)的音樂聲源分離任務(wù),前人工作解讀
視覺引導(dǎo)的立體聲生成任務(wù),前人工作解讀
詳解發(fā)表于ECCV 2020的最新工作:視覺引導(dǎo)的聲源分離輔助立體聲生成方法Sep-Stereo
總結(jié)與展望
Talk·參考資料
▼
本次分享中將會提及的文章如下,建議提前預(yù)習(xí)哦:
1.《探索計算機視覺與音頻的交叉:?基于視覺的音樂相關(guān)研究Review (聲源分離&Beyond) 》
https://mp.weixin.qq.com/s/SxuCC-TgQht2-vYg-5gZJg
2.《?ECCV 2020 | 視覺引導(dǎo)的聲源分離輔助立體聲重構(gòu)方法 Sep-Stereo》
https://zhuanlan.zhihu.com/p/162689191?
3.《Sep-Stereo: Visually Guided Stereophonic Audio Generation by Associating Source Separation?》
論文鏈接:https://arxiv.org/abs/2007.09902?
項目鏈接:https://hangz-nju-cuhk.github.io/projects/Sep-Stereo
Talk·提問交流
▼
方式 ①
在本文留言區(qū)直接提出你的問題,或掃描下方二維碼提問!問題被選中的小伙伴們將獲得一個紅包獎勵!

方式 ②
在Talk界面下的【交流區(qū)】參與互動!留下你的打call??和問題??,和更多小伙伴們共同討論,說不定就被講者直接翻牌解答了呢!

你的每一次貢獻,我們都會給予你相應(yīng)的i豆積分,近期還會有驚喜獎勵哦!
Talk·觀看方式
▼
掃描下方二維碼,或復(fù)制鏈接https://datayi.cn/w/a9a7bplP到瀏覽器一鍵完成預(yù)約!上線后會在第一時間收到通知哦~

嘉賓介紹
▼

香港中文大學(xué)多媒體實驗室博士生
周航,香港中文大學(xué)多媒體實驗室四年級博士生,師從王曉剛教授。本科畢業(yè)于南京大學(xué)聲學(xué)系。目前主要研究方向是音頻-視覺的聯(lián)合學(xué)習(xí)與人臉生成,曾在ICCV/CVPR/ECCV等會議發(fā)表多篇論文。CVPR 2020優(yōu)秀審稿人,致力于推動視聽結(jié)合的多模態(tài)領(lǐng)域發(fā)展。
系列Talk
▼
*點擊鏈接跳轉(zhuǎn)詳情
第①彈

第②彈


關(guān)于TechBeat社區(qū)
▼ ???
TechBeat(www.techbeat.net)是一個薈聚全球華人AI精英的成長社區(qū)。我們希望為AI人才打造更專業(yè)的服務(wù)和體驗,加速并陪伴其學(xué)習(xí)成長。期待這里可以成為你學(xué)習(xí)AI前沿知識的高地,分享自己最新工作的沃土,在AI進階之路上的升級打怪的根據(jù)地! ? ? ? ? ???
更多詳細(xì)介紹>>https://mp.weixin.qq.com/s/pTbCK_MeTk05jK2yx1RTrQ