Hugging News #0731: 新課程重磅發(fā)布、用戶交流群邀請你加入、真實圖像編輯方法 LEDT

每一周,我們的同事都會向社區(qū)的成員們發(fā)布一些關于 Hugging Face 相關的更新,包括我們的產品和平臺更新、社區(qū)活動、學習資源和內容更新、開源庫和模型更新等,我們將其稱之為「Hugging News」。本期 Hugging News 有哪些有趣的消息,快來看看吧!?? ??
重磅更新
???? Hugging Face x DeepLearning.ai 免費新課程發(fā)布!

Hugging Face 與 DeepLearning.ai 共同發(fā)布了由 Hugging Face 的機器學習工程師 Apolinário Passos 授課的「使用Gradio構建生成性AI應用」免費課程,教你如何快速創(chuàng)建機器學習應用的演示,以便測試、迭代和與他人共享??靵聿榭窗桑℃溄樱篽ttps://www.deeplearning.ai/short-courses/building-generative-ai-applications-with-gradio/
在這門課中,你將可以做以下幾件事情:
?? 用幾行代碼創(chuàng)建一個文字總結 app,這個 app 可以用開源大語言模型對輸入文本進行摘要,并在 app 中顯示出來摘要。
???♂? 創(chuàng)建一個文字描述圖像的 app,使用圖像到文本的轉換技術,用戶上傳圖像后,app 可以生成一段文字來描述這個圖像,之后同時顯示圖像和文字描述。
?? 創(chuàng)建一個文字生成圖像的 app,通過擴散模型將文本轉換成圖像,然后在 app 中展示生成的圖像。
?? 結合前兩課學到的內容:上傳圖像,為圖像生成文字描述,然后使用文字描述生成新的圖像。
?? 創(chuàng)建一個與開源大模型 Falcon 進行對話的接口——Falcon 是 Hugging Face 的 Open LLM 榜單中排名最高的開源大語言模型。
在本課程結束時,你將掌握快速構建交互式應用和演示的能力,從而驗證你的項目并加快推進項目進度。
產品更新
?? Hugging Face 「每日新論文」推送

小伙伴們現(xiàn)在可以在 Hugging Face 上設置獲取有關每日新論文的通知。點擊鏈接,選擇左側的「通知設置」,勾選「每日論文」即可。??https://hf.co/notifications
Gradio v3.39 更新

Gradio 版本 3.39.0 剛剛發(fā)布,現(xiàn)在可以將 Gradio 聊天機器人部署為 Discord 機器人!??
你只需要一行代碼就可以創(chuàng)建一個運行在 Hugging Face 的推理端點上的 Llama 2 Discord 機器人 ?? 具體內容可參照:https://hf.co/gradio-discord-bots
?其他的更新?
可以分享生成的結果:我們的輸出組件,包括視頻、圖像、音頻和圖庫,現(xiàn)在在右上角都包含了一個“分享”圖標。點擊這個圖標,即可將生成結果一鍵分享到 Hugging Face Discussions 頁面!
gr.DuplicateButton
:你可以在自己的 Gradio 演示中的任意位置添加自己的?gr.DuplicateButton()
,讓用戶更輕松地在自己的設備上嘗試你的演示
自動播放:我們發(fā)布了自動播放功能,允許你自動播放生成的音頻或視頻文件,只需在構建組件時設置?autoplay=True
?即可。
新的信息和警告模態(tài)框:現(xiàn)在我們有?gr.Info
?和?gr.Warning
?模態(tài)框,可在函數(shù)內的任意位置使用,讓用戶實時獲得函數(shù)正在處理的通知。我們所有的模態(tài)框都進行了重新設計!
更多更新可以參照:https://github.com/gradio-app/gradio/blob/main/CHANGELOG.md#3390
開源更新
LEDTIS:直觀好用的真實圖像編輯方法

推出 LEDTIS ???? — 一種結合了 DDPM 反演和語義引導的特點的,直觀好用的真實圖像編輯方法 ??
DDPM 代表去噪擴散概率模型(Denoising Diffusion Probabilistic Models),這是一種用于圖像生成的生成模型。DDPM 反演指的是將給定的圖像逆向轉換為生成該圖像所使用的潛在表示或代碼的過程。換句話說,它是找到潛在變量的過程,當我們將這些潛在變量輸入到 DDPM 模型中時,能夠生成給定的圖像。
在圖像編輯中,語義引導是指使用語義信息或高級特征來指導編輯過程。通過語義引導,我們可以基于圖像的語義內容,來提供具體的指令或約束,從而可以引導編輯過程。例如,在語義圖像編輯中,可以提供例如“使天空更藍”或“在前景中添加一棵樹”??之類的指令,來指導編輯過程。語義引導有助于實現(xiàn)更可控的編輯,確保對圖像所做的更改是連貫且與符合預期的。
?? 演示:https://hf.co/spaces/editing-images/ledits?? 項目頁面:https://editing-images-project.hf.space/index.html??? arXiv 論文:https://arxiv.org/abs/2307.00522
LEDTIS 有不少優(yōu)點:
? 靈活多變 ?
可以通過一個提示詞來同時進行多個獨立的編輯操作,并且反映多個 SEGA 概念。這里 SEGA 指的是使用生成對抗網絡的語義編輯(Semantic Editing with GANs),是一種利用生成對抗網絡進行語義圖像編輯的技術。SEGA 概念代表圖像的特定語義信息或特征,可以通過修改或控制它們來實現(xiàn)所需的編輯效果,例如改變顏色、添加對象或修改圖像的特定元素。
?? 互補功能 ??
這種綜合控制可以在不同情況下讓 DDPM 反演和語義引導這兩種方法互相彌補彼此的局限性。同時,LEDTIS 是輕量級的,由對去噪過程中 SEGA 方案的簡單修改組成,既保持高效,又發(fā)揮了兩種技術的編輯能力 ??
我們在 Hugging Face 的小紅書筆記里也用周董的照片做了示范:http://xhslink.com/w7lJIs
AI 生成的網絡電視直播 ??

一場由 Hugging Face 上的視頻模型 Zeroscope V2 576w 創(chuàng)建的生成式 AI 視頻直播 ??這里所有的視頻內容全部都是文本到視頻的轉換,沒有圖像或視頻的輸入。可以在 Hugging Face Spaces 上進行觀看 ??https://hf.co/spaces/jbilcke-hf/AI-WebTV
模型地址:https://hf.co/cerspense/zeroscope_v2_576w
小游戲:涂鴉沖刺 ??

「涂鴉沖刺」(Doodle Dash)是一個由 Transformers.js 支持的網頁游戲。玩家有60秒的時間盡可能多地畫出單詞,同時神經網絡實時嘗試猜測用戶正在畫的內容。??小編感覺這個游戲就是國內的游戲「你畫我猜」,但是是你畫機器猜。可以在這里體驗游戲 ??https://xenova-doodle-dash.hf.space
歡迎加入我們的用戶微信交流群
我們經常在后臺收到私信希望加入 Hugging Face 的用戶交流群,于是乎,它來啦——

請先閱讀我們的群聊行為守則,掃碼入群即視為你認同并將遵守我們下面列出的行為守則:
?? 請只討論與群聊主題相關的內容,勿討論任何違反法律和 Hugging Face 社區(qū)規(guī)定的內容
?? 我們會非常積極的清理發(fā)送垃圾信息和違規(guī)內容的群成員,如果您認為自己被誤傷,請向群主和管理員提出異議
???????? 加好友前請在群里使用 at 的方式請求其同意,任何不公開征得同意的方式群內加好友均視為違規(guī)
?? 如果你發(fā)現(xiàn)自己的隱私被侵犯,請直接撥打 110 報警
? 當你作為群成員希望邀請其他人加入的時候,請務必轉發(fā)我們的群聊行為守則給被邀請人并請對方遵守
?? 如有違規(guī)情況,我們會將你直接從所有討論群移除,并永久禁止你參與任何我們的活動