每一周，我們的同事都會(huì)向社區(qū)的成員們發(fā)布一些關(guān)于 Hugging Face 相關(guān)的更新，包括我們的產(chǎn)品和平臺(tái)更新、社區(qū)活動(dòng)、學(xué)習(xí)資源和內(nèi)容更新、開源庫(kù)和模型更新等，我們將其稱之為「Hugging News」，本期 Hugging News 有哪些有趣的消息，快來(lái)看看吧！

開源更新

Transformers 現(xiàn)已支持 Meta 的 SAM 分割模型

你還可以使用自動(dòng)遮罩生成管道預(yù)測(cè)給定圖像的分割掩碼，并提供一組邊界框或一組 2D 點(diǎn)，以預(yù)測(cè)感興趣的對(duì)象的分割掩碼，只需調(diào)用?AutoModel.from_pretrained?即可。

查看 Notebook: 在 ?? transformers 中使用 Segment Anything Model:https://ipynb.cn/github/huggingface/notebooks/blob/main/examples/segment_anything.ipynb

TPU YYDS: 做完一個(gè)小時(shí)的音頻轉(zhuǎn)錄只需要 15 秒！

我們的一位同事 Sanchit 為 OpenAI 的 Whisper 模型提供了 JAX 實(shí)現(xiàn)，代碼兼容 CPU、GPU 和 TPU，可以部署為用于音頻處理的推理端點(diǎn)，也可以批處理單個(gè)音頻文件。

GitHub 地址:
https://github.com/sanchit-gandhi/whisper-jax

更輕松地微調(diào) TTS 模型

?? transformers 已經(jīng)增加了在文本到語(yǔ)音中微調(diào) SpeechT5 模型的功能。

你可以在這個(gè) Colab 中查看詳細(xì)操作步驟:https://colab.research.google.com/drive/1i7I5pzBcU3WDFarDnzweIj4-sVVoIUFJ

在 diffusers 上進(jìn)行 Multi-concept 主題訓(xùn)練

現(xiàn)在你可以通過(guò) Custom Diffusion 在 ?? Diffusers 上進(jìn)行 Multi-concept 主題訓(xùn)練，上圖展示了結(jié)合木頭和貓咪的圖片。Custom Diffusion 只微調(diào) UNet 的交叉注意力層，同時(shí)支持在消費(fèi)者硬件上無(wú)縫學(xué)習(xí)的文本反演融合。因此，僅用 250 步，我們就可以得到相當(dāng)好的結(jié)果。

Custom Diffusion 文檔:https://hf.co/docs/diffusers/main/en/training/custom_diffusion

產(chǎn)品更新

Gradio 新增?gradio_client?庫(kù)

現(xiàn)在，你可以使用?gradio_client?庫(kù)將任意一個(gè) Gradio 應(yīng)用以 API 方式調(diào)用。

Space 模版現(xiàn)已支持 AimStack

現(xiàn)在，你可以在新建 Space 應(yīng)用的時(shí)候選擇 AimStack 這個(gè) Docker 模版，Aim 是一個(gè)開源的、自托管的 AI 元數(shù)據(jù)跟蹤工具，它為探索和比較元數(shù)據(jù)提供了一個(gè)性能強(qiáng)大的用戶界面，以及一個(gè)用于編程訪問(wèn)的、非常適合自動(dòng)化的 SDK。在 Space 應(yīng)用上構(gòu)建一個(gè) Aim 應(yīng)用，你可以隨時(shí)與他人共享訓(xùn)練結(jié)果，用于探索和比較元數(shù)據(jù)，以及以編程方式訪問(wèn)跟蹤的元數(shù)據(jù)。

推理端點(diǎn)大更新

端點(diǎn)啟動(dòng) / 創(chuàng)建時(shí)間減少了約 4-6 倍，你可以在 1 分鐘內(nèi)完成 BERT、10 分鐘內(nèi)完成 FLAN-T5-XXL (11B) 推理等。

輕松地在你的游戲里加入數(shù)萬(wàn)個(gè)開源模型

本周，我們發(fā)了一篇文章，介紹如何?在 Space 應(yīng)用中使用 Unity API，邀請(qǐng)你回顧這篇文章，敬請(qǐng)期待更多 AI 游戲的文章和產(chǎn)品發(fā)布。

以上就是本期 Hugging News，本周日是母親節(jié)，請(qǐng)用任何方式告訴親愛的媽媽：我愛你！???

請(qǐng)?jiān)诹粞詤^(qū)告訴我們你準(zhǔn)備如何陪伴媽媽過(guò)母親節(jié)，我們會(huì)陸陸續(xù)續(xù)放出留言。截止下期 Hugging News，點(diǎn)贊量最高的評(píng)論我們會(huì)發(fā)放 Hugging Face 官方商店代金券一張，你可以任意購(gòu)買 Hugging Face 周邊！