飛槳AI Studio可以玩多模態(tài)了?MiniGPT4實戰(zhàn)演練!
2023-07-31 15:00 作者:飛槳PaddlePaddle | 我要投稿
MiniGPT4是基于GPT3的改進版本,它的參數(shù)量比GPT3少了一個數(shù)量級,但是在多項自然語言處理任務(wù)上的表現(xiàn)卻不遜于GPT3。項目作者以MiniGPT4-7B作為實戰(zhàn)演練項目。
創(chuàng)作者:衍哲
飛槳AI Studio-視覺語言多模態(tài)大模型MiniGPT4-7B

一鍵fork
fork該項目并運行,運行環(huán)境建議至少選擇A100(40G)及以上配置
安裝相關(guān)模塊
引用相關(guān)模塊
下載miniGPT4權(quán)重或配置文件
實例化miniGPT4模型和處理器
模型推理
輸入圖像url+prompt(單張圖片+單輪對話)
另有本地上傳圖像形式,請進入項目查看
將圖像上傳到本地后的file_path+prompt(多張圖片+單輪對話)
效果展示
輸入:描述這張圖片,使用中文

輸出:這張圖片顯示了一個女性角色,穿著紅色和白色的服裝,手持一根金色的劍。她的頭發(fā)是白色的,眼睛是紅色的。她站在一張草地上,手持劍的柄子。這個角色看起來像是一個英雄,她的服裝和裝備顯示出她的力量和勇氣
更多玩法,可一鍵fork該項目進行模型微調(diào)。