項(xiàng)目名稱|上海青浦徐涇萬科天空之城光之丘城市展廳

項(xiàng)目性質(zhì)|房地產(chǎn)售樓中心

項(xiàng)目時(shí)間|2020年12月

項(xiàng)目地址|上海諸陸西路966號(hào)（近徐盈路）

多媒體設(shè)計(jì)團(tuán)隊(duì)|南京投石科技

項(xiàng)目產(chǎn)品|沉浸式弧幕投影體感互動(dòng)空間

萬科天空之城這一充滿浪漫色彩的名稱不僅具有標(biāo)志性與天然，更是位于上海西門戶、上海經(jīng)濟(jì)增長(zhǎng)第三極的大虹橋商務(wù)區(qū)徐涇鎮(zhèn)。2020年12月，南京投石科技在上海為萬科徐涇天空之城售樓處提供沉浸式體感互動(dòng)空間。

萬科沉浸式投影互動(dòng)系統(tǒng)功能：支持在不同的位置，體驗(yàn)者通過體感凌空感應(yīng)觸發(fā)功能切換。包括ipad中控聯(lián)動(dòng)控制、支持外部嵌入的VR系統(tǒng)，并支持臨時(shí)活動(dòng)發(fā)布會(huì)場(chǎng)景。

開發(fā)環(huán)境：Window 10

開發(fā)語言：Processing 3.0

功能庫包括PixelFlow UDP OSC Shadertoy KinectPV2 Spout video

OPENGL ES 3.0

工具軟件：SPOUT NDI局域網(wǎng)共享體感實(shí)時(shí)數(shù)據(jù)圖

硬件配置：松下8000流明激光投影機(jī)5臺(tái)

體感設(shè)備：Kinect 6套。

萬科沉浸式弧幕投影體感互動(dòng)空間系統(tǒng)包括了體感主程序，采集端程序，駐守+自啟動(dòng)程序和發(fā)布會(huì)內(nèi)容管理程序四套系統(tǒng)。

萬科沉浸式弧幕投影體感互動(dòng)空間主程序：

1.待機(jī)狀態(tài)：人影透過互動(dòng)（透過呈現(xiàn)的可為靜態(tài)圖片），僅前面五臺(tái)體感級(jí)聯(lián)人影信號(hào)。前景為動(dòng)態(tài)視頻。

2.流程觸發(fā)條件：主控端體感識(shí)別到人以后，結(jié)束待機(jī)互動(dòng)，畫面浮現(xiàn)LOGO。

3.一定時(shí)間范圍內(nèi)，識(shí)別到的人體大小位置符合條件，抬手可出現(xiàn)擦拭效果，前方的視頻被部分擦拭掉，漏出后方的四字的圖片，四個(gè)字基本顯示完整后，切換到背景視頻播放。

4.抬左手或右手分別觸發(fā)不同的視頻，左或右視頻播完以后回到待機(jī)狀態(tài)。超時(shí)沒擦完或沒抬手播視頻均會(huì)返回待機(jī)互動(dòng)狀態(tài)。

5.回到待機(jī)狀態(tài)一定時(shí)間后才可再次觸發(fā)流程。

6.實(shí)時(shí)響應(yīng)中控信號(hào)，無縫切換到VR程序，以及從VR程序切換回本程序。

7.體感數(shù)據(jù)整合功能，主機(jī)端除本身采集本端體感Kinect數(shù)據(jù)以外，還整合了其他5臺(tái)體感采集端實(shí)時(shí)影像流數(shù)據(jù)。局域網(wǎng)數(shù)據(jù)圖單個(gè)通路幀率在60幀每秒，延遲小于20幀，并做了同步處理，保證體感畫面融合圖像基本沒有快慢差別。

8.多臺(tái)體感融合總控制功能：主程序可通過UDP協(xié)議在局域網(wǎng)中分別控制各采集端融合參數(shù)，實(shí)時(shí)查看調(diào)整融合效果，并保存。

9.各端體感控制功能開關(guān)和控制畫面切換的功能：抬左右手分別控制不同的視頻播放。播放結(jié)束后，按條件切換回互動(dòng)畫面模式。

10.程序在任意狀態(tài)可響應(yīng)中控UDP控制信號(hào)，進(jìn)行不同畫面的切換跳轉(zhuǎn)。

11.主程序調(diào)試模式的制作和外接參數(shù)配置功能，以便調(diào)試和更改。

12.所有的視頻可配置，可替換。

萬科沉浸式弧幕投影體感互動(dòng)空間采集端程序：

1.人影數(shù)據(jù)圖融合前處理，點(diǎn)云數(shù)據(jù)圖。

2.接收各種主程序端的UDP控制信號(hào)，實(shí)時(shí)反饋并保存當(dāng)前參數(shù)。

3.不同采集端主機(jī)上體感畫面通過局域網(wǎng)傳給總控主機(jī)的SPOUT NDI視頻流。

可通過主程序被設(shè)置修改畫面的有效深度范圍，在有效深度范圍內(nèi)僅發(fā)送人影圖像，可被實(shí)時(shí)改變大小上下左右三維旋轉(zhuǎn)狀態(tài)。

萬科沉浸式弧幕投影體感互動(dòng)空間駐守+自啟動(dòng)程序：

1.監(jiān)聽主程序和VR程序的OSC指令，收到指令后切換程序。

2.自動(dòng)啟動(dòng)多個(gè)SPOUT NDI工具軟件，并自動(dòng)換選視頻流來源。

3.自動(dòng)啟動(dòng)主程序。

4.可配置采集端個(gè)數(shù)，各程序路徑位置等參數(shù)信息。

樣例示范：體感粒子互動(dòng)

投石科技利用多媒體數(shù)字藝術(shù)、燈光藝術(shù)、裝置藝術(shù)為上海萬科天空之城售樓處公共空間的改造添磚加瓦，為其重新注入新的生命與空間。讓空間成為時(shí)間的載體，顯現(xiàn)出生命力可持續(xù)性生態(tài)發(fā)展的狀態(tài)，更承載著文化所賦予空間的意義。