由于疫情的影響，人們開(kāi)始思考是否能有一個(gè)備份界面，讓參觀者能與數(shù)字媒體作品互動(dòng)，而無(wú)需共享任何公共媒體，如傳統(tǒng)鼠標(biāo)、傳統(tǒng)觸摸板等。這也引出了本文我們將要討論的兩個(gè)概念：Choreographic Interfaces（舞蹈界面）和?Embodied Interaction（體感交互）。

?分享人?

? Hiroshi Ishii?

Hiroshi Ishii 在1995年10月加入 MIT Media Lab 后，成立了 Tangible Media Group，通過(guò)賦予數(shù)字信息和計(jì)算物理形式，使數(shù)字變得有形化。

? Lins Derry?

Lins Derry 是一位從事人機(jī)交互、數(shù)據(jù)可視化和編舞的藝術(shù)家和設(shè)計(jì)師。身體通常是她在設(shè)計(jì)和性能領(lǐng)域進(jìn)行研究和干預(yù)的場(chǎng)所。她是哈佛大學(xué) metaLAB 的負(fù)責(zé)人，她研究如何將舞蹈界面和數(shù)據(jù)體現(xiàn)發(fā)展到功能和美學(xué)兩個(gè)方面。

? Ozgun Kilic Afsar?

Ozgun Kilic Afsar 是 KTH 瑞典皇家理工學(xué)院的博士，也是?MIT Media Lab?的研究附屬機(jī)構(gòu)候選人。她的研究重點(diǎn)是與人體生物力學(xué)靈巧性相對(duì)應(yīng)的集成軟機(jī)器人纖維和織物。

? Sydney Skybetter?

Sydney Skybetter 是一位舞蹈編導(dǎo)，被《金融時(shí)報(bào)》譽(yù)為“舞蹈與新興技術(shù)交叉領(lǐng)域的世界最重要思想家之一”。Sydney 的舞蹈曾在 John F. Kennedy Centers、Jacob's Pillow 和 The Joyce Theater 等場(chǎng)所演出。

01

|?語(yǔ)義

Semantics

什么是編舞？抽象地說(shuō)，舞蹈是一種有組織的身體動(dòng)作，或是自我展示的有意義的動(dòng)作。在藝術(shù)語(yǔ)境中，舞蹈設(shè)計(jì)被視為空間和時(shí)間中動(dòng)作的組織；而在設(shè)計(jì)語(yǔ)境中，舞蹈設(shè)計(jì)則可以被描述為一組互動(dòng)手勢(shì)，這些手勢(shì)組合在一起以支持互動(dòng)系統(tǒng)。

那么什么是舞蹈界面？它可以通過(guò)將編排模型集成到設(shè)計(jì)過(guò)程中，增加人類和技術(shù)系統(tǒng)之間的動(dòng)態(tài)或身體和空間互動(dòng)。

02

|?觀察

Observations

觀察是了解交互設(shè)計(jì)和舞蹈的重要一步，觀察這些動(dòng)作和舞蹈的主題，有利于我們尋找它們之間的聯(lián)系。

所有的舞蹈都圍繞著運(yùn)動(dòng)、空間和時(shí)間三個(gè)維度展開(kāi)。最淺顯易懂的是空間，在舞蹈中，我們傾向于考慮內(nèi)部空間，包括身體內(nèi)的體積、手臂可以到達(dá)的距離、身體周圍的空間、體積的正負(fù)空間，以及身體之間的人際空間。我們能夠用彼此連接的方式，不斷地創(chuàng)造積極和消極的空間。

在交互設(shè)計(jì)中，同樣也存在著不同的互動(dòng)行為。拿手勢(shì)為例，它們通?？梢苑譃楹?jiǎn)單、常規(guī)、定制和熟練的四種類別。

這些手勢(shì)是否與舞蹈的編排結(jié)構(gòu)有著某種程度上的聯(lián)系？這些動(dòng)作是如何組合到交互系統(tǒng)中的？它們是由設(shè)計(jì)師設(shè)計(jì)的嗎？它們是從世界上別的動(dòng)作結(jié)構(gòu)中引進(jìn)的嗎？又或者它們是由用戶編寫(xiě)的嗎？

03

|?案例研究

Case Study

下面我們將從一些案例出發(fā)，了解將舞蹈引入設(shè)計(jì)實(shí)踐的方法：

?Curatorial A(i)gents?

這是一個(gè)為哈佛藝術(shù)博物館燈箱畫(huà)廊開(kāi)發(fā)手勢(shì)界面的案例研究。我們研究了如何在運(yùn)動(dòng)、空間和時(shí)間的類別中發(fā)展觸及這些想法和概念的手勢(shì)和舞蹈。因此，為了清晰起見(jiàn)，我們將它們分為頭部控制詞匯、單手動(dòng)詞匯和雙手動(dòng)詞匯。

我們開(kāi)始對(duì)它們進(jìn)行機(jī)器學(xué)習(xí)模型訓(xùn)練，并發(fā)現(xiàn)這些需要更加幾何化，以便系統(tǒng)能夠識(shí)別舞蹈動(dòng)作。圖中是一個(gè)動(dòng)作研究過(guò)程中組合的手勢(shì)集。

我們可以選擇對(duì)象，然后放大和縮小。之所以選擇這種傳統(tǒng)的方式，是因?yàn)槲覀冃枰c Curatorial A(i)gents 中的不同項(xiàng)目進(jìn)行交互。

從上圖中你可以看到使用的不同的傳統(tǒng)交互。頭部?jī)A斜是后期添加的，允許切換主導(dǎo)手。因此右手或左手都可以使用該系統(tǒng)。而且，如果你想從房間的一個(gè)角落到下一個(gè)角落，它也可以讓你很容易地?fù)Q手。

這個(gè)項(xiàng)目探索了在交互設(shè)計(jì)中舞蹈是如何存在的，然后利用機(jī)器學(xué)習(xí)進(jìn)行真正的舞蹈設(shè)計(jì)，開(kāi)發(fā)可用于不同項(xiàng)目的詞匯。

inFORM?

我們已經(jīng)厭倦了通過(guò)縮放屏幕來(lái)進(jìn)行交流，因?yàn)檫@從根本上分離了一個(gè)空間，你可以看到，但你感覺(jué)不到你身體的存在。

inFORM 是一種動(dòng)態(tài)形狀顯示器，可以物理渲染 3D 內(nèi)容，因此用戶可以以有形的方式與數(shù)字信息進(jìn)行交互。inFORM 還可以與周圍的物理世界進(jìn)行交互，例如移動(dòng)桌子表面的物體。視頻會(huì)議中的遠(yuǎn)程參與者可以物理地顯示出來(lái)，從而產(chǎn)生強(qiáng)烈的現(xiàn)場(chǎng)感和遠(yuǎn)程物理交互的能力。

?bioLogic?

bioLogic 是一種新的生物皮膚，也是人類的第二層皮膚。細(xì)菌在這里既作為相對(duì)濕度傳感器，也控制著舞者的空氣通風(fēng)。

我們分析了舞者背上的熱圖，了解理想的氣流是什么，如何最大限度地提高舞者的表現(xiàn)。然后計(jì)算每個(gè)瓣片中要放多少細(xì)菌，并將命令發(fā)送到生物打印機(jī)進(jìn)行存放。

當(dāng)舞者跳舞的時(shí)候，她會(huì)感覺(jué)到背部氣流的變化，然后改變跳舞的方式。

mirrorFugue?

mirrorFugue 是一個(gè)裝置，讓人聯(lián)想到一個(gè)無(wú)實(shí)體的鋼琴家正在演奏。

Dr. Xiao Xiao 設(shè)計(jì)了這件作品，她的目的是通過(guò)鋼琴來(lái)探索音樂(lè)和技術(shù)的傳播，展示一種新的代際人機(jī)互動(dòng)形式。音樂(lè)不僅僅是空氣中的振動(dòng)，鋼琴家在創(chuàng)作音樂(lè)時(shí)的呼吸和動(dòng)作與音樂(lè)制品本身一樣重要。

mirrorFugue 的成果是一套鋼琴鍵盤(pán)界面，它可以可視化合作者的身體，無(wú)論是你的導(dǎo)師、已故著名鋼琴家，還是童年的自己。由有形物的力量介導(dǎo)的代際二重唱是一個(gè)鼓舞人心的場(chǎng)景，使舞蹈互動(dòng)的時(shí)間維度成為可能。

?3 Voices?

3 Voices 是一個(gè)關(guān)于音樂(lè)創(chuàng)作和聲音方面的藝術(shù)研究項(xiàng)目。我們充分利用了微流體纖維技術(shù)的表達(dá)潛力，并做出了一件上身可穿的衣服，它能夠?qū)⒏枋稚眢w體驗(yàn)的各個(gè)方面直接傳達(dá)給聽(tīng)眾。這項(xiàng)工作是與瑞典皇家理工學(xué)院的一名專業(yè)歌劇演員和同事合作完成的。

3 Voices 超越了傳統(tǒng)的聽(tīng)音樂(lè)方法，它以自身的方式探測(cè)作為共振對(duì)象的物體的更深層次的聽(tīng)覺(jué)潛力。我們重新構(gòu)思并塑造了 Morton Feldman 1982年的作品?"Three Voices"，通過(guò)使用柔軟的機(jī)器人織物，使它們變得有形和可轉(zhuǎn)移，為身體提供細(xì)微的多模態(tài)觸覺(jué)反饋，類似于歌手的上身胸部擴(kuò)張、收縮和喉部振動(dòng)。

在項(xiàng)目中，我們進(jìn)一步探索了自己的身體或身體感應(yīng)系統(tǒng)如何捕捉唱歌或跳舞身體的身體體驗(yàn)，并通過(guò)驅(qū)動(dòng)將這種體驗(yàn)轉(zhuǎn)移到另一個(gè)人的身體上。

我們利用有監(jiān)督的機(jī)器學(xué)習(xí)來(lái)幫助識(shí)別和分類與產(chǎn)生聲音有關(guān)的動(dòng)作，從而以最小的延遲實(shí)時(shí)傳遞這種體驗(yàn)。為此，我們使用語(yǔ)音記錄數(shù)據(jù)集來(lái)推斷音頻動(dòng)態(tài)和呼吸類型，以及織物內(nèi)帶有多通道強(qiáng)度計(jì)的可穿戴運(yùn)動(dòng)捕捉系統(tǒng)來(lái)生成完整的動(dòng)作集。這產(chǎn)生了一個(gè)觸覺(jué)樂(lè)譜，一個(gè)新的詞匯，用于記錄歌唱，以及歌唱中的呼吸機(jī)制。

?The Optimization of Parenthood?

這是 Madeline Gannon 的作品，但由 Addie Wagenknecht 創(chuàng)作。The Optimization of Parenthood 是一個(gè)機(jī)器人手臂，當(dāng)放在搖籃里的嬰兒哭泣或從睡夢(mèng)中醒來(lái)時(shí)，它就會(huì)做出反應(yīng)。

母親通常被期望擔(dān)任全職照顧孩子的角色，這有時(shí)是由于缺乏選擇，育兒費(fèi)用或缺乏家庭支持。結(jié)果，母親往往失去了她花了一生時(shí)間建立起來(lái)的非常有創(chuàng)造力的個(gè)人成就。為了盡可能地優(yōu)化這一單調(diào)乏味的例行工作，使所有女性都能選擇既從事創(chuàng)造性工作又生孩子，我們必須優(yōu)化養(yǎng)育子女的過(guò)程。自動(dòng)重復(fù)的任務(wù)可以轉(zhuǎn)移到其他設(shè)備上，而不會(huì)影響嬰兒的照顧。

更多知識(shí)干貨以及其他海外留學(xué)的資訊可以關(guān)注UXD交互工業(yè)產(chǎn)品設(shè)計(jì)分享或者添加小助手，還可獲取講座直播哦~

|福利大放送 | WELFARE?
對(duì)于設(shè)計(jì)初學(xué)者，完成從0開(kāi)始創(chuàng)作幾乎是不可能的，就像學(xué)習(xí)過(guò)程中書(shū)讀百遍其義自見(jiàn)一樣。有了大量的積累，才能在腦海里建立素材庫(kù)，這些素材庫(kù)能幫助同學(xué)們完成最初的設(shè)計(jì)想法積累，基于這樣的基礎(chǔ)再進(jìn)行個(gè)性化的創(chuàng)作，最終才能做出高質(zhì)量的作品集。全球院校最新作品集免費(fèi)拿！添加小助手即可獲?。?/p>

UXD交互工業(yè)產(chǎn)品設(shè)計(jì)學(xué)院是尤克斯國(guó)際旗下的一家專注于交互、服務(wù)、工業(yè)、產(chǎn)品設(shè)計(jì)專業(yè)的頂級(jí)設(shè)計(jì)學(xué)院。除了一對(duì)一設(shè)計(jì)課、基礎(chǔ)技能課程、小組課題、設(shè)計(jì)評(píng)圖、聯(lián)合教學(xué)外，我們提供不定主題的公開(kāi)課和內(nèi)部小組課，教學(xué)計(jì)劃課程由三大部分組成，包括基礎(chǔ)軟件技能教學(xué)、設(shè)計(jì)理論系統(tǒng)講座、申請(qǐng)必備知識(shí)解析等。

本文版權(quán)歸UXD尤克斯所有

部分圖片來(lái)自于網(wǎng)絡(luò)

如有侵權(quán)請(qǐng)與我們聯(lián)系