《畫筆下的魔法》結合手勢操控的數位繪畫與 AI 技術，讓觀眾以多元藝術風格重新詮釋台北的城市風貌。作品巧妙地串連傳統藝術技法與當代互動科技，打造一場穿越時代的創作體驗，引領觀者以嶄新視角感受城市之美。
挑戰
確保互動對參與者而言既直覺自然又容易上手，同時保有足夠的創作掌控度，以生成具有意義與美感的成果。
主要的挑戰在於打造一個直覺且引人入勝的介面，讓參與者能夠無縫地與複雜的 AI 藝術風格互動。我們必須開發出一套系統，能將手部動作轉化為藝術筆觸，同時精準保留每種藝術風格獨有的神韻與特色。
此外，我們也必須確保互動體驗對毫無藝術背景的參與者而言既自然又易於上手，同時保有足夠的創作自由，使其仍能創造出具有深意與價值的作品。
策略
我們的設計理念著重於營造一種仿若傳統繪畫流程的體驗，同時巧妙結合尖端科技，開啟嶄新的創作可能。
我們的設計理念著重於營造一種仿效傳統繪畫流程的體驗，同時巧妙運用先進科技。我們打造了一套實體色彩調色盤介面，搭配特定風格的標記，使風格選擇過程如同從傳統調色盤挑選顏色一般，既熟悉又直觀。
我們的策略著重於讓技術在使用者面前「隱形」，使參與者能全然投入於創作本身，而非被裝置的技術層面所干擾。
解決方案
LIDAR 負責追蹤手部動作，並即時將其轉化為數位筆觸，實現流暢且同步的即時渲染效果。
此互動裝置融合多項關鍵元件，構築出一體成形、流暢自然的互動體驗：
- 大型投影系統，用於呈現創作出的藝術作品。
- LIDAR 技術，用於精準追蹤手部動作，並將其轉化為數位筆觸。
- 具備 RFID 感測器的實體調色盤介面，讓使用者可直覺地選擇藝術風格。
- 預先生成的 AI 風格轉換影像，以台北街景作為創作素材。
- 即時渲染系統，結合手部追蹤與風格轉換技術，實現動態且具風格化的創作呈現。
- 量身打造的介面元素，能為使用者操作提供清晰直觀的視覺回饋。
成果
直覺化的介面設計使各種程度的參與者皆能輕鬆投入，並在創作過程中產生具意義的參與與表達。
此裝置成功打造出一個引人入勝的互動平台，讓大眾能與城市藝術與 AI 科技深度對話。參與者紛紛把握機會，透過不同藝術風格重新詮釋熟悉的城市風景，創造出屬於他們自己的台北獨特印象。
直覺化的介面設計讓各種程度的參與者皆能深度參與創作過程，而以在地影像為核心的策展方向，則巧妙地串連起歷史藝術風格與當代城市生活之間的情感與記憶連結。
洞察
在地化設計能大幅提升觀眾與互動藝術裝置之間的共鳴與參與感。
《畫筆下的魔法》展現了科技如何在保有創作主體性的同時，讓藝術表達變得更加平易近人。此計畫揭示了熟悉的實體介面如何成為橋樑，連結傳統藝術流程與數位創作，使複雜的技術轉化為一般大眾也能親近的創作工具。
此外，聚焦在地影像的策展策略，成功喚起參與者與作品之間的個人連結，顯示出「在地化」在互動藝術裝置中具備極高的參與度提升潛力。
城市的轉生
透過
藝術之姿
城市的轉生
透過
藝術之姿
製作團隊名單
- 專案管理: Partical
- 整體互動設計與開發: Partical
- AI 技術研究與開發: Patrick
- 電子硬體設計: Patrick
- 裝置安裝: Partical, Patrick
製作範疇
- 專案管理
- 互動體驗設計
- 軟體開發
- 生成式 AI 開發
- 電子硬體開發
- 機構安裝
技術堆棧
- TouchDesigner, Photoshop, Firefly, 生成式 AI
- ESP32
- 投影機
