課程概述
本課程以「Hand Tracking Exploration:MediaPipe × TouchDesigner」為主題,共規劃六堂課,透過生成式互動設計與數位媒體創作,引導教師認識人工智慧視覺辨識技術與互動藝術的應用。課程前期以熟悉軟體介面與基本操作為主,介紹 TouchDesigner 的節點式視覺程式設計概念,以及 MediaPipe 手部追蹤技術的基本原理,協助學員建立數位互動設計的基礎能力。中期課程逐步帶領學員完成影像擷取、手勢辨識、資料傳輸與節點串接等實作,理解手部動作如何轉換為互動控制訊號,並應用於影像、圖形及動畫效果。後期則透過專題創作,引導學員整合所學,設計具互動性的數位藝術作品,嘗試將手勢控制結合視覺設計、美感表現與創意思考。課程強調「做中學」與跨領域整合,培養學員運用新媒體科技進行藝術創作的能力,並思考互動媒體在美感教育、設計教育及科技藝術課程中的應用,提升數位創作素養、設計思維及未來課程發展能力。
預期成果
- 建立互動媒體創作基礎能力
學員能熟悉 TouchDesigner 與 MediaPipe 的基本操作,理解節點式視覺程式設計及手部追蹤技術原理,具備互動媒體創作的基礎能力。
- 提升美感設計與科技整合能力
能將手勢辨識、動態影像、色彩及視覺元素整合於互動作品中,培養數位美感設計思維,提升藝術與科技跨域整合能力。
- 完成互動藝術作品
每位學員完成至少2件以手勢互動為核心的數位創作,能運用 TouchDesigner 與 MediaPipe 建立基本互動效果,展現個人創意與設計理念。
- 培養問題解決與創新能力
透過實作、測試及作品修正歷程,提升運算思維、問題分析及創意設計能力,建立自主學習與持續探索新媒體藝術的能力。
教師課後省思
學生平時較少接觸人工智慧與互動媒體相關課程,初次使用 TouchDesigner 與 MediaPipe 時,對節點式程式設計及資料串接概念較為陌生,需要較多時間熟悉操作流程。
為協助學生克服學習困難,課程採循序漸進的示範教學,搭配範例練習、教師個別指導及同儕討論,讓學生逐步建立操作能力,並完成互動作品創作。
未來將持續優化教材內容,增加更多基礎操作範例與教學資源,並規劃更多科技藝術跨域課程,結合不同互動技術與創作媒材,讓學生在美感設計與科技應用中培養創新思維與跨領域整合能力,也作為後續課程推廣與教學發展的參考。
-
01認識互動媒體藝術的發展,了解 TouchDesigner 與 MediaPipe 的功能,建立課程學習架構
透過國內外互動藝術作品案例,引導學生觀察科技藝術如何結合身體動作與視覺設計,介紹 TouchDesigner 節點式介面、基本操作方式及 MediaPipe 手部追蹤原理,協助學員熟悉軟體環境,建立後續創作所需的基礎概念。
-
02熟悉 TouchDesigner 基本節點、輸入方式
練習影像讀取、節點串接與參數調整,了解運作方式,培養節點式程式設計思維,建立互動作品的基本架構。
-
03學習 MediaPipe 手部辨識功能,建立手勢控制基礎
認識 MediaPipe Hand Tracking 的運作方式,學習攝影機影像擷取、21 個手部關鍵點辨識及資料輸出,並將追蹤資訊匯入 TouchDesigner,觀察手部動作與數據變化,理解即時互動控制原理。
-
04能將手勢控制與視覺元素連結,建立互動效果
運用手部追蹤資料控制圖形、色彩、粒子、動畫及影像變化,練習不同節點的串接方式,調整互動靈敏度與視覺效果,探索人體動作與數位影像之間的互動關係,培養互動設計思維。
-
05整合軟體操作與互動設計技巧,完成作品雛形
學生依據創作主題規劃互動流程,完成互動作品初稿,並透過反覆測試與同儕討論修正作品內容,提升作品穩定性與整體美感表現。
-
06展示互動作品,分享設計理念,反思科技藝術於美感教育中的應用
完成互動作品展示與操作體驗,分享創作理念、設計歷程及技術應用,透過同儕回饋與教師講評進行反思,討論互動媒體、AI視覺辨識與科技藝術融入美感教育及設計課程的可能性,培養跨領域創新思維。