MAKAR | AR/VR/MR 教學

教學

MAKAR魔法介紹目錄






課程說明

本課程將示範利用AI工具把圖片轉為動態影像並製作成AR專案。

 

情境說明

哈利波特一系列故事中,預言家日報(The Daily Prophet)非常能夠顯現魔法世界的樣貌。預言家日報有別於一般的報紙,報紙上的圖片是以動態影像的方式呈現當時的樣貌,比如天狼星被抓入獄時,他憤怒的掙扎片段。這樣的效果以前就有許多人利用AR技術呈現,方法也有很多種,可以利用影片或者GIF圖片,並將影片的某一畫面製作成AR辨識圖。

本次是利用AI工具(D-ID),將人像圖片結合語音文字,讓圖片中的人物能依照文本念出文字,還可以選擇不同的語言及語調。

以哈利波特電影海報為這次教學的範例,特別注意,D-ID這個AI工具是針對人類臉型的結構設定(正面有兩個眼睛、一個鼻子、一個嘴巴),因此若使用其他臉部結構的物種可能會失敗。

※ 本教學創作引用自哈利波特《神秘的魔法石》之海報

請先下載素材:https://drive.google.com/drive/folders/1XH2cvOhVXLsuEh77Q3BdpfSpqouIqrcc?usp=share_link


 

  1. 開啟D-ID網站(https://www.d-id.com/ ) 點選login



 

  1. 點選左下角Guest -> Login/Signup 進行註冊




 

  1. 註冊完畢點選左上角Create Video




 

  1. 點選ADD新增圖片,將哈利波特的電影海報上傳。




 

  1. 將文字檔中的內容貼入右邊的Script中,並語言選擇Chinese(Mandarin, Simplified),Voice選擇Yunze之後就可以點選右上角Generate Video輸出影片。另外,除了Script能夠文字轉語音以外,也能夠用Audio上傳自己的聲音。




 

補充說明

文本內文是透過另一款近期討論度很高的AI工具「ChatGPT」所生產出來的,我請ChatGPT幫我摘要哈利波特第一本書的故事大意。

 
  1. 開啟MAKAR編輯器,建立新專案,選擇AR圖像辨識,將電影海報上傳為辨識圖。編輯器v3.4版本以後新增了「類別」選單,若沒有選擇將無法發布專案。




 

  1. 將D-ID生成的影片匯入素材庫。

     



 

  1. 將影片放置於場景中,並平行於辨識圖之上,且大小需剛好覆蓋住海報。可參考下圖的調整數據。




 
  1. 影片: 關閉「可操作」的功能,並新增邏輯功能。




 

  1. 在邏輯編輯器中加入Blockly程式



 

  1. 最後再發布之前,將影片的眼睛關掉(影片的可見度關閉)。此做法是為了避免手機離開辨識圖後依然再撥放影片的窘境,希望只有手機照到海報的時候才會出現這種效果,不然就不神奇了。



 

如何體驗

拿起手機,輸入ID並掃描辨識圖就能進行體驗囉!

  1. 安裝MAKAR APP

  2. 掃描QR code或搜尋ID: class06選擇作者

 


 

  1. 點擊AR圖像辨識「魔法介紹目錄」專案啟動,點擊「開始體驗」對準海報。