MAKAR | AR/VR/MR 教學

教學

MAKAR魔法介紹目錄





課程說明：

本課程將示範利用AI工具把圖片轉為動態影像並製作成AR專案。

 

情境說明：

哈利波特一系列故事中，預言家日報(The Daily Prophet)非常能夠顯現魔法世界的樣貌。預言家日報有別於一般的報紙，報紙上的圖片是以動態影像的方式呈現當時的樣貌，比如天狼星被抓入獄時，他憤怒的掙扎片段。這樣的效果以前就有許多人利用AR技術呈現，方法也有很多種，可以利用影片或者GIF圖片，並將影片的某一畫面製作成AR辨識圖。

本次是利用AI工具(D-ID)，將人像圖片結合語音文字，讓圖片中的人物能依照文本念出文字，還可以選擇不同的語言及語調。

以哈利波特電影海報為這次教學的範例，特別注意，D-ID這個AI工具是針對人類臉型的結構設定(正面有兩個眼睛、一個鼻子、一個嘴巴)，因此若使用其他臉部結構的物種可能會失敗。

※ 本教學創作引用自哈利波特《神秘的魔法石》之海報

請先下載素材：https://drive.google.com/drive/folders/1XH2cvOhVXLsuEh77Q3BdpfSpqouIqrcc?usp=share_link


 

  1. 開啟D-ID網站(https://www.d-id.com/ ) 點選login



 

  1. 點選左下角Guest -> Login/Signup 進行註冊




 

  1. 註冊完畢點選左上角Create Video




 

  1. 點選ADD新增圖片，將哈利波特的電影海報上傳。




 

  1. 將文字檔中的內容貼入右邊的Script中，並語言選擇Chinese(Mandarin, Simplified)，Voice選擇Yunze之後就可以點選右上角Generate Video輸出影片。另外，除了Script能夠文字轉語音以外，也能夠用Audio上傳自己的聲音。




 

補充說明: 

文本內文是透過另一款近期討論度很高的AI工具「ChatGPT」所生產出來的，我請ChatGPT幫我摘要哈利波特第一本書的故事大意。

 

  1. 開啟MAKAR編輯器，建立新專案，選擇AR圖像辨識，將電影海報上傳為辨識圖。編輯器v3.4版本以後新增了「類別」選單，若沒有選擇將無法發布專案。




 

  1. 將D-ID生成的影片匯入素材庫。

     



 

  1. 將影片放置於場景中，並平行於辨識圖之上，且大小需剛好覆蓋住海報。可參考下圖的調整數據。




 

  1. 影片: 關閉「可操作」的功能，並新增邏輯功能。




 

  1. 在邏輯編輯器中加入Blockly程式



 

  1. 最後再發布之前，將影片的眼睛關掉(影片的可見度關閉)。此做法是為了避免手機離開辨識圖後依然再撥放影片的窘境，希望只有手機照到海報的時候才會出現這種效果，不然就不神奇了。



 

如何體驗

拿起手機，輸入ID並掃描辨識圖就能進行體驗囉!

  1. 安裝MAKAR APP

  2. 掃描QR code或搜尋ID: class06選擇作者

 


 

  1. 點擊AR圖像辨識「魔法介紹目錄」專案啟動，點擊「開始體驗」對準海報。