前言
早在20世紀90年代日本就出現了虛擬偶像並進行專輯發售,後來基於音樂軟體製作的3DCG的「初音未來」被稱為虛擬偶像的成功典範。近年來,隨著短影音平台和直播帶貨行業的興起,透過繪畫、3D建模等結合動作捕捉或人工智慧的方式建立起來的虛擬偶像和網紅越來越多地出現在人們的視野,吸引著越來越多的人參與虛擬偶像網紅的推崇和製作。目前虛擬偶像實現方式上主要有兩大流派,基於動作捕捉的實現和基於人工智慧的方式。由於傳統的基於動作捕捉的方式硬體成本昂貴,入門門檻較高,普通人難以企及,所以越來越多的人和團隊開始採用人工智慧的實現方法。
遺憾的是,中文虛擬人物\偶像書籍的短缺限制了廣大普通讀者的創作,網路上雖然能夠找到一些資料,但大多是一些碎片化的資訊,對讀者的幫助十分有限。基於此,本書從基本的概念入手,原理結合實踐,對虛擬人物\偶像製作流程及其用到的建模工具和人工智慧技術進行詳細介紹,包括3D建模的基本方式、基於TensorFlow和PyTorch的人工智慧框架以及透過影片和即時串流輸入生成表情遷移後的虛擬人物,結合語音辨識、人機對話引擎和口型匹配演算法等生成自己專屬的帶有互動屬性的虛擬人物和偶像,旨在達到降低學習門檻、人人都可以上手的效果。
本書主要包含三部分:第一部分是基礎理論部分,從行業現狀和發展趨勢的角度來介紹什麼是虛擬偶像以及應用的行業,同時對目前業界主流的虛擬偶像實現方式進行概述,讓讀者對此有一個清晰全面的認識;第二部分是應用實踐,介紹基於Python的TensorFlow和PyTorch的機器學習框架的演算法實現部分,從動作同步、表情遷移以及口型同步等方法介紹作為基礎的框架技術;第三部分是專案實踐,介紹2D和3D虛擬偶像的實現方式,完整展示從零到一的製作流程。
本書深入淺出,實操性和系統性強,適合有一定IT背景並對虛擬產業關注的讀者們使用。
限於編者水準所限,書中難免存在不當之處,敬請業界專家和讀者們批評指正。
最後特別感謝王金柱編輯給予的幫助和指導,以及好友的支持和鼓勵。
馬健健