題-1_100_100.jpg)
基本信息
- 項目名稱：
- 基于情緒度理論的動畫電影配樂軟件的設(shè)計與研究
- 小類：
- 信息技術(shù)
- 簡介：
- 動畫電影作為一個電影的分支已經(jīng)逐漸成熟，慢慢成長壯大，制作精良的動畫影片層出不窮，畫面制作越來越成熟，但是配音還是依賴于人工完成的，在技術(shù)應(yīng)用上沒有重大的改革和創(chuàng)新，我們開發(fā)的配樂軟件可以有效地應(yīng)用在影片制作的“聲音”方面，簡化復(fù)雜的人工配樂過程，從而減少勞動力的需求，提高工作效率，降低制作成本。為我國影視動畫產(chǎn)業(yè)發(fā)展作出新貢獻(xiàn)。
- 詳細(xì)介紹：
- 動畫電影作為電影藝術(shù)的一個分支，是在1907 年出現(xiàn)的，伴隨著電影藝術(shù)的成熟，慢慢成長壯大，經(jīng)過90 年的發(fā)展，在電影藝術(shù)史上占有了重要的一席之地。到21世紀(jì)，動畫片的“黃金時代” 已經(jīng)來臨了，人們對動畫的興趣越來越濃厚，涌現(xiàn)了大量優(yōu)秀的動畫影片，如：《馴龍記》、《喜羊羊與灰太狼》、《麥兜響當(dāng)當(dāng)》等。 然而我國的動畫電影產(chǎn)業(yè)與國外相比，仍然處在較為落后的初級階段，雖然各種不同形式、不同題材、制作精良的動畫影片層出不窮，但是配音上的更新和技術(shù)沒有重大的改革和創(chuàng)新，傳統(tǒng)的動畫電影配樂技術(shù)不僅要求音效設(shè)計師要善于展開聯(lián)想、理解角色、表情達(dá)意、創(chuàng)設(shè)環(huán)境，而且還要注意畫面和音樂之間的節(jié)奏配合。只有把握好了每一個環(huán)節(jié)，才能夠給動畫電影配上“合身”的音樂。無疑地，這種純粹依賴于人工完成的技術(shù)，不僅效果不佳而且需要耗費大量的人力、物力以及財力。因此，尋找方便、快捷的配樂技術(shù)已經(jīng)是勢在必行。如果我們能夠自動識別動畫人物的表情，然后根據(jù)識別結(jié)果自動實現(xiàn)配樂，無疑可以克服傳統(tǒng)配樂技術(shù)的缺陷。本課題旨在研究基于情緒度理論的動畫電影配樂軟件的設(shè)計與實現(xiàn)。
作品圖片
作品專業(yè)信息
撰寫目的和基本思路
- 我國動畫電影產(chǎn)業(yè)與國外相比，仍然處在較為落后的階段。國家廣電總局研究制定了《關(guān)于發(fā)展我國影視動畫產(chǎn)業(yè)的若干意見》，意見指出我國動畫電影需要依托高新技術(shù)，加快產(chǎn)業(yè)升級，真正形成具有我國文化特色的影視動畫產(chǎn)業(yè)發(fā)展新格局。 如果能夠自動識別動畫人物的表情，根據(jù)識別結(jié)果自動實現(xiàn)配樂，就可以克服傳統(tǒng)配樂技術(shù)的缺陷。本課題通過研發(fā)依托于現(xiàn)代計算機(jī)與媒體技術(shù)的動畫配樂技術(shù)來為我國影視動畫產(chǎn)業(yè)發(fā)展作出新貢獻(xiàn)。
科學(xué)性、先進(jìn)性及獨特之處
- 基于論文原理實現(xiàn)的相關(guān)軟件具有“界面美觀，操作簡單，功能眾多”等特點，軟件包括動畫人物臉譜檢測、人物表情識別以及動畫電影配樂三大功能。 首次應(yīng)用情緒度理論，研究基于情緒度理論的動畫電影配樂軟件的設(shè)計與實現(xiàn)。采用了基于Adaboost的人臉檢測算法，同時建立了第一個真正實時的人臉檢測系統(tǒng)，從根本上解決了檢測速度的問題，且具有較好的識別效果。
應(yīng)用價值和現(xiàn)實意義
- 電腦技術(shù)在動畫電影上的成功運用后動畫創(chuàng)作者們不斷地創(chuàng)新動畫的表現(xiàn)形式和手段，開發(fā)的這些軟件都是應(yīng)用于影片制作的“畫面”方面的，而應(yīng)用于“聲音”方面的卻屈指可數(shù)。我們開發(fā)的配樂軟件可以有效地應(yīng)用在影片制作的“聲音”方面，簡化復(fù)雜的人工配樂過程，從而減少勞動力的需求，提高工作效率，降低制作成本。
學(xué)術(shù)論文摘要
- 傳統(tǒng)的動畫電影配樂都是通過人工完成，需要耗費大量的人力、物力以及財力。本課題以情緒度理論為基礎(chǔ)，通過捕捉動畫人物臉譜，進(jìn)而進(jìn)行人物表情識別，最后根據(jù)表情識別結(jié)果自動實現(xiàn)動畫電影的配樂功能，克服了傳統(tǒng)配樂技術(shù)的缺陷。在動畫人物臉譜檢測方面，采用Adaboost方法，實現(xiàn)了實時檢測。在動畫人物表情識別方面，通過使用低層視覺特征融合、高層語義特征表述以及協(xié)同學(xué)習(xí)等先進(jìn)技術(shù)，有效地提高了人物表情識別的準(zhǔn)確性和魯棒性。實驗結(jié)果表明：使用本軟件進(jìn)行配樂的平均正確率達(dá)到了96%。因此，本軟件可以應(yīng)用在動畫電影的配樂中，以簡化復(fù)雜的人工配樂過程，提高工作效率，降低制作成本。在后續(xù)的開發(fā)中，我們將聯(lián)合動畫制作公司，進(jìn)一步完善該軟件的功能，并進(jìn)行產(chǎn)業(yè)化運作。
獲獎情況
- 基于論文原理所配樂的動畫電影作品《FUN手機(jī)——巧奪棒棒糖》于2011年3月在由中央美術(shù)學(xué)院藝術(shù)資訊網(wǎng)和中央美術(shù)學(xué)院美術(shù)館聯(lián)合主辦的首屆大學(xué)生DV大賽上獲得銀獎。
鑒定結(jié)果
- 無
參考文獻(xiàn)
- 國內(nèi)文獻(xiàn)： 1. 標(biāo)題：電影音樂與情緒 著者：孫暢 出處：科學(xué)中國人.2010, 6.-124-125 2. 標(biāo)題：淺論影視動畫的配樂藝術(shù) 著者：杜琬 出處：大眾文藝(理論).2009, 21.-124 3. 標(biāo)題：淺析影視音樂的情感表現(xiàn) 著者：賀德梓 出處：電影文學(xué).2008 23.-176 4. 標(biāo)題：人工心理模型驅(qū)動的人臉表情動畫合成 著者：谷學(xué)靜 許廣賓 熊偉 王志良 出處：計算機(jī)工程與應(yīng)用.2008,44(8).-107-109 5. 標(biāo)題：基于語音情感識別的多表情人臉動畫方法 著者：謝金晶 陳益強(qiáng) 劉軍發(fā) 出處：計算機(jī)輔助設(shè)計與圖形學(xué)學(xué)報.2008 20(04).-520-525 6. 標(biāo)題：基于表情子空間多分類器集成的非特定人人臉表情識別 著者：胡步發(fā); 陳炳興; 黃銀成 出處：計算機(jī)應(yīng)用.2011 31(03).-736-740 7. 標(biāo)題：基于機(jī)器學(xué)習(xí)的語音驅(qū)動人臉動畫方法。 著者：陳益強(qiáng) 高文 王兆其 姜大龍 出處：軟件學(xué)報.2003,14(02).-215-221 8. 論文題名：影視藝術(shù)聲音蒙太奇的研究 著者：李律 導(dǎo)師：王稼之 學(xué)位授予單位：東北師范大學(xué),碩士 學(xué)位授予年份：2008 國外文獻(xiàn)： 9. TI: Modeling an Infinite Emotion Space for Expressionistic Cartoon Face Animation AU: Chopra, Prashant Meyer, Joerg SO: IASTED International Conference on Computer Graphics and Imaging, p 13-18, 2003. 10. TI: Speech-driven cartoon animation with emotions AU: Li, Y. Yu, F. Xu, Y.-Q. Chang, E. Shum, H.-Y SO:Proceedings of the ACM International Multimedia Conference and Exhibition, n IV, p 365-371, 2001.
同類課題研究水平概述
- 經(jīng)閱讀文獻(xiàn)，分析對比得到以下結(jié)論： 1. 國內(nèi)相關(guān)文獻(xiàn)10篇（見附件查新報告）。相關(guān)文獻(xiàn)主要涉及：文獻(xiàn)1電影音樂與情緒；文獻(xiàn)2淺論影視動畫的配樂藝術(shù)；文獻(xiàn)3淺析影視音樂的情感表現(xiàn)；文獻(xiàn)4人工心理模型驅(qū)動的人臉表情動畫合成；文獻(xiàn)5基于語音情感識別的多表情人臉動畫方法；文獻(xiàn)6基于表情子空間多分類器集成的非特定人人臉表情識別；文獻(xiàn)7基于機(jī)器學(xué)習(xí)的語音驅(qū)動人臉動畫方法；文獻(xiàn)8影視藝術(shù)聲音蒙太奇的研究；文獻(xiàn)9漢語語音同步的真實感三維人臉動畫研究；文獻(xiàn)10數(shù)字動畫中燈光的情緒表達(dá)。 2. 國外相關(guān)文獻(xiàn)7篇（見附件查新報告）。相關(guān)文獻(xiàn)主要涉及：文獻(xiàn)11卡通人臉動畫表現(xiàn)主義的無限情感空間的建模；文獻(xiàn)12提出了一種多媒體人機(jī)交互應(yīng)用的卡通人臉動畫系統(tǒng)；文獻(xiàn)13提出利用多模態(tài)信息來對面部表情識別的一種混合方法；文獻(xiàn)14探討了如何將三維人臉動畫技術(shù)在二維動畫制作的具體框架利用；文獻(xiàn)15提出了利用證據(jù)推理面部手勢分析的新方法；文獻(xiàn)16提出了多模式信息在面部表情識別中的使用方法；文獻(xiàn)17提出了跟蹤和面部表情刻畫的方法和模型。 3. 本項目以情緒度理論為基礎(chǔ)，通過捕捉動畫人物臉譜，進(jìn)而進(jìn)行動畫人物表情識別，最后根據(jù)表情識別結(jié)果自動實現(xiàn)動畫電影的配樂功能；在動畫人物臉譜檢測方面，采用Adaboost方法，實現(xiàn)實時檢測；在動畫人物表情識別方面，研究如何提取臉譜圖像中對局部形變、尺度、光照、視角等構(gòu)成一定程度不變的高效低層視覺特征，融合全局特征和局部特征實現(xiàn)圖像表征；解決低層視覺特征到高層語義之間的映射，得到圖像的高層語義特征表述；建立多分類器在訓(xùn)練階段以及決策階段的協(xié)同，最終提高動畫人物表情識別的準(zhǔn)確性和魯棒性。 4. 對比分析可知：關(guān)于動畫人物表情識別的研究，國內(nèi)外已見有不少文獻(xiàn)研究報道，涉及各種方法，也見有文獻(xiàn)涉及影視配樂的內(nèi)容，但未見有具體討論通過動畫人物表情識別自動實現(xiàn)動畫電影的配樂功能的內(nèi)容，而本課題提出以情緒度理論為基礎(chǔ)，通過捕捉動畫人物臉譜，進(jìn)行動畫人物表情識別，最后根據(jù)表情識別結(jié)果自動實現(xiàn)動畫電影的配樂功能；并研究基于圖像語義的動畫人物表情識別等內(nèi)容，未見密切相關(guān)的研究報道。 綜上所述，課題“基于情緒度理論的動畫電影配樂軟件的設(shè)計與研究”具有新穎性。
