
小說通常用於閱讀,但是最近的一項研究試圖通過將書面單詞的情感轉化為音樂來創造一種全新的藝術形式。
這項工作可以改變人們與文學互動的方式,並引發新的方式來可視化信息,例如視聽電子書,產生音樂研究人員說,根據頁面上的情感或新穎的音樂應用程序。
加拿大國家研究委員會的計算機科學家賽義夫·穆罕默德(Saif Mohammad)說:“鑑於以電子讀書形式進行的小說,我們的系統(稱為Transprose)產生了簡單的鋼琴作品,其音符取決於文本中的情感詞。” [使人類與眾不同的十大件事這是給出的
穆罕默德與漢娜·戴維斯(Hannah Davis)一起創建了Transprose作為她的碩士論文,穆罕默德使用該軟件來計算與八個基本的單詞密度情緒:期待,憤怒,喜悅,恐懼,厭惡,悲傷,驚喜和信任。
儘管以前的研究已經分析了情感或研究了創造音樂研究人員說,Transprose是第一個結合兩者的人。穆罕默德說:“這是第一個根據文本中的情感自動生成音樂作品的系統,並使用一種新穎的機制來確定捕獲文本中情感活動的音符序列。”
該算法使用數據庫根據其情感價值對單詞進行評分,從而分析文本中的情感並評估其“情感溫度”。
戴維斯說:“例如,鑰匙是主要還是小,是由小說中正面與否定詞的比率確定的;主要八度是基於整個文本中的喜悅和悲傷詞密度之間的差異。”
傳達心情
研究人員使用Trrinsprose來衡量整個書中的情感變化,自動產生反映特定情緒的音樂。到目前為止,科學家已經為幾本著名小說創作了音樂配樂,包括JM Barrie的《 Peter Pan》,Anthony Burgess的《發條橙》和Cormac McCarthy的《 Road》等。音樂作品可在Trransprose網站。
該算法通過將書分為四個部分來起作用:開始,中間,晚期和結局。然後,它為每個部分產生一個情感概況 - 有關文本中存在情感單詞的各種統計數據的集合。 [您的情緒影響您的世界(反之亦然)的5種方式這是給出的
研究人員說,但是產生音樂是具有挑戰性的,因為“在創作新音樂時,就像創建新故事一樣,有很多選擇和可能性。”
為了自動化此過程,科學家提出了許多規則來確定各種規則音樂元素,例如節奏,比例,八度,主要或次要鍵,音符以及多種旋律的音符順序。穆罕默德說,這些規則基本上是“使音符序列聽起來像音樂的準則,而不是一連串的聲音。”
研究人員還確定了要播放的音符的順序,因為它們與文本中情感單詞的密度變化相對應。
由此產生的構圖由主要情感決定的主要旋律組成,並伴隨著整個文本中其他情緒產生的其他旋律。戴維斯說:“除了主要的旋律,其他兩種旋律基於小說中最普遍的兩種旋律。”
最後,借助名為Jfugue的標准開源軟件,音符序列被轉換為鋼琴音樂的音頻文件。
音樂推文
這項研究可能會提高人們對音樂的元素使它激動科學家說。穆罕默德說:“音樂和文學有著交織在一起的過去。據信它們起源於一起,但隨著時間的流逝,兩者已經發展成為單獨的藝術形式,這些形式繼續相互影響。”
他補充說:“這項工作表明,可以自動將文學的各個方面轉化為音樂。” “我們希望這將導致進一步的研究,從而導致更複雜的系統自動從文本中產生美麗而情感代表性的音樂。”
研究人員說,此外,可能還有其他應用程序超出了創建視聽電子書的前景,從而產生音樂以突出頁面上的情緒。
例如,如果文字和音樂中的情感兼容,則可以將文學作品映射到音樂作品中。然後,應用程序可以找到並播放與正在閱讀的本章的心情兼容的歌曲。
研究人員說,這種類型的軟件甚至可以幫助電影製片人識別或生成電影腳本的音樂,或者可以用來改變社交媒體和網絡互動性。穆罕默德說:“想像一下,伴隨著音樂的推文流,它捕獲了對一個實體的匯總情感,或者顯示世界地圖,在其中單擊特定區域的音樂播放音樂,從而捕捉了從那裡發出的推文的情感。”
該研究在有關的論文中詳細介紹了前出版物Arxiv。
跟著我們@livescience,,,,Facebook和Google+。原始文章現場科學。在Twitter上關注作者@Scitech_cat。