
小说通常用于阅读,但是最近的一项研究试图通过将书面单词的情感转化为音乐来创造一种全新的艺术形式。
这项工作可以改变人们与文学互动的方式,并引发新的方式来可视化信息,例如视听电子书,产生音乐研究人员说,根据页面上的情感或新颖的音乐应用程序。
加拿大国家研究委员会的计算机科学家赛义夫·穆罕默德(Saif Mohammad)说:“鉴于以电子读书形式进行的小说,我们的系统(称为Transprose)产生了简单的钢琴作品,其音符取决于文本中的情感词。” [使人类与众不同的十大件事这是给出的
穆罕默德与汉娜·戴维斯(Hannah Davis)一起创建了Transprose作为她的硕士论文,穆罕默德使用该软件来计算与八个基本的单词密度情绪:期待,愤怒,喜悦,恐惧,厌恶,悲伤,惊喜和信任。
尽管以前的研究已经分析了情感或研究了创造音乐研究人员说,Transprose是第一个结合两者的人。穆罕默德说:“这是第一个根据文本中的情感自动生成音乐作品的系统,并使用一种新颖的机制来确定捕获文本中情感活动的音符序列。”
该算法使用数据库根据其情感价值对单词进行评分,从而分析文本中的情感并评估其“情感温度”。
戴维斯说:“例如,钥匙是主要还是小,是由小说中正面与否定词的比率确定的;主要八度是基于整个文本中的喜悦和悲伤词密度之间的差异。”
传达心情
研究人员使用Trrinsprose来衡量整个书中的情感变化,自动产生反映特定情绪的音乐。到目前为止,科学家已经为几本著名小说创作了音乐配乐,包括JM Barrie的《 Peter Pan》,Anthony Burgess的《发条橙》和Cormac McCarthy的《 Road》等。音乐作品可在Trransprose网站。
该算法通过将书分为四个部分来起作用:开始,中间,晚期和结局。然后,它为每个部分产生一个情感概况 - 有关文本中存在情感单词的各种统计数据的集合。 [您的情绪影响您的世界(反之亦然)的5种方式这是给出的
研究人员说,但是产生音乐是具有挑战性的,因为“在创作新音乐时,就像创建新故事一样,有很多选择和可能性。”
为了自动化此过程,科学家提出了许多规则来确定各种规则音乐元素,例如节奏,比例,八度,主要或次要键,音符以及多种旋律的音符顺序。穆罕默德说,这些规则基本上是“使音符序列听起来像音乐的准则,而不是一连串的声音。”
研究人员还确定了要播放的音符的顺序,因为它们与文本中情感单词的密度变化相对应。
由此产生的构图由主要情感决定的主要旋律组成,并伴随着整个文本中其他情绪产生的其他旋律。戴维斯说:“除了主要的旋律,其他两种旋律基于小说中最普遍的两种旋律。”
最后,借助名为Jfugue的标准开源软件,音符序列被转换为钢琴音乐的音频文件。
音乐推文
这项研究可能会提高人们对音乐的元素使它激动科学家说。穆罕默德说:“音乐和文学有着交织在一起的过去。据信它们起源于一起,但随着时间的流逝,两者已经发展成为单独的艺术形式,这些形式继续相互影响。”
他补充说:“这项工作表明,可以自动将文学的各个方面转化为音乐。” “我们希望这将导致进一步的研究,从而导致更复杂的系统自动从文本中产生美丽而情感代表性的音乐。”
研究人员说,此外,可能还有其他应用程序超出了创建视听电子书的前景,从而产生音乐以突出页面上的情绪。
例如,如果文字和音乐中的情感兼容,则可以将文学作品映射到音乐作品中。然后,应用程序可以找到并播放与正在阅读的本章的心情兼容的歌曲。
研究人员说,这种类型的软件甚至可以帮助电影制片人识别或生成电影脚本的音乐,或者可以用来改变社交媒体和网络互动性。穆罕默德说:“想象一下,伴随着音乐的推文流,它捕获了对一个实体的汇总情感,或者显示世界地图,在其中单击特定区域的音乐播放音乐,从而捕捉了从那里发出的推文的情感。”
该研究在有关的论文中详细介绍了前出版物Arxiv。
跟着我们@livescience,,,,Facebook和Google+。原始文章现场科学。在Twitter上关注作者@Scitech_cat。