近日,有网友发现时尚品牌 SELECTED 在微信公众号上公开宣布聘请微软小冰为其助理设计师,双方将联合推出以‘城市天际线’为主题的T恤。这是继几个月前微软宣布小冰具有了人工智能创造力,进而成为诗人、歌手之后的又一动作。
T 恤的设计过程和之前的创作模式比较趋同,同样是小冰先通过识别某一激发源,不同的是之前是把图片作为启蒙,而这次是以一首歌一段音频作为创作的开端。
由于每段曲子都有不同的旋律、节奏,而每个人又会唱出不一样的情绪和情感。小冰则会针对不同的曲目绘制出不同的带有城市特色因素的天际线,同时并根据演唱者所传达出的忧郁、轻松、兴奋等不同情绪进行绘制。
相信会有一部分人和笔者有着同样的疑惑,当初小冰出道做诗人时是通过识别一张图并以它作为所谓的灵感从而创作出诗作,可这种所谓的灵感却不能被人类所解释出来,就连微软官方也把这种灵感解释为黑匣子创作,一切都是小冰自发的没有人知道其中的原理。这次的创作又是怎样的呢?是否也是同样无法解释呢?
笔者联系到了几位业内专业人士帮忙分析了解其中缘故:这次的听歌设计创作是小冰基于计算机音乐学(computational musicology)模型,分析歌曲的节奏、旋律、和弦色彩、情绪等特征,通过跨语义空间的深度神经网络进行创作,使画面与音乐的特征相匹配。
通俗来讲就是小冰事前是要先学习每个城市所关联的标志建筑物等的因素,然后在绘画过程中则是主要根据歌曲节奏和旋律进行设计,同时基于之前学习的铺垫,勾勒出跟旋律特征匹配的天际线;再透过演唱者传递出的独特情绪渲染出最能表达该情感的画风。