人工智能诗意语境
邱志杰+何晓冬
这是我所带头的中央美院EAST团队与京东人工智能研究院的合作项目成果之一。主创算是我和京东人工智能研究院的副院长、京东集团副总裁何晓冬博士,参与者还有中央美院的教师陈抱阳、京东研究院的陈曼、戴岩、刘瑞雪等技术人员。
我们从京东数据库中18000个常用词中,经由艺术家邱志杰制作的思维导图设定独特的联想逻辑,基于长短时记忆算法训练人工智能模型进行深度学习,并以从艺术家的手绘地图中选取的图形作为前端,形成了这个“思维地图生成器”。这个思维地图工具可以实时从人类语音中摘取关键词,形成发散性的联想,并生成概念地图。
结果是,我们可以随意说话、聊天,这个人工智能程序进行语音识别,语意理解,自动翻译,然后摘取关键词,在关键词的基础上进行发散联想。例如,从“明天”联想到“末日”、“美好”、“预测”等词,由“房间”联想到“面积”、“家具”、“地产”等。这些是比较符合常识和逻辑的联想。但我的工作主要是贡献了一些打岔的、开玩笑的、另类的联想模式,例如,由“太阳”联想到“黑洞”,再进一步跳跃到“计白当黑洞”,或者由“太阳”联想到“黑孩子”。这个实时关键词摘取和拓展的方式,可以作为演讲时的背景板。未来如果算力增长和网络带宽允许,当它具备图片和视频抓取功能,可以取代今天流行的PPT。
为了避免画面过于拥挤,我们选择每次抓取一个关键词的时候,联想出5个关键词,以及一个漂浮的随机词,一边创造机遇。
这个作品还有另一种模式,在静态点击模式下,输入第一个词之后,可以不断地用鼠标点击联想延伸出来的关键词,从被点击的关键词会再次弹出下一阶的联想词。这样,不断地点击不同的词,理论上会延绵成一张无穷大、无穷密集的地图。
这个研究和作品结合了语音识别、语义识别、自动翻译和深度学习等多种技术。与该作品相关的论文在IEEE、IJCAI等多个人工智能顶会上发表。