文/光谱

　　《创世记》第11章中纪录，人类设计确立通天的高塔，而天主让人类说差异的语言，使得他们无法协作，设计最终失败。

　　现实中，差异语言成为了各自所属文化的因子，构建出一种多样的美。但语言仍像鸿沟，阻碍着人类的交流。

　　最近，Facebook用人工智能对翻译系统举行了一次重大革新。

　　他们的工程师发现，网站上对帖文和回复举行翻译的按钮天天会被点击数十亿次，翻译动作有数千个偏向(好比中英互译，英文到中文是一个偏向，反之又是另一个偏向)之间。

　　云云巨量的翻译事情，Facebook一直以来做的却欠好。他们已往使用的统计机械系统，翻禁绝俗语，识别不了错字和缩写，无法明白上下文，很难准确翻译帖文的意图。于是，工程师们用改用一种名叫“带注意力的长短时记忆”(Long Short-Term Memory with attention， LSTM) 的深度学习手艺，设计了一套人工智能翻译系统。

　　现在，新的神经机械翻译系统已完全取代了已往的机翻系统，部署到Facebook网站、Instagram以及其他产物中。革新的效果显著：根据业界公认的BLEU尺度，Facebook新翻译系统种种语言互译得分比旧系统提高了11%。

　　人际相同大多通过语言完成。而当介入方不使用统一语言，相同就必须通过翻译。因此翻译系统的准确度极大影响着相同的功效。但遗憾的是，绝大多数网上和手机上的翻译网站和软件，背后的手艺都来自机械翻译。

　　通常，机翻系统对常见的单词、短语和句法简朴的句子翻译效果较好。若是一句话就是主谓宾，好比“我吃米饭”，系统翻译成 “I eat rice”，这没问题。

　　但好比中日互译、或者下图中土耳其语和英文互译，原文的语言和翻译后语言在句法上有很大的差异，机械翻译就会左支右绌了。下图是机翻效果：

　　翻译出的英文没有语法错误，但照样不太容易懂什么意思。这是由于机翻会把句子拆成一个个字段，效果就是把一个个字段的翻译放出来，没有对目标语言的语序、语法和表达习惯举行优化。

　　人工智能怎样做到更准确、更有人味儿地翻译呢?

　　维基百科注释， LSTM是一种在时间上递归神经网络 (Recurrent Neural Network)，适合于处置和展望时间序列中距离和延迟相对较长的主要事宜。翻译正好是这种类型的事情，由于很长的一句话，可能后半段是对前半段的逻辑呼应，但机翻系统基本不记得前面说的是什么。

　　LSTM能记着整句话的内容，对句子的上下文举行反溯，明白逻辑，从而给出更正确、流利和隧道的翻译效果，如下图：

　　“注意力”(attention) 也是深度学习里一个很有趣的机制，它有点像人类考察事物时眼神的聚焦，锅里有菜，你会自动把更多注意力分配到菜上而不是锅或者锅柄。

　　注意力能够辅助新系统注意一些在尺度英语辞典里没有泛起的词，这些词很有可能是缩写和短语，好比idk (I don’t know)、tmrw (tomorrow)，也有可能是网络用语。当神经机械在句子里发现这样的词，会先留空不翻译，分配一定的盘算力，去其他词库和训练数据集查找这个词的释义，最后再翻译出来。

　　不仅云云，研发团队还利用了一些神经网络剪枝(保留主要的权重)和压缩编码的算法，极大地降低神经翻译系统的词汇表巨细，减小了盘算量，但没有拉低翻译精度。

　　搞定了翻译系统，并不是终点，工程师们还要把它部署到Facebook数十亿用户量级的后端系统中去。开发了深度学习框架Caffe的Facebook研究科学家贾扬清，已经带队开发出了更注重模块化，利于移动端和大规模部署的Caffe2。在新框架上运行，神经翻译系统的效率提升了2.5倍。

　　由于深度学习手艺的希望，神经机械翻译在近年越发盛行，并已进入许多盛行的产物中，最先辅助人们更好地相同。微软推出的翻译软件Microsoft Translate，让相同多方像用微信一样加入群聊，自然对话并获得各自的翻译，备受好评。

　　去年，全球5亿人使用的Google Translate服务中部署了神经翻译机械。那时PingWest品玩用一些经典中英段落测试互译，仍会泛起新鲜的翻译：

　　In my younger and more vulnerable years my father gave me some advice that I’ve been turning over in my mind ever since。

　　“Whenever you feel like criticizing anyone，”he told me，”just remember that all the people in this world haven’t had the advantages that you’ve had。”

　　人工翻译：

　　我年数还轻，阅历不深的时刻，我父亲教训过我一句话，我至今还念兹在兹。

　　“每逢你想要指斥任何人的时刻，”他对我说，“你就记着，这个世界上所有的人，并不是个个都有过你那些优越条件。”

　　Google神经机械翻译(去年)：

　　在我更年轻，更容易年，我的父亲给了我一些建议，我一直在我心中今后翻身。

　　“每当你以为指斥任何人，”他告诉我，“只记得，所有的在这个世界上的人都没有，你有过的优势。”

　　时隔一年之久再去测试，效果已经好了许多：

　　在我年轻，更懦弱的岁月里，我父亲给了我一些建议，自从我一直在转过头来。

　　“每当你想指斥任何人，”他告诉我，“只要记着，这个世界上所有的人都没有你的优势。”