欣雅小说 通过搜索各大小说站为您自动抓取各类小说的最快更新供您阅读!

如何表示数值化的自然语言相对应的属性呢?

研究人员一般做法是将数值化的语言矢量化或者说向量化。

向量相比于标量的话就是带方向的量。

事实上这种研究方向并不算新潮。

林灰记得前世早在1975年,就有研究人员首次提出向量空间模型(VSM),试图利用该模型来处理数值化的自然语言。

林灰通过搜索相关信息,发现这个时空虽然慢了一点,但VSM向量空间模型这个方法在1977年也被提出来了。

所谓的VSM模型听起来或许挺高大上的。

其实没那么复杂。

其主要思想就是假设一个文本的语义只与该文本中的单词有关,而忽略其语序和单词之间的相互关系,然后通过基于词频统计的方法,将文本映射成向量,最后通过向量间的距离计算以表征文本间的相似度。

计算两个向量之间的距离?

这玩意是高中课本上的内容。

估计高考后脑子里知识还没忘记的一般考生都能拿过来利用这个模型算算文本相似度。

不过很多高中生学的时候可能根本不知道他们学的这玩意能做这个。

(ps:……高中学的东西很有用,不要觉得暂时看不到用途就放弃)

当然,也正是由于该模型简单高效。

在该模型提出来之后很长的一段时间里,它都是文本相似度计算领域的主流方法。

但该模型并不是没有缺点。

基于VSM的方法仍然有两点缺陷:

一方面当文本量很大时,生成的文本向量是非常稀疏的,这就导致了空间和计算资源的浪费;

另一方面VSM为达到简化模型的效果忽略了词语间的关系,但在很多情况下词语之间是存在联系的,因此简单地认为词语间相互独立是不合理的。

这两条缺陷尤其致命。

第一条直接影响处理相似度的效率,第二条直接影响词义相似度判别的准确度。

在这种情况下,VSM模型在使用了一段时间之后,研究人员就将这个模型抛弃了。

现在的人们具体应用什么计算文本相似度林灰也不是很清楚。

不过林灰注意到伊芙·卡莉先前发给他的邮件并没有提到向量有关的内容。

时下的研究人员似乎已经淡忘了向量化。

或许现在再说到利用向量化进行自然语言文本处理似乎是一个很复古的研究方向了。

但实际上向量化这个方向仍然有潜力可以挖掘。

应用分布式词向量完全可以进行文本相似度计算。

不过这个时空的人们不知道也很正常。

林灰记得前世涉及到自然语言处理这方面很多重要成果都是2013年、2014年这两年井喷出来的。

前世涉及到文本相似度模型的架构这方面。

用于计算语义文本相似度的分布式词向量这项技术就是就是在2013年诞生的。

前世正是在分布式词向量问世后,语义文本相似度才取得了突破性的进展。

这个时空节奏上慢了两年,应用分布式词向量计算文本相似度没被提出来也很正常。

一步落后,步步落后。

节奏上慢这两年时间的话,这个时空无疑很多方面都落后了。

这些对于林灰无疑是个好消息。

应用分布式词向量来构建计算文本相似度的方法虽然说起来容易。

但具体阐述起来这个问题其实还是比较复杂的。

因此林灰当初并没有在邮件中回复伊芙·卡莉。

如果这个时空涉及到文本相似度模型架构方面的研究都短腿的话。

那林灰岂不是很有义务援助一下?

看来跨时空之搬运工又要上线了。

当然了这种搬运不是无偿的。

眼下林灰更关心的还是论文。

在相关研究出现方向性偏差的情况下,林灰真要写论文的话岂不是很容易就能发表好几篇?

这样水平的论文林灰写起来很容易。

虽然林灰前世学术生涯上没有走太远,但前前后后发的论文加起来大概有七八篇了。

有几篇论文还是全英文的。

总之发表论文这样的事情,对林灰来说已然是轻车熟路。

这种情况下,林灰感觉他很容易就能把麻省理工学院学士学位所要求的附加分刷满。

尽管如此,林灰还是决定先跟伊芙·卡莉见面沟通一下再弄论文相关的事情。

毕竟林灰不是很清楚西方世界在文本相似度研究的具体进展,万一不小心撞车就尴尬了。

商业上的撞车可以美其名曰是商业竞争。

学术上的撞车可是一辈子的污点。

现在林灰只希望能够快点和伊芙·卡莉见面了。

好在林灰期待的见面没多久就发生了。

林灰在北域域北国际机场见到了“伊芙·卡莉”。

伊芙·卡莉先前怕林灰不相信她的身份,于是在邮件里附上了一堆能够佐证身份的证明。

林灰当初就看到过伊芙·卡莉的照片。

不得不说,伊芙·卡莉的样貌很有辨识度。

一头金色微卷的长发,身高目测一七六左右,身材比例很棒,曲线很S。

尽管以挑剔的眼光来看,林灰觉得此时眼前的“伊芙·卡莉”的身材和样貌似乎也能在90分以上。

最关键的是给人一种很纯真的感觉,给人一种不染纤尘的那种感觉。

呃,这种感觉怎么说呢,反正很有保护欲那种。

不过林灰还没那么不淡定。

女人而已,只会影响他肝论文/敲代码的速度。

“伊芙·卡莉”似乎还没发现林灰。

林灰迎着走了上去,主动用英语打招呼道:“你是伊芙·卡莉么?我就是林灰,欢迎来到中国。”

呃,这几句程度的英文林灰还是能应付的。

不过眼前这人反应明显迟疑了一下。

林灰感到很奇怪,莫非是搞错了?

正在林灰很纠结的时候,突然身后传来的声音。

“你就是LIN HUI么?我是伊芙·卡莉,很高兴见到你!”

林灰心想,这下尴尬了。

第一次接人还认错人了。

不过,不应该啊,眼前之人很有辨识度的西方面孔,而且和伊芙·卡莉先前发来的证件照上那女的一模一样啊。

林灰不解地回过头,看向声音来源,又看到了一个“伊芙·卡莉”。

喜欢穿越:2014请大家收藏:(www.xinyaxs.com)穿越:2014欣雅小说更新速度全网最快。

欣雅小说推荐阅读: 近身医王我姐姐太有钱了天才高手娱乐帝国系统天庭小狱卒都市最强修真妖孽点金魔术师第一序列大医凌然怀旧时代我的绝色总裁未婚妻安先生今天依然单身超品战兵重生之我为书狂无敌神龙养成系统软饭天王逍遥小镇长绝色总裁爱上我国际供应商校花的贴身高手女神的贴身高手我的景区爆火了拒当接盘侠:开局坑了女神全家一个厨子的往事影帝从天降系统开始国王的穿越之门我真没想当大网红啊我是星主驭兽戒都市最高手宅之崛起商踪谍影超级俗人重生之龙在都市桃运小神农动力王朝最强神话传说咸鱼的自救攻略都市神级弃少重生之股动人生超级警监功夫帝皇顾道长生绝世大明星穿越四合院世界老兵新警影帝他不想当太监仙界归来文娱帝国我能改变东西颜色
欣雅小说搜藏榜: 大王饶命天才相师万族之劫神级强者在都市修真聊天群全球高武我真没想重生啊罪人当道重生之神级明星永生诡术余罪都市全能高手拒当接盘侠:开局坑了女神全家噩梦了愿师极品美女爱上我小农民修真无敌幸运星仕路红颜:美女记者丧尸猎人都市电能王都市枭雄系统护美邪医文娱缔造者重生之二代富商巅峰权力绝品狂少辣手神医透视狂医都市神级护卫娱乐天王的养成系统近身兵王超时空微信我的娇美大小姐我的老爸是国王豪门贵婿护花圣手一个厨子的往事我开局就有一个交易系统重生在那机遇年代重返1995田家巷一号我的剧本被全球直播极品贴身兵王大天王大牧场主东方梦工厂从直播开始成为神级设计师医色生香帝国重器石头牧场
欣雅小说最新小说: 地窟求生:开局食物增幅三十倍再启仙途带着爸妈去上班李氏汽车公司?不,是国货之光我的金融帝国我写的娱乐文被杨老板看到了放弃留学,我打造了世界第一名校娱乐:别联系了,真不熟从重生开始合租怪物食堂奶爸,开局校花找上门,当爸了?我的夫妻关系竟能数据化骑士荣耀之半岛风云四合院里的老中医文娱:让你唱歌,你搁这作法?热搜第一:叫你捡漏你开挂啊百元求生:从潘家园捡漏开始浪在娱乐圈四合院里的唯一老实人韩娱之隔世斑斓首富后才知是反派平行空间命犯桃花极道狂龙黑道教父迷情美女总监乱世血皇幕后邪徒天才高手市长千金恋上我靠近我温暖你高圆寺的坏小子贴身护美高手重生之纵横一生第一少爷王牌特工都市天龙重生之超级班长都市神语者黑道偷天换日逆龙息狂傲特工开创皇朝:香媚特行逆天奇缘楚霸王在今世坠落的心痕重生之都市逍遥天圣宫风云录都市之风华大少与玉兔下凡的日子