谷歌引入尖端NLP技术 搜索引擎查询效果提高10%

时间:2020-01-07 来源: 国内新闻

10月26日

据国外媒体报道,谷歌目前正在调整其核心搜索算法,称这可能有助于将搜索结果提高10%。谷歌引入了其研究人员开发的尖端自然语言处理技术,并在过去10个月中将其应用于搜索产品。

本质上,谷歌声称它可以通过更好地理解句子中单词之间的关系来提高搜索结果。谷歌研究员兼搜索业务副总裁潘杜纳亚克(Pandu Nayak)表示,旧的谷歌搜索算法将句子分解成“一系列单词”,分析重要单词的含义,给出简单的本地搜索结果。新算法能够理解上下文并给出更准确的结果。

谷歌调整后的搜索算法基于语言表达模型BERT,BERT是“来自变形金刚的双向编码器演示”(双向编码器Presentations From Transformers)的缩写。它把句子看作一个整体,更注重句子的整体意义。谷歌高级研究员兼研究高级副总裁杰夫迪恩(Jeff Dean)表示,随着时间的推移,这种培训在“理解”自然语言处理模型的背景方面变得非常有效。

谷歌表示,过去几天一直在推动算法改进,这将影响到美国约10%的英语搜索结果,其他语言的改进将在稍后讨论。

对搜索的所有改进都将经历一系列测试,以确保它们确实改进了查询结果。其中一项测试涉及使用谷歌的核心人员审查者,他们通过评估搜索结果的质量来训练公司的算法。此外,谷歌还将进行实时账户测试。

当然,并不是每个查询都会受到BERT的影响。这只是谷歌用来对搜索结果进行排名的众多不同工具中的最新一个。这些工具如何协同工作仍然是个谜。谷歌打算对其中一些过程保密,以防止垃圾邮件发送者在其系统上作弊。

此外,保密的另一个重要原因是,当计算机使用机器学习技术来做决定时,很难知道它为什么做出这些选择。所谓机器学习的“黑匣子”是一个棘手的问题,因为如果结果在某种程度上是错误的,就很难诊断出原因。

谷歌表示,该公司已努力确保BERT不被添加到搜索算法中,这是机器学习中常见的问题,机器学习本身的训练模式也存在偏差。伯特是在一个庞大的英语句子语料库上接受训练的,这些句子本身是有偏见的,所以这是一个需要密切关注的问题。

该公司还表示,预计其新算法不会有任何重大变化来引导流量,至少对大型出版商而言是如此。每次谷歌发出改变搜索算法的信号,整个网络都会密切关注。毕竟,谷歌搜索排名的变化有时决定了公司的生存。

每个依靠网络流量赚钱的人都应该注意这一点。谈到搜索结果的质量时,纳亚克说:“这是我们在过去五年中经历的最积极的变化,也可能是公司成立以来最大的变化之一。”

[来源:网易技术]

新闻排行
  1. 新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?

    新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?...

  2. 招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?

    招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?...

  3. 新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?

    新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?...

  4. 招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?

    招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?...

  5. 新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?

    新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?...

  6. 招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?

    招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?...

  7. 新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?

    新华社兰州1月14日电(记者蒋晓)中共中央政治局常委、全国政协主席汪洋近日走访甘肃省临夏回族自治州的贫困?...

  8. 招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?

    招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?...

  9. 10月26日据国外媒体报道,谷歌目前正在调整其核心搜索算法,称这可能有助于将搜索结果提高10%。谷歌引入了?

    10月26日据国外媒体报道,谷歌目前正在调整其核心搜索算法,称这可能有助于将搜索结果提高10%。谷歌引入了?...

  10. 招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?

    招商局信息网快讯:工业用地流转的活跃程度代表了一个地区工业的积极发展,也是一个地区工业投资促进反馈的?...

日期归档
友情链接