广告
广告

Google的新搜索功能混合图像和文本以获得更好的结果

借助“ MultiSearch”,您可以通过将手机摄像机瞄准某些东西来搜索,然后进一步解释您要寻找的内容。

Google的新搜索功能混合图像和文本以获得更好的结果
[图片:由Google提供]

Google正在为其搜索引擎发布一项新功能,该功能试图模仿我们如何询问现实世界中的事物。

广告
广告

现在,您可以使用Google镜头展示图像,而不仅仅是输入搜索框,然后通过后续问题调整结果。例如,您可能会提交一件衣服的图片,然后要求以不同的颜色或裙子长度查看相同的风格。或者,如果您在衬衫上发现自己喜欢的图案,则可以要求在其他物品(例如窗帘或领带)上查看相同的图案。该功能称为“ MultiSearch”,现在正在向Google的iOS和Android应用程序推出,尽管它尚未包含Google的“妈妈”算法去年秋天展示作为改变搜索结果的一种方式。

Google搜索总监Lou Wang表示,MultiSearch采取了我们询问有关我们正在查看的事情的问题的方式,这是Google如何看待搜索未来的重要组成部分。它还可能有助于Google对以更多以隐私为中心的搜索引擎的浪潮保持优势,所有这些都集中在基于文本的查询上。(这也让人想起四岁的Pinterest功能这使用户可以根据衣柜的照片搜索服装。)

王说:“许多人认为搜索已经完成,所有酷炫的创新工作都是在早期完成的。”“越来越多的人意识到,这与事实相距甚远。”

广告

将文本添加到图像搜索

要使用新的MultiSearch功能,您必须在手机上打开Goog​​le应用程序,然后点击搜索栏右侧的相机图标以提高Google镜头。从这里,您可以使用相机的取景器在物理世界中识别对象,也可以从相机卷中选择现有图像。

[图片:由Google提供]
确定对象后,向上滑动以显示视觉匹配,然后点击屏幕顶部的“添加到您的搜索”按钮。这会提出一个文本框来缩小结果。

虽然Google Lens自2017年以来就可以使用,但使用文本过滤搜索的能力是新的。它不仅涉及将图像与类似图像匹配,还涉及了解这些图像的属性,以便用户可以询问有关他们看到的内容的更多问题。正如您所期望的那样,涉及大量计算机视觉,语言学习和机器学习技术的实现。

广告

“人们想向您展示一张照片,然后他们想告诉您一些事情,或者他们想对此进行后续行动。这就是多搜索能够实现的目标。”王说。

目前,Google说该功能最适合与购物相关的查询,这是很多人使用Google镜头的目的。例如,该公司展示了一对黄色高跟鞋的视觉搜索,脚踝周围有一条丝带,然后添加了“ Flat”一词,以找到没有高跟鞋的类似设计。另一个例子可能涉及拍摄餐桌的照片并寻找匹配的咖啡桌。

但是Google搜索产品经理Belinda Zeng表示,MultiSearch在其他领域也可能很有用。她举例说明了在Instagram上找到指甲图案并搜索教程,或拍摄您不记得并查找护理说明的植物。

广告

她说:“我们绝对认为这是一种不仅仅是购物的有力搜索方式。”

超越关键字搜索

使MultiSearch成为人们搜索方案的自然组成部分,将面临挑战。

一方面,尽管Zeng表示Google正在研究浏览器支持,但网络浏览器中没有Google Lens。即使在Google Mobile应用程序中,镜头也很容易错过,并且必须在图像结果上滑动,然后点击另一个按钮并不是最直观的过程。

广告

王说,Google对镜头可能没有详细介绍,对镜头可能会更加突出,“有很多不同的想法和探索”。但是,他确实指出,Google Now每月的图像查询超过10亿。

他说:“即使是现在,人们仍在唤醒Google可以搜索图片或相机的事实。”

更大的挑战将是能够足够的能力回答这些视觉疑问,以至于MultiSearch不仅感觉像一个头。Google感兴趣的一种用例是帮助人们在房屋周围进行维修,但是确定所涉及的无数设备和组件(然后找到解决方案的相关说明)仍然是一个很难解决的问题。

广告

[图片:由Google提供]
Zeng说:“肯定有一些用例我们感到兴奋,但在质量方面肯定仍在进行中。”

不过,最终,Google希望改变用户对搜索的看法,因此并非严格基于文本。这样做将使公司对以替代性,以隐私为中心的搜索引擎(例如达克达克戈,,,,勇敢的搜索,,,,内娃,,,,首页, 和you.com

王说,Google并没有考虑与其他搜索引擎的竞争。尽管如此,基于文本的搜索的过时状态可能有助于解释为什么新的新贵认为他们首先有机会对抗Google。对于Google来说,无论是否担心替代搜索引擎,倾向于从根本上改变搜索本质可能会有所帮助。

广告

王说:“随着时间的流逝,随着Google变得越来越擅长理解图像和结合这些内容以验证搜索,这将自然而然地成为人们对搜索的看法的一部分。”

广告
广告
广告

关于作者

贾里德·纽曼(Jared Newman)涵盖了他偏远的辛辛那提(Cincinnati)哨所的应用程序和技术。他还写了两个新闻通讯,绳索每周顾问

更多的