孟猛 朱庆华

收稿日期：2020-08-06

基金项目：国家社会科学基金重大项目“面向大数据的数字图书馆移动视觉搜索机制与应用研究”（项目编号：15ZDB126）。

作者简介：孟猛（1977-），男，副研究员，博士，研究方向：用户信息行为。朱庆华（1963-），男，教授，博士生导师，研究方向：社会化媒体，互联网用户行为。

摘 要：[目的/意义]总结国内外移动视觉搜索（Mobile Visual Search，MVS）研究进展，发现现有研究已经取得的成绩、存在的局限性以及未来值得关注的潜在研究方向。[方法/过程]通过对文献内容进行分析，从关键点检测、特征提取与表示、特征索引与匹配、几何一致性验证、系统框架与搜索算法、系统应用与交互式系统、MVS产品分类比较、视觉数据集构建与数据库压缩、体系结构与模式机制、MVS用户行为意愿以及异构MVS系统标准化等对当前研究成果进行梳理。[结果/结论]未来移动视觉搜索的研究可考虑从用户行为视角开展诸如用户体验、初始采纳、持续使用以及情感依恋等方面的研究。

关键词：移动视觉搜索;交互式信息检索;综述

DOI：10.3969/j.issn.1008-0821.2021.01.019

〔中图分类号〕G250.7 〔文献标识码〕A 〔文章编号〕1008-0821（2021）01-0158-11

Review of Research on Mobile Visual Search at Home and Abroad

Meng Meng1 Zhu Qinghua2

（1.Institute of Scientific and Technical Information，Chinese Academy of Tropical Agricultural Sciences，

Haikou 571737，China;

2.School of Information Management，Nanjing University，Nanjing 210023，China）

Abstract：[Purpose/Significance]This paper summarizes the research progress of Mobile Visual Search（MVS）at home and abroad，and finds out the achievements，limitations and potential research directions worthy of attention in the future.[Method/Process]Through the analysis of the literature content，the current research results were sorted out from key index detection，feature extraction and representation，feature indexing and matching，geometric consistency verification，system framework and search algorithm，system application and interactive system，MVS product classification and comparison，visual data set construction and database compression，system structure and model mechanism，MVS user behavior intention and heterogeneous MVS system standardization.[Result/Conclusion]The future research on MVS can be carried out from the perspective of user behavior，such as user experience，initial adoption，continuous use and emotional attachment.

Key words：mobile visual search;MVS;interactive information retrieval;review

移動视觉搜索（Mobile Visual Search，MVS）是指利用移动智能终端获取用户视觉接近对象的图像或视频为检索项，通过移动互联网搜索视觉对象关联信息的一种交互式信息检索方式[1-3]。此类应用程序可用于识别产品、艺术品、印刷媒体和地标等，诸如Google Goggles、Kooaba、SnapTell、GazoPa、TinEye，以及拍立淘、拍照购、手机百度、微软识花、形色等。MVS技术克服了基于文本的信息检索（Text-based Information Retrieval，TBIR）系统固有的局限性，例如语义模糊性和语言的抽象表达。……