面向企业数据孤岛的联邦排序学习∗
2021-05-23史鼎元王晏晟郑鹏飞童咏昕
软件学报 2021年3期
史鼎元,王晏晟,郑鹏飞,童咏昕
1(软件开发环境国家重点实验室(北京航空航天大学),北京 100191)
2(大数据科学与脑机智能高精尖创新中心(北京航空航天大学),北京 100191)
3(北京航空航天大学 计算机学院,北京 100191)
近年来,排序学习(learning-to-rank,简称LTR)在信息检索领域取得了巨大的成功[1−3],这种成功在诸如谷歌(Google)与必应(Bing)等具备大量用户数据资源的商业搜索引擎上尤为显著.排序学习算法的有效性离不开大量训练数据的支撑,搜索引擎巨头公司的数据往往由搜索引擎与其上千万甚至上亿用户在每日的频繁交互中产生.然而,众多普通规模的中小型企业也有搭建搜索引擎或搜索系统的需求,如企业搜索(enterprise search)或邮件搜索,但其并不具备单独收集大规模用户数据的实力.中小型企业与企业之间,乃至企业的部门之间存在的数据孤岛(data silo)问题导致了大量数据分散存储,出于企业机密保护以及行政手续复杂等原因难以被打通.与此同时,随着越来越多的数据隐私保护法规如欧盟的“通用数据保护条例(general data protection regulation,简称GDPR)”等的出台,即使企业在主观上愿意,其也无法再像以往一样自由地交换或分享含有用户隐私的数据.种种不利因素,使得中小型企业很难利用强大的排序学习算法与大数据的支撑搭建其自己的有效搜索系统[4].因此,如何为各企业克服数据孤岛障碍,在满足隐私保护的约束下训练有效的排序学习,是一个亟待解决的问题.
为了解决上述问题,在本文中,我们……
登录APP查看全文
