-
摘要:
随着智能移动终端的日益普及，人们越来越多地利用社交网络平台（如Twitter、新浪微博等）获取信息、评论和交流. 虽然全球卫星定位系统（GPS）设备能够精确获取位置信息，但是大量用户出于隐私和安全的考虑不会直接共享自己的位置信息. 因此，如何获取在线用户的地理位置成为了一个前沿的研究领域以及学术界和工业界共同关注的重要课题，并且成为众多下游应用的基础，例如基于位置的定向广告投放、事件/地点的推荐、自然灾害或疾病预警和网络犯罪的追踪等. 详细总结了预测社交网络用户地理位置的方法、数据、评价体系和基础算法. 首先，归纳了不同的定位任务以及相应的评价指标；其次，针对不同的任务梳理所用的数据类型和数据融合方式，并且，详尽分析了已有的信息抽取和特征选择方式及其优缺点；再次，对现有定位模型和算法进行分类，从地名词典、传统机器学习和深度学习3个方面对用户定位方法进行阐述和分析；最后，总结了社交网络用户地理位置预测的难点和面临的挑战，并展望该领域的发展趋势和未来研究所需要关注的方向.
Abstract:With the increasing popularity of intelligent mobile terminals, people increasingly use social network platforms (such as Twitter, Sina Weibo, etc.) for information acquisition, comments, and exchanges. Although GPS devices can accurately obtain location information, many users do not directly share their location information for privacy and security considerations. Therefore, obtaining the geographic location of online users has become an important topic in both academia and industry and is the foundation of many downstream applications, such as location-based targeted advertising, event/location recommendations, early warning of natural disasters or diseases, and criminal tracking, etc. We survey in detail the methods, data types, evaluation metrics, and fundamental algorithms for predicting the geographic location of social network users. First, we discriminate different online user geolocation tasks and corresponding evaluation protocols. Subsequently, we assess the data structures and fusion methods used for individual geolocation tasks. Besides, we analyze the existing information extraction and feature selection approaches, as well as their advantages and disadvantages. Moreover, we provide a taxonomy to categorize existing user geolocation models and algorithms, followed by a thorough analysis of different methods from three aspects: geographic dictionary, traditional machine learning, deep learning and graph neural networks. Finally, we summarize the difficulties and challenges in user location prediction while outlining the possible research trend and opportunities to shed light on future work in this field.
-
随着信息技术的飞速发展，开放世界物体识别与检测系统已成为现代社会不可或缺的一部分，广泛应用于教育、工业、医疗等众多领域. 这些系统不仅需要处理复杂的视觉数据，还要适应不断变化的环境和实时的动态场景. 伴随着深度学习、计算机视觉、边缘计算等新兴技术的突破，以及GPU加速卡、高速网络设备等新硬件的发展，开放世界物体识别与检测系统的设计和实现面临着前所未有的新挑战和机遇.
近年来，深度学习特别是在自动驾驶[1]、监控安全[2]、医疗影像分析[3]和对话系统[4]等领域取得了显著的进步. 在自动驾驶领域，深度学习已被成功应用于车辆环境感知和决策系统，提高了自动驾驶车辆的安全性和可靠性. 在监控安全方面，基于深度学习的方法已能有效识别和追踪监控视频中的行人和物体，极大地提高了公共安全的监控效率. 而在医疗影像分析领域，研究人员能够更准确地诊断疾病，如使用深度学习进行皮肤癌的早期检测和分类. 随着模型架构的不断创新，例如Transformer[5]和GPT[6]系列模型的出现，深度学习在处理语义理解和自然语言处理方面也取得了巨大的成功. 这些进展为开放世界物体识别与检测系统提供了强大的技术支持和灵感源泉.
面对越来越复杂的应用需求和深度学习方法的快速发展，研究人员和从业者开始探索如何更好地将深度学习方法应用于开放世界物体识别与检测系统. 这不仅涉及到对基本的物体识别和定位，还包括对复杂场景的深度理解、动态变化的适应能力的挑战， 如图1所示.
本文中，封闭环境是指由用户预先定义、限定条件或者背景下的操作环境，其中的变量、条件和可能遇到的情景都是已知且可控的. 在封闭环境中，系统或模型面对的任务、输入数据的种类和范围都是事先设定好的，不会出现系统未曾训练或预备过的新情况和数据类型. 因此，封闭环境通常用于特定的、受限的应用场景，如工厂自动化、特定场景下的物体识别等. 开放环境则相反，指的是没有事先定义所有可能遇到的条件和情景的操作环境. 在开放环境中，系统或模型可能遇到未知的、新颖的或者在训练过程中未曾出现过的情况和数据类型. 这要求系统具有更高的适应性和泛化能力，能够处理和识别新的情景和物体. 开放环境更贴近于现实世界的复杂多变，如街道行驶的自动驾驶汽车、实时监控和响应的安全系统等. 本文将探讨在开放世界物体识别与检测系统中应用深度学习的现状、面临的主要挑战以及未来的发展趋势，旨在为相关领域的研究和实践提供参考和启示.
1. 从封闭走向开放
在信息时代的浪潮中，物体识别与检测系统经历了从封闭到开放的重要转变. 传统上，物体识别与检测系统依赖于封闭的、标注完备的数据集如ImageNet[7]、COCO[8]以及Objects365[9]等进行训练，这些数据集为系统提供了丰富而准确的标签信息. 然而，这种封闭环境的数据集存在明显的局限性，包括但不限于类别的封闭性、场景的静态性和环境的理想化，这使得模型难以应对现实世界的多样性和复杂性.
随着技术的发展，开放世界物体识别与检测系统[10-11]应运而生，它要求模型能够识别和理解在训练阶段未出现过的环境和物体. 这种系统面对的挑战包括类别的动态增加、场景的实时变化以及环境的不确定性. 在开放世界条件下，物体识别与检测系统必须具备更高的适应性和鲁棒性，例如能够在复杂的办公或家居场景中，即使遇到未知物体或遭受视角、光照变化的影响，也能准确地完成物体的识别与检测任务.
2. 国内外相关研究
开放世界物体识别是一个综合任务，包含开集物体识别、零样本物体识别、小样本物体识别、长尾物体识别和增量物体识别等多个单一开放维度的子任务. 开集识别可分为3类：决策改进类[12-15]，通过更新神经网络输出层，优化决策过程，区分已知与未知类别，减少误分类；表示优化类[16-20]，通过改进网络特征表示，结合监督与无监督技术提取判别性特征，提升对未知类别的识别；数据生成类[21-24]，使用GANs生成或增广数据，模拟未知类，训练模型以识别新类别. 零样本识别方法分为2类：非生成式方法和生成式方法. 非生成式方法[25-27]将视觉特征投影至语义空间或者公共空间做判别，生成式方法[28-29]利用语义信息生成未知类视觉特征来训练. 小样本识别可分为3类：度量学习式法[30-31]，通过大样本类别的数据学习样本间相似性，再应用于小样本类别的分类；样本生成法[32-33]，在大样本类别上学习增广技术后用于小样本类别的数据增广，解决样本稀缺；元学习法[34-35]，通过大样本类别的训练数据学习优化策略和初始化，以快速适应小样本任务. 在长尾识别任务中，常通过重采样技术[36]或修改损失函数[37]来增加模型对少数类别的关注. 增量识别方法主要分为下面3个类别，以应对在学习新任务时发生的“灾难性遗忘”问题：结构型策略[38-39]通过设计新型的网络架构或集成附加网络模块，旨在有效减缓遗忘现象；正则化策略[40-41]在训练过程中引入特定的“防遗忘”约束条件，以降低遗忘的可能性，这些约束根据施加的位置不同，可进一步细分为权重正则化和激活正则化；回顾型策略[42-43]通过保存并定期复习旧任务的关键信息来抑制遗忘，这一信息可通过保留代表性旧类样本或利用能够表征旧数据分布的生成模型来实现. 开放世界识别方法分类总览如图2所示.
开放世界物体检测同样是一个综合任务，包含开集物体检测、零样本物体检测、小样本物体检测、长尾物体检测和增量物体检测等多个单一开放维度的子任务. 开集物体检测方法[44]可以分为非生成式和生成式2种类型. 早期研究采用的非生成式方法[45]通过把已知类别暂时视为未知类别，来训练未知类别的分类器，或者通过比较已知类别的预测概率值与一个预定的阈值来判断一个实例是否属于已知类别. 而最新的研究使用的生成式方法[46]则通过创造未知类别的样本来进行不确定性的评估. 零样本物体检测方法同样也分为非生成式和生成式2种类型，非生成式[47]主要通过将视觉特征投影至语义空间做判别得到，但是在这种范式下未知类不参与训练，会导致最终模型的预测偏向已知类，最新的研究通常采用生成式的方法[48]，通过未知类的类别语义合成对应的视觉特征参与训练，取得了良好的效果. 小样本物体检测方法主要分为元学习[49]和微调[50]两种类型，元学习的方式训练成本小，微调的方式实现简单. 长尾物体检测中同样采用重采样[51]或者调整损失函数[52]的方式，使模型更关注尾部类别. 增量物体检测主要解决的是灾难性遗忘问题，希望模型学习新类的同时防止旧类遗忘，目前的工作一般采用特征蒸馏[53]或者样例回放[11]的方式防止遗忘. 开放世界检测方法分类总览如图3所示.
总的来说，所谓的开放，超越传统封闭集的概念，是对真实世界动态变化性的一种模拟. 根据模拟的角度不同，目前主要有5种常见的任务设定：开集学习、零样本学习、小样本学习、长尾学习、增量学习，本文称之为开放性维度. 开集学习关注识别训练中未见过的类别，反映了现实世界中不断出现新物体的情况. 零样本学习强调在没有直接样本支持的情况下识别新类别，适应现实世界中未知物体的出现. 小样本学习涉及从极少量样本中快速学习新类别的能力，对于常见的现实情景中仅有少量数据的新物体类别至关重要. 长尾学习应对现实世界中常见类别和罕见类别的不平衡分布，能够处理稀有物体的识别. 增量学习强调模型在学习新知识时保持对旧知识的记忆，适应环境的持续变化. 目前各个维度的开放性任务大多都是孤立研究的，近年来有一种趋势，方法研究从单一维度转向复合维度，但是目前复合维度最多只考虑了2个，对于更为复杂的综合了更多开放性维度的任务设定则缺乏考虑. 在本文中，提出囊括上述5个主要开放性维度的广义开放世界物体识别与检测任务，超越了以往工作中的开放性任务设定，缩小了与真实世界的差距.
现有的开放世界学习定义，虽然着重强调了模型具备开集学习和增量学习的能力，但这种定义实际上仍然较为狭窄，没有完全捕捉到开放世界环境的复杂性和多样性. 在更为全面和深入的考虑中，开放世界物体识别与检测的概念应当包含更广泛的学习场景和挑战. 例如，零样本学习和小样本学习在开放世界任务中扮演着关键角色. 在这些场景中，模型需要能够识别在训练过程中未见过或仅见过少量样本的物体类别. 此外，长尾学习也是开放世界任务的一个重要方面，因为现实世界中的物体类别分布通常是长尾形态，意味着大量的稀有物体类别和少数的常见类别共存. 上述各个任务是孤立研究的，但它们都强调了真实世界开放性的一部分，因此本文定义一个更加全面的任务广义开放世界学习来囊括以上所有任务.
此外，从是否使用预训练模型这个角度可以将开放世界的相关研究工作分成2类：一类是传统的开放世界的设定[10-11]，从头开始训练，不使用预训练模型；另一类是使用了预训练模型如CLIP[54]和SAM[55]的工作，它们在训练过程中使用了未知类别的数据，不符合严格的开放世界的设定，但是取得了很好的效果. 这2种设定都有各自的研究价值，第一种符合传统的开放世界的设定，是一种更加纯粹的研究范式，第二种实际应用效果出色，本文主要集中于第一种.
数据集方面，对于开放世界物体识别领域，不同开放性维度任务所采用的数据集不同. 开集识别通常采用MNIST，CIFAR10等数据集，MNIST包含10个手写数字类别，每类约
7000 张图片，CIFAR10包含10类，每类6000 张图片. 零样本识别通常采用AWA[56]，CUB[57]等数据集，AWA包含了50个动物类别共30000 张图片，每个类别都附带了描述其属性的信息，CUB数据集专注于鸟类的细粒度识别，包含200个鸟类类别共11000 张图片. 小样本识别通常采用miniImageNet[58]和TieredImageNet[59]等数据集，miniImageNet是从大规模图像分类数据集ImageNet中抽取的一个子集，包含100个类别，每个类别有600张图片，与miniImageNet相比，TieredImageNet在类别上的分布更为广泛和平衡. 长尾识别通常采用iNaturalist[60]等数据集，iNaturalist数据集是一个真实世界的生物物种识别数据集，具有明显的长尾分布特征. 增量识别通常采用CIFAR100和ImageNet等数据集，两者分别包含100类和1000 类的自然图片. 常用的物体检测数据集包含PASCAL VOC[61]，MSCOCO，Objects365等. PASCAL VOC 最早由牛津大学于2005 年发布，至2012 年每年都会发布一个新的版本. 目前常用的有2个版本：VOC07 和VOC12，前者包含约5000 张的训练图片和约5000 张的测试图片，后者包含约11000 张的训练图片和约11000 张的测试图片，总共包含20 类物体. MSCOCO 数据集是目前检测任务最常用的数据集，总共包含80 类物体，超过120000 张图片. 开放世界物体检测及其各单一开放性维度子任务主要是对这些常用检测数据集进行类别划分和数量限制使之符合不同任务的要求，从而得到各自的数据集. 比如零样本物体检测中对MSCOCO进行类别划分，选择其中65类作为已知类，剩下15类作为未知类；小样本物体检测同样也基于MSCOCO进行类别划分，选择和MSCOCO中与PASCAL VOC重合的20类作为小样本类，剩下的作为基类. AP（average precision）是物体检测领域常用的评价指标之一，用于衡量模型在检测任务上的性能. AP是在不同置信度阈值下计算得到的检测精度（precision）和召回率（recall）曲线下面积的平均值，它旨在评估模型在检测精度和召回率之间的平衡能力. 目前，一般采用COCO AP，即计算交并比（IoU）从0.5到0.95（以0.05为步长）所有阈值下AP的平均值，能够提供关于模型性能的全面评估. 另外，AP50指标也较为常用，AP50指的是在IoU阈值为0.5时的平均精度. 也就是说，当预测的边界框与真实边界框的IoU大于等于0.5时，这个预测被认为是正确的. 对于开放世界相关的任务，一般会评测已知类和未知类的AP. 开放世界相关方法在数据集上（如MSCOCO）的表现不如全监督检测方法的表现，且由于采用不同数据和划分，所以无法统一比较不同单一开放性维度方法的性能，一般来说长尾和增量方法的性能会更高一些，而零样本和开集方法的性能更低.现有的广义开放世界子任务数据集对常用的物体识别与检测数据集（如COCO）进行简单的类别划分，这种方法无法全面评估模型在开放世界条件下的性能. 这种单一的数据集构造方式不仅限制了对方法缺陷的诊断，也可能导致模型对特定训练场景产生偏见，使其在遇到新场景时性能下降. 由于数据集的收集、处理和标注成本较高（尤其是检测数据集），通过网络爬取和人工标注的方式构建具有不同分布和划分的数据集变得不现实. 不同于之前的做法，本文提出一种新方法充分利用仿真平台（如AI2-THOR[62]）低成本获取大量标注好的数据，此外本文解耦了广义开放世界的5个核心难度指标，并通过调整指标数值采样由AI2-THOR产生的元数据生成任务特定的数据.
3. 开放世界物体识别：挑战、实践与展望
在过去的十几年中，传统物体识别技术取得了显著的进展. 然而，这些技术通常局限于封闭的数据集，即所有类别在训练阶段均被视为已知且充足. 这种假设与现实世界的情况相去甚远. 现实世界是一个开放的环境，其中类别数量不断变化，新的未知类别不断出现. 开放世界的挑战包含类别变化、噪声学习、领域差异、算法效率等. 在这4个挑战中：1）类别变化是指在开放世界环境中系统可能遇到新的或未知的类别，这些类别在训练过程中未被考虑. 对于这种情况，模型需要有能力识别并适当处理这些新类别. 这个挑战涉及到如何让系统能够有效地适应或扩展到新类别，而不需要从头开始训练. 2）噪声学习[63-64]是指在实际应用中，训练数据可能包含噪声，例如错误的标签、低质量的输入数据或者不相关的信息. 噪声学习需要设计算法去识别、处理或抵抗这些噪声，以便不会对模型的学习过程和最终性能产生负面影响. 3）领域差异[65-66]是指训练环境（源域）与实际部署环境（目标域）之间的差异. 这些差异可能是由于数据分布的变化、不同的数据采集过程或环境条件造成的. 处理领域差异在于如何使模型能够适应新领域，或者如何将源域学到的知识迁移到与之不同的目标域. 4）算法效率[67-68]涉及到如何设计能够快速、准确、资源高效地处理任务的算法. 在开放世界环境中，算法可能需要在有限的计算资源下处理大量的数据并做出及时的决策. 其中类别变化的挑战最为关键，因为开放世界的核心特征之一就是环境的动态性，尤其是类别的不断变化和扩展. 这直接触及到开放世界物体识别与检测系统设计的根本目的——在不断变化的环境中保持有效性和适应性. 相比其他挑战，如算法效率、计算资源限制等，类别变化更深刻地体现了开放世界环境的本质特征. 因此，如图4所示，为了更贴近真实世界的复杂性和开放性，开集学习[69]、零样本学习[70-71]、小样本学习[72-73]、长尾学习[74]以及增量学习[75]多个开放性维度的研究应运而生. 这些维度分别关注不同的挑战：开集学习针对未知类别的识别；零样本学习和小样本学习聚焦于在极少量或无样本的情况下学习新类别；长尾学习应对类别分布的不平衡；增量学习旨在模型学习新知识的同时保持对旧知识的记忆以适应环境的持续变化. 虽然这些维度各自取得了一定的进展，但它们多数局限于单一维度的探索（比如只考虑开集学习设定）或者只考虑2种复合维度（比如开放世界，包含增量学习和开集学习2个开放性维度），缺少一种综合考虑更多开放性维度的全面视角. 针对该问题，本文从更宏观的角度提出包含5个开放性维度的更加综合的设定.
![]()
图 4 从不同角度模拟真实世界的开放性Figure 4. Simulating the openness of the real scenes from different perspectives首先思考为什么这些开放性维度相互割裂缺乏统一视角？究其原因，本质上是对于开放世界的评测基准存在的不足导致的研究方法相对独立，即现有评测基准大多只关注单一开放性维度的评测，大多数方法追求在各自开放性维度对应评测基准上的极值性能，尚未广泛考虑从一个更统一的视角综合评估多个开放性维度的问题. 此外，相关的数据集通常是基于对常用物体识别数据集的单一划分，只提供一种难度级别的测试，这可能无法有效区分不同方法的性能. 这就像设计试卷来考察考生一样，如果试卷难度单一，无论是太难还是太简单，都无法有效区分考生的实际水平，也无法指导考生分析自身的不足.
随着信息技术的快速发展和人工智能、大数据等新兴技术的不断进步，本文面临着将这些技术应用于开放世界物体识别与检测领域的挑战与机遇. 如图5所示，为解决当前开放世界物体识别任务评测基准中存在的问题，本文引入了一种新的广义开放世界评估范式. 该范式首先将挑战细分为5个关键的开放性维度，每个维度都代表了开放世界场景中的一个核心要素. 在此基础上，本文提出了一个综合框架，旨在全面涵盖所有开放性维度.
通过精心设计的核心难度指标，本文可以为每个任务生成具有不同难度的数据. 这些指标不仅可以用于准确评价各个任务数据集的难度，而且还可以用于根据需求生成自定义难度的数据集. 本文通过解耦开放世界设定下各子任务的相关维度指标，使得数据集的生成既可控制又灵活，满足不同研究和实践的需求. 这种方法的引入，不仅是对现有评测方法的一大改进，而且为开放世界物体识别与检测领域的研究带来了新的视角和可能性. 这一全新的评估范式，对于深入理解和有效应对开放世界物体识别与检测中的复杂性和多样性具有重要的意义.
具体每个指标的定义如下：
1） 开集度.是开集学习任务的核心难度指标，表示模型在测试环境中潜在的未知程度. 本文将其定义为未知类别数量占所有类别（包含已知类别和未知类别）数量的比例：
Mosd=|Cuk||Cuk|+|Ck|, (1) 其中，|Ck|是已知类别数量，|Cuk|是未知类别的数量.
2） 迁移性. 表示知识（如属性、模式、特征等）在零样本学习中可以从已见类迁移到未见类的程度，是核心难度指标. 本文定义迁移性为
Mtran=1|Cu|∑a∈CuMaxb∈CsSim(sema,semb), (2) 其中，Cs和Cu分别表示已见类和未见类类别，sem表示一个类别的语义向量（例如词向量或者属性向量），Sim(⋅,⋅)表示相似度计算的方式，这里本文具体使用余弦相似度来计算.
3）视觉样本稀罕度. 是小样本学习任务的核心难度指标. 本文将训练数据中类别实例数量Nf低于Nfmax的类别作为小样本类（现有工作中一般认为实例数量超过30的不是小样本类，即Nfmax=30）. 视觉样本稀罕度定义为
Msvs=Nfmax−NfNfmax, (3) 该指标数值越大，意味着小样本的平均样本数量越低，相应地，任务难度也越大. 这里，一般情况下可以直接使用现有工作的设定[72-73]，即设定Nfmax=30. 如果实际应用场景数据比较独特，可以参考K-means聚类中K值选择的手肘法确定Nfmax的值. 以新类的性能作为Nfmax选择的一个度量，当新类平均样本数量低于Nfmax，增加新类样本数量，新类性能将大幅度提升，当新类平均样本数量高于Nfmax，增加新类样本数量，新类性能提升幅度变缓. 新类性能和新类平均样本数量的关系呈现出一个倒L形的曲线形状，而L形曲线的拐点所对应的新类平均样本数量即为Nfmax.
4） 不均衡性. 是长尾学习任务的核心难度指标. 具体而言，评价一个数据集类别实例数量的分布长尾效应是否足够明显，本文可以用熵来衡量. 通过统计每个类别实例数量的占比，得到每个类别实例的频率fi，由此可以计算出熵Hf
Hf=−n∑i=1filog(fi). (4) 为了统一表示，本文通过一个映射函数将Hf映射为值域为[0, 1]的值以表示不均衡性的大小，计算方式为
Mimb=2e−Hf1+e−Hf, (5) 该数值越大，表示长尾效应越明显，即大部分的数据类别都集中在头部类别上.
5） 旧类丢弃比例. 增量学习有2种简单且极端的解决方式：如果把旧数据全部丢掉，每次只用新数据学习，那么虽然学习十分高效，但容易出现旧知识的灾难性遗忘问题；如果把旧数据全部保留，每次用新旧数据联合学习，那么虽然遗忘问题得到了解决，但是这种做法的时空代价高. 因此，本文将增量过程中旧数据的丢弃比例作为衡量增量任务难度的核心指标，指标数值越大意味着任务难度也就越大，其定义为
Mocdr=1−e−ntask2+2e−ntask1noldnold∑i=1NidiscardNitotal, (6) 其中，nold表示旧类类别数量，Nidiscard表示增量学习阶段旧类丢弃的样本数量，Nitotal表示旧类的样本总数, ntask表示任务数量.
广义开放世界评估方法既可用于评估现有数据集的难度，又可以用于指导生成自定义难度的数据. 当广义开放世界评估方法用于评估一个给定数据集的难度时，我们获得数据集的类别划分以及实例数量等信息后，可以直接代入式（1）~（6）计算得到5个维度的难度指标. 比如某个给定的开集识别数据集的类别划分为已知类60个、未知类20个，我们可以直接计算得到其开集度为0.25. 当广义开放世界评估方法用于生成给定难度数据集时，以生成开集识别数据集为例，我们需要先确定好类别总数（包含已知类和未知类），然后根据对应维度的式（1）计算即可得到如已知类和未知类的具体划分比例等信息.
为了改善当前开放性维度数据单一的问题，本文通过组合并改变5个开放维度指标的数值，实现任务特定难度可控的数据生成. 既可只控制单一维度生成某个单一任务的数据，又可以同时控制多个维度生成复合任务的数据. 本文可以通过从元数据集中采样的方式实现，这里的元数据集可以是任意现有的物体识别数据集（如ImageNet数据集）或者它们的组合.
采样阶段中本文使用5个开放维度指标约束采样算法，使其最终采样的数据符合指标定义的数值. 采样阶段中，不同任务生成的过程实际上略有差异. 开集学习、小样本学习和增量学习生成的数据只涉及类别划分，如生成开集学习数据只要根据开集程度数值挑选未知类别的数量达到要求即可. 对于零样本学习数据集的生成，实际上无法准确得到任意迁移数值的类别划分，因为给定一个类别集合和零样本类别的数量后，能够得到的迁移性取值是离散的. 因此只能挑选一个近似给定迁移性数值的类别划分，需要先确定未见类别的数量，然后枚举所有已见-未见类别的划分，从而得到不同的迁移难度，最后挑选与给定数值最接近的划分即可. 对于长尾数据的生成，采用指数分布近似模拟长尾分布.
在探讨开放世界物体识别与检测系统时，评价指标的定义至关重要. 目前本文采用的5个指标：开集度、迁移性、视觉样本稀罕度、不均衡性和旧类丢弃比例.这些指标的公式化定义虽然为量化任务难度提供了有效途径，但它们仅仅代表了诸多可能性中的一种实现方式. 这些指标以一种量化的方式捕捉了每个维度的核心难点，但它们的设计和实现还有很大的探索空间.
未来的研究可以在这些初步框架的基础上继续发展和完善，设计出更为全面和深入的评价指标. 未来的评价指标需要能够更精准地反映开放世界物体识别与检测系统面临的多维度挑战. 例如，它们可能需要综合考虑各种因素，如数据的多样性、类别的动态性、环境的复杂性和模型的泛化能力. 此外，这些评价指标应当能够适应不同的应用场景和需求，从而推动开放世界物体识别与检测系统的部署和应用.
综上所述，尽管当前的评价指标已经提供了对开放世界物体识别与检测系统评估的初步方法，但随着技术的进步和应用需求的发展，本文预见到在评价指标设计方面将会有更广阔的探索空间和发展潜力. 未来的研究不仅将继续完善现有的指标，还将探索新的指标，以更全面地评价和指导开放世界物体识别与检测系统的研究和实践. 在探索开放世界的物体识别的挑战时，我们了解到类别变化是核心难点之一. 为了适应这种不断变化的分类环境，我们必须开发出能够持续进化和适应新类别的系统. 然而，类别的变化仅仅是开放世界挑战的冰山一角. 第4节将继续本节的讨论，并将关注点扩展到如何在实际应用中精确地定位和识别这些不断变化的类别. 我们将详细探讨开放世界环境中物体检测所面临的独特问题，尤其是在复杂场景中对物体进行精确定位的挑战.
4. 开放世界物体检测：挑战、实践与展望
继第3节对开放世界物体识别的挑战进行了初步分析之后，本节将进一步探讨开放世界物体检测所面临的挑战. 物体检测不仅要识别物体的类别，而且要在视觉场景中准确地定位物体的位置. 这项任务在开放世界的背景下变得更加复杂.
在开放世界物体检测的研究中，面对的不仅是物体的识别，还包括在复杂的、不断变化的环境中对物体进行精确定位. 与物体识别任务相比，开放世界物体检测要处理的挑战更为多样和复杂. 在开放环境中，物体可能会因为遮挡而部分或完全不可见，尺度变化使得相同物体在不同距离下的表现差异巨大，姿态的多样性要求检测系统能识别同一物体的各种展现形式，而共生关系和背景干扰则进一步增加了识别的难度. 例如，一个物体可能与环境中的其他物体紧密相连，或者在复杂的背景前几乎隐匿，这些因素都极大地提高了检测的难度.
现有的开放性物体检测方法通常依赖于对已有数据集的划分来实现，比如零样本物体检测中通常将ImageNet或COCO数据集中的类别划分为已见类和未见类. 然而，这些数据集通常只能提供有限的场景变化，且其数据分布往往固定并偏向于特定的几个类别，这使得模型难以适应现实世界中类别数量不一、不断变化和新类别不断出现的开放性环境. 从现有数据源（例如COCO）生成结合多维度和不同难度级别的高质量数据集. 这种方法可能受限于现有的类别分布和实例数量，通常缺乏稀有对象和场景，且可能存在未标注对象的问题，这将阻碍物体检测器发现新类别，如图6所示. 此外，搜集大量新数据并对其进行标注的成本极高.
为了克服这些限制，开放世界物体检测的研究需要采用更为灵活和综合的方法. 这可能包括开发能够适应新类别出现的增量学习算法，设计能够处理大量类别和实例不均匀分布的长尾学习方法，以及探索能够从少量或零样本中学习新类别的模型. 此外，还需要创建新的数据集，这些数据集能够更真实地反映开放世界中的多样性和复杂性，包括各种遮挡情况、尺度变化、不同姿态、复杂的共生关系以及丰富多变的背景.
开放世界物体检测领域的发展，不仅要求技术上的创新，而且需要对现有研究方法和数据资源重新思考. 本文跳出传统数据集的框架，采用更加综合的方法来面对开放世界环境下的挑战，从而推动这一领域向前发展.
本文探索利用仿真环境来构建开放世界物体检测数据集的独特优势. 仿真环境提供了一个可控且灵活的平台，使研究人员能够创造出接近现实世界的多变场景，这在传统数据集中是难以实现的，如图7所示，通过操控仿真环境可以控制光照、纹理、位姿等变化. 以下是使用仿真环境构建数据集的6个关键优势：
![]()
图 7 在仿真环境中控制光照、纹理和位姿变化Figure 7. Controlling lighting, texture, and pose variations in simulation environments1）多样性. 仿真环境可以渲染出多种背景、光照条件和天气状况下的场景，增强数据集的多样性，从而提高模型的泛化能力.
2）可定制性. 研究人员可以根据需要定制场景的具体参数，如物体的大小、颜色、纹理等，以适应特定的测试或训练需求.
3）复杂场景的生成. 仿真技术能够生成包含复杂交互和物体关系的场景.
4）标注成本的减少. 在仿真环境中生成的数据通常可以自动获取精确的标注信息，如边界框、分割掩码和物体类别，从而减少了人工标注的成本和时间，如图8所示.
5）未知类别的引入. 仿真环境允许研究人员设计并引入未在现实世界中出现过的虚构类别，为开放集和零样本学习提供了理想的测试平台.
6）遮挡和姿态变化的模拟. 仿真环境可以特意设计场景以模拟不同程度的遮挡和各种姿态的变化，为物体检测算法提供更为严峻的测试条件.
利用这些优势，仿真环境可以成为开放世界物体检测研究的强大工具. 它不仅能够支持传统物体检测任务，而且能够帮助研究人员探索新的方法和定义新的开放性任务，收集和构建自定义的开放世界物体检测数据集用以促进方法研究，从而解决开放世界环境中未知的和不断演变的挑战. 通过这种方式，仿真环境极大地拓展了数据集的边界，推动了开放世界物体识别与检测系统的进步. 未来的研究可以在仿真环境中不断探索新的算法和模型，从而不断推进开放世界物体检测技术的发展.
本文基于AI2-THOR环境实现了一个自动化的数据集收集平台，AI2-THOR是一个基于Unity实现的开源仿真环境，提供由专业3D艺术家手工设计的场景，并且能够渲染得到图像的深度、语义分割、实例分割等标注信息，可以用于具身智能、机器人以及计算机视觉领域的研究. 但是AI2-THOR的物体实例有限，只有3 578个独立物体模型，而且场景中Agent的视角和高度固定，想要收集大规模的数据存在一定困难，无法满足本文的需求.
因此，本文根据需求补充了一些新的功能：将现有的三维物体模型库（如ShapeNet[76]）的模型导入AI2-THOR中，来扩充AI2-THOR的物体模型资源（共扩充了73类物体，包含
77689 个实例），使其能够正确识别与初始化新加入的模型；为了缩小合成数据与真实数据之间的领域差异，通过随机化场景中物体的位置、姿势、方向、材料以及相机的位置与角度来实现域随机化，使收集的合成数据更加多样化；根据从通用检测数据集（如COCO）中统计的物体共生频率，设计将物体模型加入到场景的数量与类别，进一步缩小合成数据与真实数据分布差异. 在完善了上述功能后，本文实现了基于AI2-THOR的自动化的数据集收集平台，在进行数据收集时，将会遍历AI2-THOR的所有场景，并对场景进行物体扩充与随机化，然后通过随机位置与角度的相机进行渲染，得到数据及其实例分割标注，之后根据需求对数据集进行处理，最终得到所需要的数据集.为了方便实验，减少不必要的渲染时间，本文首先获取了一个元数据集，通过调整不同的开放世界指标对该元数据集进行采样控制，从而得到后续实验中不同的任务所需的特定数据集. 本文构建了一个包含
58470 张图像的元数据集，其中每张图像都有对应的像素级实例分割标注和目标检测标注，涵盖了96个类别，并通过对物体位姿、材质、相机位置的随机化以及光照条件的改变实现域随机化、缩小合成数据与真实数据的差异. 数据集一共有504574 个目标检测实例标注，平均每张图像拥有8.63个目标检测标注.接下来将介绍利用仿真环境生成的数据去评测开放性检测相关的方法. 本文选择了2种当前工作涉及较多的典型单一开放维度任务：零样本检测和长尾物体检测. 训练集和测试集的比例为4∶1.
在表1中，比较了3种零样本物体检测方法DPIF[77]、RRFS[78] 和 ZSDSCR[79]在不同程度的迁移性Mtran（0.30, 0.46, 0.57）下的表现. 这些方法的主要性能指标包括已见类的平均精度（AP50s）、未见类的平均精度（AP50u）. 对于现有方法，较小的迁移性提供了较大的区分能力，未见类的AP最多相差2个百分点. 在研究中，零样本检测的主要目标是在未见类别上获得较好的性能，因为这直接反映了模型对于新颖类别的识别能力. 尽管对已见类别的表现在某种程度上也是重要的，但它并不是我们评估模型性能的主要标准. 在表1中，虽然DPIF模型在中等程度迁移性时的整体表现最优，但我们发现在未见类别上的表现并不总是与此相符. 这表明即使在已见类别上取得了相对较好的结果，模型在未见类别上的表现仍然是不确定的，这与我们的研究重点相契合. 我们的结论侧重于分析模型在未见类别上的表现，而不是仅仅基于总体性能.
表 1 变化迁移性指标的零样本物体检测实验结果Table 1. Experimental Results of Zero-shot Object Detection with Varying Transferability Metrics方法 Mtran AP50s AP50u DPIF 0.30 51.5 2.7 0.46 57.2 3.4 0.57 52.6 4.5 RRFS 0.30 53.5 1.6 0.46 44.8 1.9 0.57 49.9 3.9 ZSDSCR 0.30 53.6 0.7 0.46 44.8 1.2 0.57 50.0 3.5 在表2中，比较了2种长尾物体检测方法EQLV2[80]和 Seesaw[81]在不同程度的不均衡性Mimb（0.1, 0.5, 0.9）下的表现. 对于长尾检测，极端平衡（Mimb=0.1）的分布或极端不平衡（Mimb=0.9）的分布均不利于有效区分现有方法，意味着过高或过低的难度级别缺乏明显的区分性. Mimb=0.5的设置更适合区分当前的方法. 当然，更精确的数值需要进一步的实验来验证.
表 2 变化不均衡性指标的长尾物体检测实验结果Table 2. Experimental Results of Long-tailed Object Detection with Varying Imbalance Metrics方法 Mimb AP AP50 EQLV2 0.1 50.3 64.0 0.5 30.8 39.5 0.9 17.2 21.7 Seesaw 0.1 51.2 64.9 0.5 32.9 42.0 0.9 17.6 22.1 表1和表2的实验结果表明，迁移性、不均衡性等开放性指标的变化可能在某些情况下对模型的性能造成一定影响. 根据所分析的特定数据集和任务（仿真数据上的长尾、零样本物体检测任务），我们观察到当数据分布呈现更为明显的长尾特性时，或者已见类和未见类的迁移性更小时，模型的性能往往有所下降. 然而，我们也认识到不均衡性、迁移性等开放性指标对性能的具体影响可能因任务、数据集的不同而存在变化. 因此，上述结论需要在更广泛的实验中进一步验证，并考虑到在不同任务和数据条件下可能出现的多变性.
此外，本文进一步在真实的物体检测数据集上做了零样本物体检测实验，原始数据集为PASCAL VOC数据，实验中将20个类别划分成16个已见类和4个未见类，训练集只包含已见类数据，剔除了包含未见类的图片，实验结果如表3所示，实验结论与在仿真数据上的一致，即：迁移性可能在某些情况下对未见类的性能产生有利的影响. 根据所分析的特定数据集和真实数据上的零样本物体检测任务，观察到当数据分布呈现更为明显的迁移性时，未见类的性能会有所提升.
表 3 变化迁移性指标的零样本物体检测实验结果Table 3. Experimental Results of Zero-shot Object Detection with Varying Transferability Metrics方法 Mtran AP50s AP50u DPIF 0.25 44.4 0.8 0.45 37.6 21.8 0.67 32.3 38.3 RRFS 0.25 70.3 0.3 0.45 62.6 7.7 0.67 59.4 19.4 ZSDSCR 0.25 70.3 0.3 0.45 62.6 6.6 0.67 59.4 16.9 本文对该项研究的未来发展和改进进行了深入的思考. 仿真环境作为一种强大的工具，在开放世界物体检测的研究和应用中发挥着重要作用. 然而，当前的仿真环境仍存在一些局限性，需要进一步的改进和发展. 目前大多数仿真环境主要集中在室内场景的模拟. 未来，考虑到开放世界环境的多样性，本文需要扩展仿真环境，包括更加丰富和复杂的室外场景. 比如自然环境（如森林、沙漠）、城市景观（如街道、广场）和特殊环境（如工业区、灾难现场）. 这样的扩展将为物体检测算法提供更加全面和现实的测试环境. 当前的仿真环境主要依赖于传统的3D渲染技术，这在一定程度上限制了环境和物体的多样性和真实感. 未来，可以考虑将仿真方法与最新的生成技术相结合，例如扩散模型. 这种方法可以利用深度学习模型生成更加逼真、多样化的图像和场景，提高仿真环境的质量和效果. 综上所述，虽然当前的仿真环境已经为开放世界物体检测提供了宝贵的支持，但未来的发展方向将是更加广阔和多元化. 通过不断地技术创新和改进，仿真环境将成为开放世界物体检测研究的一个更加强大和有效的工具.
5. 总结和展望
本文深入探讨了开放世界物体识别与检测问题，并指出了对于一个综合性评测框架的迫切需求. 这样的框架能够有效地应对这一动态变化领域所提出的多样化挑战. 目前，尽管开集学习、零样本学习、小样本学习、长尾学习和增量学习各自在其领域取得了良好进展，但其各自的评估环境仍相对割裂且不够全面. 这种局限性，很大程度上是由于常规数据集的划分所限. 本文所提出的方法通过解耦并构建跨5个开放维度的核心难度指标，创新性地定义了广义开放世界的多样化任务，为深入思考这一错综复杂和广阔的研究领域提供了新的视角.
利用AI2-THOR仿真平台，本文成功生成了一个多样化的开放世界物体检测数据集，降低了与传统数据收集方法所需的高昂成本和资源需求. 本文通过模拟各种环境条件和物体变化，丰富了数据集，使其更加贴近真实世界的不可预测性和多样性. 这为开放世界物体识别与检测模型的评估提供了一个更准确、更为全面的基准数据集.
本文通过实验验证了所构建的仿真数据集和所提出的度量标准的有效性和实用性. 后续工作将集中于提升仿真环境的真实感和多样性，以及开发更精细和更全面的评价指标.
开放世界物体识别与检测系统目前在类别的开放性（开集、零样本、小样本、长尾、增量）方面已经逐渐走向统一，由只关注单一维度逐步走向关注复合维度，本文进一步考虑涵盖5个开放性维度的设定. 开放世界系统的未来研究将围绕提升系统的解释性、多模态学习能力、安全性和效率等方面展开：1）随着开放世界系统在关键领域的应用增多，如自动驾驶、医疗诊断等，其决策过程的透明度和可解释性变得越来越重要. 未来的研究需要着力于提升模型的解释能力，使非专业用户也能理解模型的决策逻辑，从而提高人们对这些系统的信任度. 2）开放世界系统将面临来自不同源的、形式多样的数据. 因此，未来的研究方向之一是如何有效地整合视觉、语音、文本等多种类型的数据，实现跨领域的学习和知识迁移. 这不仅可以提高模型的泛化能力，还可以拓宽其应用范围. 3）随着开放世界系统在社会生活中的应用日益广泛，如何保护用户数据的安全和隐私成为一个重要问题. 未来的研究需要探索新的算法和技术，以确保在数据收集、处理和存储过程中用户的隐私得到有效保护，同时也要保证系统本身免受恶意攻击. 4）对于在资源受限的设备上运行的开放世界系统，如智能手机和边缘计算设备，未来的研究将重点关注开发低能耗、高效能的算法. 这不仅包括提升算法的计算效率，还包括优化模型的大小，使其能在不牺牲性能的前提下，在资源有限的设备上顺畅运行. 通过解决这些关键问题，我们可以推动开放世界系统在更广泛的应用场景中发挥更大的作用.
作者贡献声明：聂晖提出算法实现方案，开展实验并完成论文撰写；王瑞平提出论文整体研究思路，指导算法与实验方案设计，并修改论文；陈熙霖提出指导意见并修改论文.
-
表 1 基于OSN数据的用户位置预测的文献总结
Table 1 Literatures Summary of User Location Prediction Based on OSN Data
文献 预测粒度 输入数据类型 任务类型 数据集 数学模型 评价指标 [2] 坐标 文本数据 Text位置 Twitter 地名词典 Top@k [10] POI 签到数据 Future位置 Foursquare, Gowalla GNN Top@k [18] 街区 文本数据 Text位置 Twitter 标签传播 精确率、召回率、F1 [24] 坐标 文本数据 Text位置 Twitter POI 签到数据 [27] 场所类型 签到数据、图像数据 Future位置 Foursquare, Brightkite 矩阵分解 精确率、召回率 [28] 网格 文本数据 Text位置 Twitter 核密度估计 Acc、Top@k、中值误差 [32] POI 签到数据、评级数据 Future位置 Foursquare 矩阵分解 Top@k [37] 坐标 文本数据 Text位置 Twitter 贝叶斯、LSTM Acc@d [39] 城市 文本数据 Text位置 Weibo 聚类 消息文本、上下文 [52] 城市 文本数据 Home位置 Tweets 地名词典 精确度 [53] 城市 文本数据 Text位置 Twitter 注意力、Bi-LSTM Acc@d、中值误差、平均误差 [72] 坐标 文本数据 Mentioned位置 Twitter 地名词典 精确率、召回率 [80] 城市 签到数据 Home位置 Foursquare 最大似然估计 Top@k [88] 城市 文本数据 Home位置 Twitter 概率方法 精确率、召回率、F1 [98] POI 签到数据 Future位置 Foursquare, Douban 核密度估计 Top@k [103] POI 签到数据 Text位置 Foursquare, Gowalla 变分注意力、CNN Top@k [109] 坐标 文本数据 Text位置 Twitter 贝叶斯 平均误差、中值误差 [122] POI 签到数据 Future位置 Yelp 矩阵分解 MSE [128] POI 签到数据 Future位置 Gowalla,Yelp 协同过滤 精确率、召回率 [132] 网格 文本数据 Home位置 Twitter MLP Acc@d、中值误差、平均误差 [133] 坐标 文本数据 Home位置 Twitter GMM Acc@d、中值误差、平均误差 [134] 城市 文本数据 Home位置 Twitter 注意力、RNN Acc、中值误差 [136] 坐标 文本数据 Text位置 Twitter 卷积混合密度网络 中值误差、平均误差 [138] 坐标 文本数据 Text位置 Twitter LSTM, NER 精确率、召回率、F1 [140] 坐标 文本数据 Text位置 Twitter CNN 中值误差、平均误差 [142] 坐标 文本数据 Home位置 Tweets 深层神经网络 精确率、召回率 [143] POI 文本数据 Text位置 Twitter 注意力、Bi-LSTM 精确率、召回率、F1 [150] POI 签到数据 Future位置 Foursquare,Gowalla 注意力机制、RNN Top@k [151] 坐标 文本数据 Text位置 Twitter 多头注意力 Acc、平均误差、中值误差 [157] 城市 文本数据 Home位置 Twitter 注意力机制、GNN Acc@d、中值误差、平均误差 [170] POI 文本数据 Text位置 Foursquare, Twitter 朴素贝叶斯 平均倒数秩 [171] 场所类型 签到数据 Future位置 Brightkite, Foursquare 朴素贝叶斯 Top@k [172] 坐标 文本数据 Home位置 Twitter 标签传播 Top@k、平均误差、中值误差 [173] 坐标 文本数据 Home位置 Twitter 标签传播 Acc@d、中值误差 [174] 城市 文本数据 Home位置 Twitter 机器学习 Acc、Top@k、平均误差 [175] 场所类型 签到数据 Future位置 Foursquare 矩阵分解 Top @k [176] 城市 文本数据 Home位置 Twitter 朴素贝叶斯 Acc、Top@k、平均误差、中值误差 [177] POI 签到数据 Future位置 Foursquare 矩阵分解 精确率、召回率 [178] POI 签到数据 Future位置 Gowalla 马尔可夫模型 精确率、召回率 [179] 区域 签到数据 Future位置 Gowalla, Brightkite 聚类 Top@k [180] 区域 签到数据 Future位置 Geolife LSTM 召回率 [181] POI 签到数据 Future位置 Instagram 矩阵分解 精确率、召回率 [182] POI 签到数据 Future位置 Foursquare 矩阵分解 精确率、召回率 [183] POI 签到数据 Future位置 Foursquare, Gowalla 统计 精确率、召回率 [184] POI 签到数据 Future位置 Foursquare 最大似然估计 Top@k、召回率 [185] 场所类型 签到数据 Future位置 Foursquare, Gowalla 矩阵分解 精确率、召回率 
下载: 导出CSV
表 1 基于OSN数据的用户位置预测的文献总结
Table 1 Literatures Summary of User Location Prediction Based on OSN Data
文献 预测粒度 输入数据类型 任务类型 数据集 数学模型 评价指标 [2] 坐标 文本数据 Text位置 Twitter 地名词典 Top@k [10] POI 签到数据 Future位置 Foursquare, Gowalla GNN Top@k [18] 街区 文本数据 Text位置 Twitter 标签传播 精确率、召回率、F1 [24] 坐标 文本数据 Text位置 Twitter POI 签到数据 [27] 场所类型 签到数据、图像数据 Future位置 Foursquare, Brightkite 矩阵分解 精确率、召回率 [28] 网格 文本数据 Text位置 Twitter 核密度估计 Acc、Top@k、中值误差 [32] POI 签到数据、评级数据 Future位置 Foursquare 矩阵分解 Top@k [37] 坐标 文本数据 Text位置 Twitter 贝叶斯、LSTM Acc@d [39] 城市 文本数据 Text位置 Weibo 聚类 消息文本、上下文 [52] 城市 文本数据 Home位置 Tweets 地名词典 精确度 [53] 城市 文本数据 Text位置 Twitter 注意力、Bi-LSTM Acc@d、中值误差、平均误差 [72] 坐标 文本数据 Mentioned位置 Twitter 地名词典 精确率、召回率 [80] 城市 签到数据 Home位置 Foursquare 最大似然估计 Top@k [88] 城市 文本数据 Home位置 Twitter 概率方法 精确率、召回率、F1 [98] POI 签到数据 Future位置 Foursquare, Douban 核密度估计 Top@k [103] POI 签到数据 Text位置 Foursquare, Gowalla 变分注意力、CNN Top@k [109] 坐标 文本数据 Text位置 Twitter 贝叶斯 平均误差、中值误差 [122] POI 签到数据 Future位置 Yelp 矩阵分解 MSE [128] POI 签到数据 Future位置 Gowalla,Yelp 协同过滤 精确率、召回率 [132] 网格 文本数据 Home位置 Twitter MLP Acc@d、中值误差、平均误差 [133] 坐标 文本数据 Home位置 Twitter GMM Acc@d、中值误差、平均误差 [134] 城市 文本数据 Home位置 Twitter 注意力、RNN Acc、中值误差 [136] 坐标 文本数据 Text位置 Twitter 卷积混合密度网络 中值误差、平均误差 [138] 坐标 文本数据 Text位置 Twitter LSTM, NER 精确率、召回率、F1 [140] 坐标 文本数据 Text位置 Twitter CNN 中值误差、平均误差 [142] 坐标 文本数据 Home位置 Tweets 深层神经网络 精确率、召回率 [143] POI 文本数据 Text位置 Twitter 注意力、Bi-LSTM 精确率、召回率、F1 [150] POI 签到数据 Future位置 Foursquare,Gowalla 注意力机制、RNN Top@k [151] 坐标 文本数据 Text位置 Twitter 多头注意力 Acc、平均误差、中值误差 [157] 城市 文本数据 Home位置 Twitter 注意力机制、GNN Acc@d、中值误差、平均误差 [170] POI 文本数据 Text位置 Foursquare, Twitter 朴素贝叶斯 平均倒数秩 [171] 场所类型 签到数据 Future位置 Brightkite, Foursquare 朴素贝叶斯 Top@k [172] 坐标 文本数据 Home位置 Twitter 标签传播 Top@k、平均误差、中值误差 [173] 坐标 文本数据 Home位置 Twitter 标签传播 Acc@d、中值误差 [174] 城市 文本数据 Home位置 Twitter 机器学习 Acc、Top@k、平均误差 [175] 场所类型 签到数据 Future位置 Foursquare 矩阵分解 Top @k [176] 城市 文本数据 Home位置 Twitter 朴素贝叶斯 Acc、Top@k、平均误差、中值误差 [177] POI 签到数据 Future位置 Foursquare 矩阵分解 精确率、召回率 [178] POI 签到数据 Future位置 Gowalla 马尔可夫模型 精确率、召回率 [179] 区域 签到数据 Future位置 Gowalla, Brightkite 聚类 Top@k [180] 区域 签到数据 Future位置 Geolife LSTM 召回率 [181] POI 签到数据 Future位置 Instagram 矩阵分解 精确率、召回率 [182] POI 签到数据 Future位置 Foursquare 矩阵分解 精确率、召回率 [183] POI 签到数据 Future位置 Foursquare, Gowalla 统计 精确率、召回率 [184] POI 签到数据 Future位置 Foursquare 最大似然估计 Top@k、召回率 [185] 场所类型 签到数据 Future位置 Foursquare, Gowalla 矩阵分解 精确率、召回率
下载: 导出CSV
-
[1] Hui Bo, Chen Haiquan, Yan Da, et al. EDGE: Entity-diffusion Gaussian ensemble for interpretable tweet geolocation prediction[C] //Proc of the 37th IEEE Int Conf on Data Engineering (ICDE). Piscataway, NJ: IEEE, 2021: 1092−1103
[2] Qazi U, Imran M, Ofli F. Geocov19: A dataset of hundreds of millions of multilingual Covid19 tweets with location information[J]. SIGSPATIAL Special, 2020, 12(1): 6−15 doi: 10.1145/3404820.3404823
[3] Wang Shuihua, Govindaraj V V, Górriz J M, et al. Covid-19 classification by FGCNet with deep feature fusion from graph convolutional network and convolutional neural network[J]. Information Fusion, 2021, 67: 208−229 doi: 10.1016/j.inffus.2020.10.004
[4] Rill S, Reinel D, Scheidt J, et al. Politwi: Early detection of emerging political topics on Twitter and the impact on concept-level sentiment analysis[J]. Knowledge-Based Systems, 2014, 69: 24−33 doi: 10.1016/j.knosys.2014.05.008
[5] Unankard S, Li Xue, Sharaf M A. Emerging event detection in social networks with location sensitivity[J]. World Wide Web, 2015, 18(5): 1393−1417 doi: 10.1007/s11280-014-0291-3
[6] Luceri L, Andreoletti D, Giordano S. Infringement of tweets geo-location privacy: An approach based on graph convolutional neural networks[J]. arXiv preprint, arXiv: 1903. 11206, 2019
[7] Eligüzel N, Çetinkaya C, Dereli T. Comparison of different machine learning techniques on location extraction by utilizing geo-tagged tweets: A case study[J]. Advanced Engineering Informatics, 2020, 46: 101151 doi: 10.1016/j.aei.2020.101151
[8] Suwaileh R, Imran M, Elsayed T, et al. Are we ready for this disaster? Towards location mention recognition from crisis tweets[C] //Proc of the 28th Int Conf on Computational Linguistics. Red Hook, NY: Curran Associates, 2020: 6252−6263
[9] Hu Yingjie, Wang Jimin. How do people describe locations during a natural disaster: An analysis of tweets from hurricane Harvey[C] //Proc of the 11th Int Conf on Geographic Information Science. Dagstuhl, Germany: Schloss Dagstuhl-Leibniz-Zentrum für Informatik, 2021: 6: 1−6: 16
[10] Xie Min, Yin Hongzhi, Wang Hao, et al. Learning graph-based POI embedding for location-based recommendation[C] //Proc of the 25th ACM Int Conf on Information and Knowledge Management. New York: ACM, 2016: 15−24
[11] Ajao O, Hong Jun, Liu Weirui. A survey of location inference techniques on Twitter[J]. Journal of Information Science, 2015, 41(6): 855−864 doi: 10.1177/0165551515602847
[12] Zheng Xin, Han Jialong, Sun Aixin. A survey of location prediction on Twitter[J]. IEEE Transactions on Knowledge and Data Engineering, 2018, 30(9): 1652−1671 doi: 10.1109/TKDE.2018.2807840
[13] Xu Shuai, Fu Xiaoming, Cao Jiuxin, et al. Survey on user location prediction based on geo-social networking data[J]. World Wide Web, 2020, 23(3): 1621−1664 doi: 10.1007/s11280-019-00777-8
[14] Cheng Zhiyuan, Caverlee J, Lee K. A content-driven framework for geo-locating microblog users[J]. ACM Transactions on Intelligent Systems and Technology, 2013, 4(1): 1−27
[15] Roller S, Speriosu M, Rallapalli S et al. Supervised text based geolocation using language models on an adaptive grid[C] //Proc of the 2012 Joint Conf on Empirical Methods in Natural Language Processing and Computational Natural Language Learning. Stroudsburg, PA: ACL, 2012: 1500−1510
[16] Java A, Song Xiaodan, Finin T, et al. Why we Twitter: An analysis of a microblogging community[C] //Proc of the Int Workshop on Social Network Mining and Analysis. Berlin: Springer, 2007: 118−138
[17] Graham M, Hale S A, Gaffney D. Where in the world are you? Geolocation and language identification in Twitter[J]. The Professional Geographer, 2014, 66(4): 568−578 doi: 10.1080/00330124.2014.907699
[18] Shen Wei, Wang Jianyong, Han Jiawei. Entity linking with a knowledge base: Issues, techniques, and solutions[J]. IEEE Transactions on Knowledge and Data Engineering, 2014, 27(2): 443−460
[19] MacEachren A M, Jaiswal A, Robinson A C, et al. Senseplace2: Geotwitter analytics support for situational awareness[C] //Proc of the IEEE Conf on Visual Analytics Science and Technology (VAST). Piscataway, NJ: IEEE, 2011: 181−190
[20] Feng Shanshan, Cong Gao, An Bo, et al. Poi2vec: Geographical latent representation for predicting future visitors[C] //Proc of the 31st AAAI Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2017: 102−108
[21] Li Rui, Wang Shengjie, Deng Hongbo, et al. Towards social user profiling: Unified and discriminative influence model for inferring home locations[C]//Proc of the 18th ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2012: 1023−1031
[22] Schulz A, Hadjakos A, Paulheim H, et al. A multi-indicator approach for geo-localization of tweets[C] //Proc of the 7th Int AAAI Conf on Weblogs and Social Media. Palo Alto, CA: AAAI, 2013: 573−582
[23] Compton R, Jurgens D, Allen D. Geotagging one hundred million Twitter accounts with total variation minimization[C] //Proc of the IEEE Int Conf on Big Data, Palo Alto, CA: AAAI, 2014: 393-401
[24] Flatow D, Naaman M, Xie K E, et al. On the accuracy of hyper-local geotagging of social media content[C] //Proc of the 8th ACM Int Conf on Web Search and Data Mining. New York: ACM, 2015: 127−136
[25] Ritter A, Clark S, Etzioni O, et al. Named entity recognition in tweets: An experimental study[C] //Proc of the 2011 Conf on Empirical Methods in Natural Language Processing. Stroudsburg, PA: ACL, 2011: 1524−1534
[26] Anantharam P, Barnaghi P, Thirunarayan K, et al. Extracting city traffic events from social streams[J]. ACM Transactions on Intelligent Systems and Technology, 2015, 6(4): 1−27
[27] Liu Bo, Yuan Quan, Cong Gao, et al. Where your photo is taken: Geolocation prediction for social images[J]. Journal of the Association for Information Science and Technology, 2014, 65(6): 1232−1243 doi: 10.1002/asi.23050
[28] Ozdikis O, Ramampiaro H, Nørvåg K. Locality-adapted kernel densities of term co-occurrences for location prediction of tweets[J]. Information Processing & Management, 2019, 56(4): 1280−1299
[29] Young S D, Zhang Qingpeng, Zeng D D, et al. Social media images as an emerging tool to monitor adherence to COVID-19 public health guidelines: Content analysis[J]. Journal of Medical Internet Research, 2022, 24(3): e24787 doi: 10.2196/24787
[30] Zhou Fan, Dai Yurou, Gao Qiang, et al. Self-supervised human mobility learning for next location prediction and trajectory classification[J]. Knowledge-Based Systems, 2021, 228: 107214 doi: 10.1016/j.knosys.2021.107214
[31] Ye Jihang, Zhu Zhe, Cheng Hong. What’s your next move: User activity prediction in location-based social networks[C] //Proc of the 2013 SIAM Int Conf on Data Mining. Philadelphia, PA: SIAM, 2013: 171−179
[32] Gao Huiji, Tang Jiliang, Hu Xia, et al. Content-aware point of interest recommendation on location-based social networks[C] //Proc of the 29th AAAI Conf on Artificial Intelligence, Palo Alto, CA: AAAI, 2015: 1721−1727
[33] Zhang Zhiyuan, Liu Yun, Zhang Zhenjiang, et al. Fused matrix factorization with multi-tag, social and geographical influences for POI recommendation[J]. World Wide Web, 2019, 22(3): 1135−1150 doi: 10.1007/s11280-018-0579-9
[34] Manotumruksa J, Macdonald C, Ounis I. Modelling user preferences using word embeddings for context-aware venue recommendation[J]. arXiv preprint, arXiv: 1606. 07828, 2016
[35] Giridhar P, Abdelzaher T, George J, et al. On quality of event localization from social network feeds[C] //Proc of the IEEE Int Conf on Pervasive Computing and Communication Workshops (PerCom Workshops). Piscataway, NJ: IEEE, 2015: 75−80
[36] Imran M, Castillo C, Diaz F, et al. Processing social media messages in mass emergency: A survey[J]. ACM Computing Surveys, 2015, 47(4): 1−38
[37] Li Pengfei, Lu Hua, Kanhabua N et al. Location inference for non-geotagged tweets in user timelines[J]. IEEE Transactions on Knowledge and Data Engineering, 2018, 31(6): 1150−1165
[38] Lin Yucheng, Lai Chunming, Chapman J W, et al. Geo-location identification of Facebook pages[C] //Proc of 2018 IEEE/ACM Int Conf on Advances in Social Networks Analysis and Mining (ASONAM). Piscataway, NJ: IEEE, 2018: 441−446
[39] Ao J, Zhang Peng, Cao Yanan. Estimating the locations of emergency events from Twitter streams[J]. Procedia Computer Science, 2014, 31: 731−739 doi: 10.1016/j.procs.2014.05.321
[40] Sakaki T, Okazaki M Matsuo Y. Tweet analysis for real-time event detection and earthquake reporting system development[J]. IEEE Transactions on Knowledge and Data Engineering, 2012, 25(4): 919−931
[41] Lee R, Sumiya K. Measuring geographical regularities of crowd behaviors for Twitter-based geo-social event detection[C] //Proc of the 2nd ACM SIGSPATIAL Int Workshop on Location Based Social Networks. New York: ACM, 2010: 1−10
[42] Wing B, Baldridge J. Simple supervised document geolocation with geodesic grids[C] //Proc of the 49th Annual Meeting of the Association for Computational Linguistics: Human Language Technologies. Stroudsburg, PA: ACL, 2011: 955−964
[43] Abrol S, Khan L. Tweethood: Agglomerative clustering on fuzzy k-closest friends with variable depth for location mining[C] //Proc of the 2nd IEEE Int Conf on Social Computing. Piscataway, NJ: IEEE, 2010: 153−160
[44] Backstrom L, Sun E, Marlow C. Find me if you can: Improving geographical prediction with social and spatial proximity[C] //Proc of the 19th Int Conf on World Wide Web. New York: ACM, 2010: 61−70
[45] McGee J, Caverlee J, Cheng Zhiyuan. Location prediction in social media based on tie strength[C] //Proc of the 22nd ACM Int Conf on Information & Knowledge Management. New York: ACM, 2013: 459−468
[46] Jurgens D. That’s what friends are for: Inferring location in online social media platforms based on social relationships[C] //Proc of the 7th Int AAAI Conf on Weblogs and Social Media. Palo Alto, CA: AAAI, 2013: 273−282
[47] Kossinets G, Watts D J. Empirical analysis of an evolving social network[J]. Science, 2006, 311(5757): 88−90 doi: 10.1126/science.1116869
[48] McGee J, Caverlee J A, Cheng Zhiyuan. A geographic study of tie strength in social media[C] //Proc of the 20th ACM Int Conf on Information and Knowledge Management. New York: ACM, 2011: 2333−2336
[49] Hecht B, Hong L, Suh B, et al. Tweets from justin bieber’s heart: The dynamics of the location field in user profiles[C] //Proc of the SIGCHI Conf on Human Factors in Computing Systems. New York: ACM, 2011: 237−246
[50] Achrekar H, Gandhe A, Lazarus R, et al. Online social networks flu trend tracker: A novel sensory approach to predict flu trends[C] //Proc of the Int Joint Conf on Biomedical Engineering Systems and Technologies. Berlin: Springer, 2012: 353−368
[51] Yin Jie, Karimi S, Lampert A, et al. Using social media to enhance emergency situation awareness[C] //Proc of the 24th Int Joint Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2015: 4234−4239
[52] Mahmud J, Nichols J, Drews C. Home location identification of twitter users[J]. ACM Transactions on Intelligent Systems and Technology, 2014, 5(3): 1−21
[53] Huang Binxuan, Carley K M. A hierarchical location prediction neural network for twitter user geolocation[C] //Proc of the 2019 Conf on Empirical Methods in Natural Language Processing and the 9th Int Joint Conf on Natural Language Processing. Stroudsburg, PA: ACL, 2019: 4731−4741
[54] Van Der Maaten L, Hinton G. Visualizing data using t-SNE[J]. Journal of Machine Learning Research, 2008, 9(11): 2579−2605
[55] Li Chenliang, Sun Aixin. Fine-grained location extraction from tweets with temporal awareness[C] //Proc of the 37th Int ACM SIGIR Conf on Research & Development in Information Retrieval. New York: ACM, 2014: 43−52
[56] Ikawa Y, Enoki M, Tatsubori M. Location inference using microblog messages[C] //Proc of the 21st Int Conf on World Wide Web. New York: ACM, 2012: 687−690
[57] Sankaranarayanan J, Samet H, Teitler B E, et al. Twitterstand: News in tweets[C] //Proc of the 17th ACM SIGSPATIAL Int Conf on Advances in Geographic Information Systems. New York: ACM, 2009: 42−51
[58] Teitler B E, Lieberman M D, Panozzo D, et al. NewsStand: A new view on news[C/OL] //Proc of the 16th ACM SIGSPATIAL Int Conf on Advances in Geographic Information Systems. New York: ACM, 2008 [2022-11-11].https://dl.acm.org/doi/10.1145/1463434.1463458
[59] Chauhan A, Kummamuru K, Toshniwal D. Prediction of places of visit using tweets[J]. Knowledge and Information Systems, 2017, 50(1): 145−166 doi: 10.1007/s10115-016-0936-x
[60] Manotumruksa J, Macdonald C, Ounis I. Matrix factorisation with word embeddings for rating prediction on location-based social networks[C] //Proc of the European Conf on Information Retrieval. Berlin: Springer, 2017: 647−654
[61] Lim W L, Ho C C, Ting C Y. Sentiment analysis by fusing text and location features of geo-tagged tweets[J]. IEEE Access, 2020, 8: 181014−181027 doi: 10.1109/ACCESS.2020.3027845
[62] Abdelhaq H, Sengstock C, Gertz M. Eventweet: Online localized event detection from Twitter[J]. Proceedings of the VLDB Endowment, 2013, 6(12): 1326−1329 doi: 10.14778/2536274.2536307
[63] Samuel A, Sharma D K. Location estimation of non-geo-tagged tweets[J]. Evolutionary Intelligence, 2021, 14(2): 205−216 doi: 10.1007/s12065-018-0163-3
[64] Ozdikis O, Oguztuzun H, Karagoz P. Evidential location estimation for events detected in Twitter[C] //Proc of the 7th Workshop on Geographic Information Retrieval. New York: ACM, 2013: 9−16
[65] Ozdikis O, Oğuztüzün H, Karagoz P. Evidential estimation of event locations in microblogs using the Dempster–Shafer theory[J]. Information Processing & Management, 2016, 52(6): 1227−1246
[66] Nadeau D, Sekine S. A survey of named entity recognition and classification[J]. Lingvisticae Investigationes, 2007, 30(1): 3−26 doi: 10.1075/li.30.1.03nad
[67] Roick O, Heuser S. Location based social networks-definition, current state of the art and research agenda[J]. Transactions in GIS, 2013, 17(5): 763−784 doi: 10.1111/tgis.12032
[68] Gelernter J, Mushegian N. Geo-parsing messages from microtext[J]. Transactions in GIS, 2011, 15(6): 753−773 doi: 10.1111/j.1467-9671.2011.01294.x
[69] Lingad J, Karimi S, Yin Jie. Location extraction from disaster-related microblogs[C] //Proc of the 22nd Int Conf on World Wide Web. New York: ACM, 2013: 1017−1020
[70] Hinduja S, Patchin J W. Bullying, cyberbullying, and suicide[J]. Archives of Suicide Research, 2010, 14(3): 206−221 doi: 10.1080/13811118.2010.494133
[71] Malmasi S, Dras M. Location mention detection in tweets and microblogs[C] //Proc of the Conf of the Pacific Association for Computational Linguistics. Berlin: Springer, 2015: 123−134
[72] Zhang Wei, Gelernter Judith. Geocoding location expressions in Twitter messages: A preference learning method[J]. Journal of Spatial Information Science, 2014, 2014(9): 37−70
[73] Paradesi S M. Geotagging tweets using their content[C] //Proc of the 24th Int FLAIRS Conf. Palo Alto, CA: AAAI, 2011: 355−356
[74] Vieweg S, Hughes A L, Starbird K, et al. Microblogging during two natural hazards events: What Twitter may contribute to situational awareness[C] //Proc of the SIGCHI Conf on Human Factors in Computing Systems. New York: ACM, 2010: 1079−1088
[75] Pennacchiotti M, Popescu A. A machine learning approach to Twitter user classification[C] //Proc of the 5th Int AAAI Conf on Weblogs and Social Media. Palo Alto, CA: AAAI, 2011: 281−288
[76] Gültekin G, Bayat O. A Naïve Bayes prediction model on location-based recommendation by integrating multi-dimensional contextual information[J]. Multimedia Tools and Applications, 2022, 81(5): 6957−6978 doi: 10.1007/s11042-021-11676-4
[77] Stock K, Jones C B, Russell S, et al. Detecting geospatial location descriptions in natural language text[J]. International Journal of Geographical Information Science, 2022, 36((3): ): 547−584 doi: 10.1080/13658816.2021.1987441
[78] Giridhar P, Wang Shiguang, Abdelzaher T F, et al. Joint localization of events and sources in social networks[C] //Proc of the Int Conf on Distributed Computing in Sensor Systems. Piscataway, NJ: IEEE, 2015: 179−188
[79] Cheng Zhiyuan, Caverlee J, Lee K. You are where you tweet: A content-based approach to geo-locating Twitter users[C] //Proc of the 19th ACM Int Conf on Information and Knowledge Management. New York: ACM, 2010: 759−768
[80] Huang Chao, Wang Dong, Zhu Shenglong. Where are you from: Home location profiling of crowd sensors from noisy and sparse crowdsourcing data[C/OL] //Proc of the IEEE Conf on Computer Communications (INFOCOM 2017). Piscataway, NJ: IEEE, 2017 [2023-03-29].https://ieeexplore.ieee.org/abstract/document/8057112
[81] Eisenstein Ja, O’Connor B, Smith N A, et al. A latent variable model for geographic lexical variation[C] //Proc of the 2010 Conf on Empirical Methods in Natural Language Processing. Stroudsburg, PA: ACL, 2010: 1277−1287
[82] Hong Liangjie, Ahmed A, Gurumurthy S, et al. Discovering geographical topics in the Twitter stream[C] //Proc of the 21st Int Conf on World Wide Web. New York: ACM, 2012: 769−778
[83] Grover A, Leskovec J. Node2Vec: Scalable feature learning for networks[C] //Proc of the 22nd ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2016: 855864
[84] Chang H, Lee D, Eltaher M, et al. @Phillies tweeting from Philly? Predicting Twitter user locations with spatial word usage[C] //Proc of the IEEE/ACM Int Conf on Advances in Social Networks Analysis and Mining. New York: ACM, 2012: 111−118
[85] Sakaki T, Okazaki M, Matsuo Y. Earthquake shakes twitter users: Real-time event detection by social sensors[C] //Proc of the 19th Int Conf on World Wide Web. New York: ACM, 2010: 851−860
[86] Arulampalam M S, Maskell S, Gordon N, et al. A tutorial on particle filters for online nonlinear/nongaussian Bayesian tracking[J]. IEEE Transactions on Signal Processing, 2002, 50(2): 174−188 doi: 10.1109/78.978374
[87] Li Wen, Eickhoff C, de Vries A P. Want a coffee? Predicting users’ trails[C] //Proc of the 35th Int ACM SIGIR Conf on Research and Development In Information Retrieval. New York: ACM, 2012: 1171−1172
[88] Rodrigues E, Assunção R, Pappa G L, et al. Exploring multiple evidence to infer users’location in Twitter[J]. Neuro Computing, 2016, 171: 30−38
[89] Zhang Jiadong, Chow C Y, Li Yanhua. Lore: Exploiting sequential influence for location recommendations[C] //Proc of the 22nd ACM SIGSPATIAL Int Conf on Advances in Geographic Information Systems. New York: ACM, 2014: 103−112
[90] Lian Defu, Xie Xing, Zheng Vincent W, et al. CEPR: A collaborative exploration and periodically returning model for location prediction[J]. ACM Transactions on Intelligent Systems and Technology, 2015, 6(1): 1−27
[91] Cheng Chen, Yang Haiqin, Lyu M R, et al. Where you like to go next: Successive point-of-interest recommendation[C] //Proc of the 23rd Int Joint Conf on Artificial Intelligence. Los Altos, CA: IJCAI, 2013: 2605−2611
[92] Feng Shanshan, Li Xutao, Zeng Yifeng, et al. Personalized ranking metric embedding for next new POI recommendation[C] //Proc of the 24th Int Joint Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2015: 2069−2075
[93] Chen Sijia, Zhang Jian, Meng Fanwei, et al. A Markov chain position prediction model based on multidimensional correction[J]. Complexity, 2021, 2021: 6677132
[94] Good I J. The population frequencies of species and the estimation of population parameters[J]. Biometrika, 1953, 40(34): 237−264
[95] Rendle S, Freudenthaler C SchmidtThieme L. Factorizing personalized Markov chains for nextbasket recommendation[C] //Proc of the 19th Int Conf on World Wide Web. New York: ACM, 2010: 811−820
[96] Lu Jing, Anjiri S N, Liu Cong. Compredict: A location prediction method by mining semantic trajectories and mobile intention[J/OL]. Available at SSRN, 2022 [2022-05-06].https://ssrn.com/abstract=4034463
[97] Han Jiawei, Kamber M, Tung A. Spatial clustering methods in data mining: A survey[J]. Geographic Data Mining and Knowledge Discovery, 2001, 1: 188−217
[98] Yin Hongzhi, Hu Zhiting, Zhou Xiaofang, et al. Discovering interpretable geosocial communities for user behavior prediction[C]//Proc of the IEEE 32nd Int Conf on Data Engineering (ICDE). Piscataway, NJ: IEEE, 2016: 942−953
[99] Kong Longbo, Liu Zhi, Huang Yan. Spot: Locating social media users based on social network context[J]. Proceedings of the VLDB Endowment, 2014, 7(13): 1681−1684 doi: 10.14778/2733004.2733060
[100] Poulston A, Stevenson M, Bontcheva K. Hyperlocal home location identification of Twitter profiles[C]//Proc of the 28th ACM Conf on Hypertext and Social Media. New York: ACM, 2017: 45−54
[101] Alaskar H, Vaiyapuri T, Sbai Z. Twitter analytics for discovering socially important locations for business improvement[C/OL] //Proc of the IEEE Int Symp on Signal Processing and Information Technology (ISSPIT). Piscataway, NJ: IEEE, 2019 [2023-03-29].https://ieeexplore.ieee.org/abstract/document/9001873
[102] Senefonte H C M, Delgado M R, Lüders R, et al. PredicTour: Predicting mobility patterns of tourists based on social media user’s profiles[J]. IEEE Access, 2022, 10: 9257−9270 doi: 10.1109/ACCESS.2022.3143503
[103] Gao Qiang, Zhou Fan, Trajcevski G, et al. Predicting human mobility via variational attention[C] //Proc of the World Wide Web Conf. New York: ACM, 2019: 2750−2756
[104] Ester M, Kriegel H P, Sander J, et al. A density-based algorithm for discovering clusters in large spatial databases with noise[C] //Proc of the 2nd Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 1996: 226−231
[105] Boettcher A, Lee D. Eventradar: A real-time local event detection scheme using Twitter stream[C] //Proc of the IEEE Int Conf on Green Computing and Communications. Piscataway, NJ: IEEE, 2012: 358−367
[106] Tamura K, Ichimura T. Density-based spatiotemporal clustering algorithm for extracting bursty areas from georeferenced documents[C] //Proc of the IEEE Int Conf on Systems, Man, and Cybernetics. Piscataway, NJ: IEEE, 2013: 2079−2084
[107] Sakai T, Tamura K. Identifying bursty areas of emergency topics in geotagged tweets using density-based spatiotemporal clustering algorithm[C] //Proc of the 7th IEEE Int Workshop on Computational Intelligence and Applications (IWCIA). Piscataway, NJ: IEEE, 2014: 95−100
[108] Ebrahimi M, ShafieiBavani E, Wong R, et al. Exploring celebrities on inferring user geolocation in Twitter[C] //Proc of the Pacific-Asia Conf on Knowledge Discovery and Data Mining. Piscataway, NJ: IEEE, 2017: 395−406
[109] Hulden M, Silfverberg M, Francom J. Kernel density estimation for text-based geolocation[C] //Proc of the 29th AAAI Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2015: 145-150
[110] Yin Zhijun, Cao Liangliang, Han Jiawei, et al. Geographical topic discovery and comparison[C] //Proc of the 20th Int Conf on World Wide Web. New York: ACM, 2011: 247−256
[111] Van L O, Quinn J, Schockaert S, et al. Spatially aware term selection for geotagging[J]. IEEE Transactions on Knowledge and Data Engineering, 2013, 26(1): 221−234
[112] Priedhorsky R, Culotta A, Del V S Y. Inferring the origin locations of tweets with quantitative confidence[C] //Proc of the 17th ACM Conf on Computer Supported Cooperative Work & Social Computing. New York: ACM, 2014: 1523−1536
[113] Bakerman J, Pazdernik K, Wilson A, et al. Twitter geolocation: A hybrid approach[J]. ACM Transactions on Knowledge Discovery from Data, 2018, 12(3): 1−17
[114] Lu Yafeng, Hu Xia, Wang Feng, et al. Visualizing social media sentiment in disaster scenarios[C] //Proc of the 24th Int Conf on World Wide Web. New York: ACM, 2015: 1211−1215
[115] Lichman M, Smyth P. Modeling human location data with mixtures of kernel densities[C] //Proc of the 20th ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2014: 35−44
[116] Zhang Jiadong, Chow C Y. iGSLR: Personalized geo social location recommendation: A kernel density estimation approach[C] //Proc of the 21st ACM SIGSPATIAL Int Conf on Advances in Geographic Information Systems. New York: ACM, 2013: 334−343
[117] Botev Z I, Grotowski J F, Kroese D P. Kernel density estimation via diffusion[J]. The Annals of Statistics, 2010, 38(5): 2916−2957
[118] Chen Wei, Wang Weiqing, Yin Hongzhi, et al. HFUL: A hybrid framework for user account linkage across location-aware social networks[J]. The VLDB Journal, 2023, 32(1): 1−22 doi: 10.1007/s00778-022-00730-8
[119] Cai Liangqi, Wen Wen, Wu Biao, et al. A coarse-to-fine user preferences prediction method for point-of-interest recommendation[J]. Neurocomputing, 2021, 422: 1−11 doi: 10.1016/j.neucom.2020.09.034
[120] Lian Defu, Zhao Cong, Xie Xing, et al. GeoMF: Joint geographical modeling and matrix factorization for point-of-interest recommendation[C] //Proc of the 20th ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2014: 831−840
[121] Lian Defu, Zheng Kai, Ge Yong, et al. GeoMF++ scalable location recommendation via joint geographical modeling and matrix factorization[J]. ACM Transactions on Information Systems, 2018, 36(3): 1−29
[122] Manotumruksa J, Macdonald C, Ounis I. Regularising factorised models for venue recommendation using friends and their comments[C] //Proc of the 25th ACM Int on Conf on Information and Knowledge Management. New York: ACM, 2016: 1981−1984
[123] Zhao Shenglin, Zhao Tong, Yang Haiqin, et al. STELLAR: Spatial-temporal latent ranking for successive point-of-interest recommendation[C] //Proc of the 30th AAAI Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2016: 315−322
[124] Liu Bin, Xiong Hui, Papadimitriou S, et al. A general geographical probabilistic factor model for point of interest recommendation[J]. IEEE Transactions on Knowledge and Data Engineering, 2014, 27(5): 1167−1179
[125] Liu Bin, Fu Yanjie, Yao Zijun, et al. Learning geographical preferences for point-of-interest recommendation[C] //Proc of the 19th ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2013: 1043−1051
[126] Zhao Pengpeng, Xu Xiefeng, Liu Yanchi, et al. Exploiting hierarchical structures for POI recommendation[C] //Proc of the 2017 IEEE Int Conf on Data Mining (ICDM). Piscataway, NJ: IEEE, 2017: 655−664
[127] Li Xin, Jiang Mingming, Hong Huiting, et al. A time-aware personalized point-of-interest recommendation via high-order tensor factorization[J]. ACM Transactions on Information Systems, 2017, 35(4): 1−23
[128] Yang Dingqi, Zhang Daqing, Zheng V W, et al. Modeling user activity preference by leveraging user spatial temporal characteristics in LBSNs[J]. IEEE Transactions on Systems, Man, and Cybernetics: Systems, 2014, 45(1): 129−142
[129] Zhang Chenyi, Wang Ke. POI recommendation through cross-region collaborative filtering[J]. Knowledge and Information Systems, 2016, 46(2): 369−387 doi: 10.1007/s10115-015-0825-8
[130] Liu Qiang, Wu Shu, Wang Liang, et al. Predicting the next location: A recurrent model with spatial and temporal contexts[C] //Proc of the 30th AAAI Conf on Artificial Intelligence. Palo Alto, CA: AAAI, 2016: 194−200
[131] Miura Y, Taniguchi M, Taniguchi T, et al. A simple scalable neural networks based model for geolocation prediction in Twitter[C] //Proc of the 2nd Workshop on Noisy User-generated Text (WNUT). New York: ACM, 2016: 235−239
[132] Rahimi A, Cohn T, Baldwin T. A neural model for user geolocation and lexical dialectology[C] //Proc of the 55th Annual Meeting of the Association for Computational Linguistics. Stroudsburg, PA: ACL, 2017: 209−216
[133] Rahimi A, Baldwin T, Cohn T. Continuous representation of location for geolocation and lexical dialectology using mixture density networks[C] //Procs of the 2017 Conf on Empirical Methods in Natural Language Processing. Stroudsburg, PA: ACL, 2017: 167−176
[134] Miura Y, Taniguchi M, Taniguchi T, et al. Unifying text, metadata, and user network representations with a neural network for geolocation prediction[C] //Proc of the 55th Annual Meeting of the Association for Computational Linguistics. Stroudsburg, PA: ACL, 2017: 1260−1272
[135] Collobert R, Weston J, Bottou L, et al. Natural language processing (almost) from scratch[J]. Journal of Machine Learning Research, 2011, 12: 2493−2537
[136] Iso H Wakamiya S, Aramaki E. Density estimation for geolocation via convolutional mixture density network[J]. arXiv preprint, arXiv: 1705. 02750, 2017
[137] Mousset P, Pitarch Y, Tamine L. End-to-end neural matching for semantic location prediction of tweets[J]. ACM Transactions on Information Systems, 2020, 39(1): 1−35
[138] Chen Zi, Pokharel B, Li Bingnan, et al. Location extraction from twitter messages using a bidirectional long short-term memory neural network with conditional random field model[C] //Proc of the Int Conf on Geographical Information Systems Theory, Applications and Management. Berlin: Springer, 2020: 18−30
[139] Ajao O, Bhowmik D, Zargari S. Content-aware tweet location inference using quadtree spatial partitioning and Jaccard-cosine word embedding[C] //Proc of the IEEE/ACM Int Conf on Advances in Social Networks Analysis and Mining (ASONAM). New York: ACM, 2018: 1116−1123
[140] Izbicki M, Papalexakis V, Tsotras V. Geolocating tweets in any language at any location[C]//Proc of the 28th ACM Int Conf on Information and Knowledge Management. New York: ACM, 2019: 89−98
[141] Xu Shuai, Cao Jiuxin, Legg P, et al. Venue2vec: An efficient embedding model for fine-grained user location prediction in geosocial networks[J]. IEEE Systems Journal, 2019, 14((2): ): 1740−1751
[142] Ghaffari M, Srinivasan A, Liu Xiuwen. High resolution home location prediction from tweets using deep learning with dynamic structure[C] //Proc of the 2019 IEEE/ACM Int Conf on Advances in Social Networks Analysis and Mining. Piscataway, NJ: IEEE, 2019: 540−542
[143] Xu Canwen, Li Jing, Luo Xiangyang, et al. Dlocrl: A deep learning pipeline for fine grained location recognition and linking in tweets[C] //Proc of the World Wide Web Conf. New York: ACM, 2019: 3391−3397
[144] Bao Yi, Huang Zhou, Li Linna, et al. A BiLSTM-CNN model for predicting users’ next locations based on geotagged social media[J]. International Journal of Geographical Information Science, 2021, 35(4): 639−660 doi: 10.1080/13658816.2020.1808896
[145] Dat V A D, Yoon S. A human location prediction-based routing protocol in mobile crowdsensing-based urban sensor networks[J]. Applied Sciences, 2022, 12(8): 3898 doi: 10.3390/app12083898
[146] Chiu J P C, Nichols E. Named entity recognition with bidirectional LSTM-CNNs[J]. Transactions of the Association for Computational Linguistics, 2016, 4: 357−370 doi: 10.1162/tacl_a_00104
[147] Kumar A, Singh J P. Location reference identification from tweets during emergencies: A deep learning approach[J]. Internatinal Journal of Disaster Risk Reduction, 2019, 33: 365−375 doi: 10.1016/j.ijdrr.2018.10.021
[148] Huang Binxuan, Carley K M. On predicting geolocation of tweets using convolutional neural networks[C] //Proc of the Int Conf on Social Computing, Behavioral-Cultural Modeling and Prediction and Behavior Representation in Modeling and Simulation. Berlin: Springer, 2017: 281−291
[149] Vaswani A, Shazeer N, Parmar N, et al. Attention is all you need[C] //Proc of the Advances in Neural Information Processing Systems. Piscataway, NJ: IEEE, 2017: 5998−6008
[150] Feng Jie, Li Yong, Zhang Chao, et al. Deepmove: Predicting human mobility with attentional recurrent networks[C] //Proc of the 2018 World Wide Web Conf. New York: ACM, 2018: 1459−1468
[151] Huang Chieh Yang, Tong Hanghang, He Jingrui, et al. Location prediction for tweets[J]. Frontiers in Big Data, 2019, 2: 5 doi: 10.3389/fdata.2019.00005
[152] Wang Zhixiao, Yan Wenyao, Gao Ang. Fine-grained user location prediction using meta-path context with attention mechanism[J]. Journal of Web Engineering, 2021, 20(3): 597−614
[153] Wang Shuang, Li Anlian, Xie Shuai, et al. A spatial-temporal self-attention network for location prediction[J/OL]. Complexity, 2021 [2022-11-11]. https://downloads.hindawi.com/journals/complexity/2021/6692313.pdf
[154] Liu Yuwen, Song Zuolong, Xu Xiaolong, et al. Bidirectional GRU networks-based next POI category prediction for healthcare[J]. International Journal of Intelligent Systems, 2022, 37(7): 4020−4040 doi: 10.1002/int.22710
[155] Kipf T N, Welling M. Semi-supervised classification with graph convolutional networks[C/OL] //Proc of the 5th Int Conf on Learning Representations. 2017 [2022-05-05].https://openreview.net/pdf?id=SJU4ayYgl
[156] Velickovic P, Cucurull G, Casanova A, et al. Graph attention net-works[C/OL] //Proc of the 6th Int Conf on Learning Representations. 2018 [2022-05-05].https://openreview.net/pdf?id=rJXMpikCZ
[157] Zhong Ting, Wang Tianliang, Wang Jiahao, et al. Multiple-aspect attentional graph neural networks for online social network user localization[J]. IEEE Access, 2020, 8: 95223−95234 doi: 10.1109/ACCESS.2020.2993876
[158] Zhou Fan, Wang Tianliang, Zhong Ting, et al. Identifying user geolocation with hierarchical graph neural networks and explainable fusion[J/OL]. Information Fusion, 2022 [2023-03-29].https://www.sciencedirect.com/science/article/pii/S1566253521002293
[159] Miyazaki T, Rahimi A, Cohn T, et al. Twitter geolocation using knowledge-based methods[C] //Proc of the 4th Workshop on Noisy User-generated Text. Stroudsburg, PA: ACL, 2018: 7−16
[160] Tian Hechan, Zhang Meng, Luo Xiangyang, et al. Twitter user location inference based on representation learning and label propagation[C] //Proc of the Web Conf. New York: ACM, 2020: 2648−2654
[161] Elmi S, Tan K L. Influence-based deep network for next POIs prediction[C] //Proc of the 44th European Conf on Information Retrieval. Berlin: Springer, 2022: 170−183
[162] Wu Xian, Huang Chao, Zhang Chuxu, et al. Hierarchically structured transformer networks for fine-grained spatial event forecasting[C] //Proc of the Web Conf 2020. New York ACM, 2020: 2320–2330
[163] Chaitanya J. Transformers are graph neural networks [EB/OL]. 2020 [2022-05-05].https://graphdeeplearning.github.io/post/transformers-are-gnns/
[164] Tsochantaridis I, Joachims T, Hofmann T, et al. Large margin methods for structured and interdependent output variables[J]. Journal of Machine Learning Research, 2005, 6(9): 1453−1484
[165] Guo S, Chang Mingwei, Kiciman E. To link or not to link? A study on end-to-end tweet entity linking[C] //Proc of the 2013 Conf of the North American Chapter of the Association for Computational Linguistics: Human Language Technologies. Stroudsburg, PA: ACL, 2013: 1020−1030
[166] Hua Wen, Zheng Kai, Zhou Xiaofang. Microblog entity linking with social temporal context[C] //Proc of the 2015 ACM SIGMOD Int Conf on Management of Data. New York: ACM, 2015: 1761−1775
[167] Shen Wei, Wang Jianyong, Luo Ping, et al. Linking named entities in tweets with knowledge base via user interest modeling[C] //Proc of the 19th ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2013: 68−76
[168] Do T H, Nguyen D M, Tsiligianni E, et al. Multiview deep learning for predicting Twitter users’ location[J]. arXiv preprint, arXiv: 1712. 08091, 2017
[169] Wang Dong, Al Amin M T , Abdelzaher T, et al. Provenance-assisted classification in social networks[J]. IEEE Journal of Selected Topics in Signal Processing, 2014, 8(4): 624−637
[170] Chong W H, Lim E P. Tweet geolocation: Leveraging location, user and peer signals[C] //Proc of the 2017 ACM on Conf on Information and Knowledge Management. New York: ACM, 2017: 1279−1288
[171] Likhyani A, Padmanabhan D, Bedathur S, et al. Inferring and exploiting categories for next location prediction[C] //Proc of the 24th Int Conf on World Wide Web. New York: ACM, 2015: 65−66
[172] Rahimi A, Cohn T, Baldwin T. Twitter user geolocation using a unified text and network prediction model[C] //Proc of the 53rd Annual Meeting of the Association for Computational Linguistics and the 7th Int Joint Conf on Natural Language Processing of the Asian Federation of Natural Language Processing. Stroudsburg, PA: ACL, 2015: 630−636
[173] Rahimi A, Vu D, Cohn T, et al. Exploiting text and network context for geolocation of social media users[C] //Proc of the 2015 Conf of the North American Chapter of the Association for Computational Linguistics: Human Language Technologies. Stroudsburg, PA: ACL, 2015: 1362−1367
[174] Han B, Cook P, Baldwin T. Text-based Twitter user geolocation prediction[J]. Journal of Artificial Intelligence Research, 2014, 49: 451−500 doi: 10.1613/jair.4200
[175] Liao Dongliang, Zhong Yuan, Li Jing. Location prediction through activity purpose: Integrating temporal and sequential models[C] //Proc of Pacific-Asia Conf on Knowledge Discovery and Data Mining. Berlin: Springer, 2017: 711−723
[176] Han B, Cook P, Baldwin T. Geolocation prediction in social media data by finding location indicative words[C]//Proc of the Int Conf on Computational Linguistics 2012. New York: ACM, 2012: 1045−1062
[177] Gao Huiji, Tang Jiliang, Liu Huan. Exploring social-historical ties on location-based social networks[C] //Proc of the 6th Int AAAI Conf on Weblogs and Social Media. Palo Alto, CA: AAAI, 2012: 114−121
[178] Mazumdar P, Patra B K, Babu K S, et al. Hidden location prediction using check-in patterns in location-based social networks[J]. Knowledge and Information Systems, 2018, 57(3): 571−601 doi: 10.1007/s10115-018-1170-5
[179] Hai N T, Nguyen H H, Thai-Nghe N. A mobility prediction model for location-based social networks[C] //Proc of the Asian Conf on Intelligent Information and Database Systems. Berlin: Springer, 2016: 106−115
[180] Wong M H, Tseng V S, Tseng J C, et al. Long-term user location prediction using deep learning and periodic pattern mining[C] //Proc of the Int Conf on Advanced Data Mining and Applications. Berlin: Springer, 2017: 582−594
[181] Wang Yingzi, Yuan N J, Lian Defu, et al. Regularity and conformity: Location prediction using heterogeneous mobility data[C] //Proc of the 21st ACM SIGKDD Int Conf on Knowledge Discovery and Data Mining. New York: ACM, 2015: 1275−1284
[182] Gao Huiji, Tang Jiliang, Hu Xia, et al. Modeling temporal effects of human mobile behavior on location-based social networks[C] //Proc of the 22nd ACM Int Conf on Information & Knowledge Management. New York: ACM, 2013: 1673−1678
[183] Li Xutao, Cong Gao, Li Xiaoli, et al. Rank-geofm: A ranking based geographical factorization method for point of interest recommendation[C] //Proc of the 38th Int ACM SIGIR Conf on Research and Development in Information Retrieval. New York: ACM, 2015: 433−442
[184] Pang Jun, Zhang Yang. Exploring communities for effective location prediction[C] //Proc of the 24th Int Conf on World Wide Web. New York: ACM, 2015: 87−88
[185] Yang Dingqi, Qu Bingqing, Yang Jie, et al. Revisiting user mobility and social relationships in lbsns: A hypergraph embedding approach[C] //Proc of the World Wide Web Conf. New York: ACM, 2019: 2147−2157
[186] Hristova D, Williams M J, Musolesi M, et al. Measuring urban social diversity using interconnected geo-social networks[C]//Proc of the 25th Int Conf on World Wide Web. New York: ACM, 2016: 21−30
[187] Rahimi A, Cohn T, Baldwin T. Semi-supervised user geolocation via graph convolutional networks[C] //Proc of the 56th Annual Meeting of the Association for Computational Linguistics. Stroudsburg, PA: ACL, 2018: 2009−2019
-
期刊类型引用(1)
1. 周洋涛，褚华，朱非非，李祥铭，韩子涵，张帅. 基于深度学习的个性化学习资源推荐综述. 计算机科学. 2024(10): 17-32 . 
百度学术
其他类型引用(2)
计量
- 文章访问数: 310
- HTML全文浏览量: 88
- PDF下载量: 122
- 被引次数: 3
