林 军

(泉州纺织服装职业学院，福建 石狮 362700)

0 引言

在当前电子信息时代下，由于空间数据没有描述性信息，很难准确衡量其数据质量，后续数据的获取和应用也比较困难。各行各业普遍关注的焦点之一是如何快速地从各类海量的大数据中获取自己所需的数据。在大数据信息时代，数据信息的特点是具有复杂庞大的处理特征，国内外一些学者研究的普通数据处理分析方法，很难从中快速获取需要的数据信息。如果仅依靠人工智能获取相关信息数据，会导致工作量巨大，而且获取的相关信息非常有限。网络搜索爬虫引擎作为一种自动挖掘提取有效网页的应用程序，可以高效地从网站数据库中的各种海量网页信息里，自动挖掘出有效的网页信息。该技术的优势是结合了数学进化论的信息论、信号信息处理等科学思想。通过多种复杂的分析算法，对大量未经优化处理的信息数据进行集中深入的分析，得出这类数据与有效率的知识系统信息之间的潜在相互关系。近年来，数据挖掘技术在多个方面，例如医学、商业、工程和科学等各个领域都取得了显著的成果。随着全球大数据应用时代的逐步到来，数据挖掘等新技术的产业研究应用价值也越来越大。Python是一种面向对象的单机编程应用语言，其特点是语言简洁方便。与其他编程语言变体相比，用Python编写的代码更易被读懂，语法相对简单，设计更简洁、高效、方便，从而受到广大用户的欢迎。……