通讯网络网格化分裂及重组自动爬虫算法

专利申请号：CN202011139673.7

公 开 号：CN112052372B

发 明 人：李家京 常建萍 张劲 任永安 黄小兵 张岳 李雯 郭丙峰 王强 

代 理 人：郑州异开专利事务所(普通合伙)韩华

代理机构：郑州异开专利事务所(普通合伙)

专利类型：发明专利

申 请 日：20240220

公 开 日：20201022

专利主分类号：G06F16/951

关 键 词：矩形网格 数据量 矩形框 互联网数据 标准数据 开放平台 数据采集 数据格式 数据聚合 通讯网络 系统获取 爬虫 网格化 地域 父级 归档 算法 采集 合并 分裂 山区 

摘      要：本发明公开了一种通讯网络网格化分裂及重组自动爬虫算法，基于高德GIS地图,通过开放平台API相关系统获取POI数据，步骤如下：1，将指定地域的高德GIS地图当作一个矩形框；2，获取矩形框内部POI数据,当POI数据量大于900时对该矩形框进行十字切分，形成四个矩形网格；3，当切分后的某矩形网格内POI数据量仍然大于900时，继续对该矩形网格进行十字切分直至切分后的所有矩形网格内POI数据量≤900；4，将POI数据量为0的矩形网格进行父级合并,实现对山区、无人区地域的处理；5，对切分后的每一个矩形网格进行数据采集、归档。本发明将互联网数据按照划分类型范围采集获取，对标准数据进行数据聚合，完善了数据格式及呈现。