分布式计算框架和分布式计算方法

专利申请号：CN201610836654.7

公 开 号：CN106406985A

发 明 人：张建伟 张云聪 王聪 徐瑶 文春阳 黄鑫 宋展 朱冠胤 

代 理 人：王达佐;马晓亚

代理机构：11204 北京英赛嘉华知识产权代理有限责任公司

专利类型：发明申请

申 请 日：20170215

公 开 日：20160921

专利主分类号：G06F9/46(20060101)

关 键 词：算子 分布式计算 字段 分布式计算框架 分布式数据 解析单元 输入参数 算子单元 用户利用 复杂度 复用 解析 返回 申请 优化 

摘      要：本申请公开了分布式计算框架和分布式计算方法。该分布式计算框架的一具体实施方式包括：解析单元，用于解析分布式计算任务的表达式，确定算子、算子对应的字段；算子单元，用于提供算子，算子的输入参数包括：字段、字段型分布式数据集。实现了任意算子接收和返回的参数的类型均可以为字段型分布式数据集，任意算子均可对字段型分布式数据集中的对应于字段的数据进行操作。从而，任意算子均需实现一次，实现算子的复用。将分布式计算任务以较为简单的表达式显示地表达出来，简化了用户利用的分布式计算框架编写分布式计算程序的复杂度，进一步地，可以通过表达式确定分布式计算中涉及的算子，从而可以对分布式计算过程进行优化。