JobKeeper的背景
在没有JobKeeper如此智能的调度平台辅助时，大数据处理时很不方便，因为在处理大数据时通常都会调用多个软件组件，而多个工具的使用当时只能依靠手动来调用，才能完成整个处理流程，这样大大的增加了处理成本，也浪费了很多时间、人工。针对这样的情况，云创大数据经过多次针对性调研整理，研发出JobKeeper智能调度平台，成功解决这一难题，通过JoKeeper调度平台，在处理大数据时，可以很方便的按流程来自动调用所有的组件, 除此之外，智能的JobKeeper应用范围很广泛，不仅仅局限于大数据处理，而且各个方面都适用，并且可以对机器进行性能监控。
JobKeeper产品简介
JobKeeper是南京云创大数据科技股份有限公司自主研发的分布式调度平台(亦支持单机)，具有较高的任务处理性能，而且具有高可靠性，可不间断接受任务。
JobKeeper 是一种处理任务的高性能分布式调度平台，JobKeeper可不间断接受从各台计算机提交的任务，再按照当前集群中所有机器的压力，智能进行分配任务，进而达到集群负载均衡。通过JobKeeper还可以对当前分布式集群的所有机器的状况进行监控，对集群中所有的任务进行停止、删除等功能。
系统基本组成
JobKeeper的系统架构如图1所示：
JobKeeper的任务分发流程如图2所示：
当用户在应用层下发任务给管理节点，管理节点调度机器采集机器节点的信息，根据具体的算法选取合适的节点并分发任务，接下来具体的处理节点接收到任务并处理同时将结果返回给管理节点，管理节点整理汇总处理结果，而后返回给应用层。
JobKeeper系统故障处理机制
Jobkeeper的故障处理机制如图3所示：
首先是任务处理节点宕机或者该任务初始化后出现错误，那么该任务返还到任务调度层交给调度节点重新分配。如果任务处理节点宕机或者子任务出现未知错误，那么该任务将返回到任务处理节点上 由任务节点机器重新分配该子任务。而所有的任务信息和处理节点信息都会定时写入到磁盘文件 所以不需要担心做了一半的任务要从头开始做。
JobKeeper产品优势
JobKeeper市场应用
|
应用范围
|
应用描述
|
成功案例
|
| 传媒行业 | 基于大量X86架构计算机构成的低成本云转码平台上进行高清视频转码。 | 某传媒视频云转码平台等 |
| 自动化研究 | 对分布式集群进行智能调度与性能监控。 | 某研究所大数据处理平台等 |
| 移动网络优化 | 对分布式集群进行智能调度与性能监控。 | 某运营商共享云平台等 |
| 医疗行业 | 海量数据处理的智能调配与集群性能监控。 | … |
| … | … | … |
| 项目 | 技术指标 |
| 数量 | 1套 |
| 品牌 | 云任务调度系统知名品牌。 |
| 体系架构 | 高性能集群分布式架构多任务调度系统。 |
| 数据处理性能随节点数量的增加而线性增加，支持多节点自动负载均衡及故障转移。 | |
| 横向扩展 | 支持在不停机情况下，通过向系统中增加节点的方式实现业务不中断情况下扩充容量和性能。 |
| 在线修复 | 任意节点发生故障、可在不间断业务的情况下进行修复。 |
| 支持主机系统 | 客户端支持Linux（CentOS、RedHat、Ubuntu）、FreeBSD、Windows、苹果MacOS X等主流操作系统。 |
| 高可用性 |
要求系统全冗余，节点必须是高可用配置。当元数据节点出现故障时，要能自动切换到备用元数据节点。任何一个节点出现故障，不影响数据的正常访问。 |
| 可用性 | 当任意1个节点（包括元数据节点）发生故障，存储系统仍然保持数据完整，并且不会停机中断服务。 |
| 服务 | 原厂商质保服务， 三年7×24×4，4小时用户现场响应服务。 |
| 可调度的任务总量 | 可迅速调度一万个以上的任务。 |
| 数据存储 | 数据能够集中存储和处理。 |
| 负载均衡性 | 大规模并发任务处理时，能够根据节点负载进行动态分配处理任务，做到资源负载均衡。 |
| 调度管理 | 可对执行任务集中调度管理。 |
| 稳定性 | 1、系统连续运行7*24小时，无故障。 2、所有周期任务均正常执行，且执行结果正确。 |
| 可靠性 | 没有单点故障，任意节点宕机，系统工作正常，可以继续进行数据处理和应用查询,不会影响分布式系统运行和查询结果的准确性。 |
| 扩展性 | 既可以在很小规模机器上跑,也可以在成千上万台的机器上运行，而且经过很简单的操作就可以把规模扩展到成千上万台服务器上,而且可靠性随着加入节点的增加成线性上升。 |
| 分布式计算能力 | 集群能增加节点、并且能正常执行查询任务，在流量没变、资源增加的情况下，增加机器前后，查询任务耗时按比例降低。 |
联系方式 总机:400-8855-360
市场部
区域 |
销售人员 |
分 机 |
手机号 |
邮 箱 |
腾讯QQ |
项目总监 |
袁高峰 |
8008 |
15051887778 |
 |
|
新疆分公司 |
任家瑞 |
8019 |
13851763165 |
 |
|
北京 安徽 天津 辽宁 黑龙江 吉林 |
骆梦阳 |
8052 |
13952028557 |
 |
|
山东 浙江 四川 广西 |
杨 剑 |
8030 |
18751869256 |
 |
|
内蒙古 |
何家乐 |
8031 |
18616794962 |
 |
|
云南、福建、河北、江西、上海 |
刘立宏 |
8034 |
13815414773 |
 |
|
山西 |
刘连鹏 |
8018 |
18021395113 |
 |
|
海南 |
左 赛 |
8033 |
18017566211 |
 |
|
河南 重庆 湖北 贵州 陕西 |
王 军 |
8035 |
13851877991 |
 |
|
广东 |
单明月 |
8056 |
13770311887 |
 |
|
湖南 |
张绪文心 |
8027 |
18602548008 |
 |
|
青海 甘肃 西藏 宁夏 |
张 伟 |
8028 |
05157345 |
 |
|
新疆 |
陈鑫磊 |
15899133730 |
 |
||
王 玮 |
8054 |
15077865340 |
 |
||
谢久军 |
8042 |
13805153062 |
 |
||
河南办事处 |
刘宏 (河南办事处 主任) |
13333831976 |
 |
||
湖北办事处 |
周俊 (湖北办事处) |
13995587166 |
 |
||
贵州办事处 |
汤添智 (贵州办事处) |
13602805009 |
 |
||
重庆办事处 |
曾娟 （重庆办事处） |
13628383332 |
 |
教育行业代理
| 区域/行业 | 代理商 | 区域/行业 | 代理商 |
| 安徽省教育行业代理 | 安徽康源物联信息科技有限公司(总代理) | 福建教育行业代理 | 福建东方锐智教育科技有限公司 |
| 安徽盛驰信息科技有限公司 | 甘肃教育行业代理 | 西北师范大学（兰州微费电子科技有限公司） | |
| 广东省教育行业代理 | 广州松子智能科技服务有限公司 | 广西教育行业代理 | 广西国邦志成科技有限公司(总代理) |
| 广州万维视景科技有限公司 | 广西智慧城市科技有限公司 | ||
| 贵州省教育行业代理 | 贵州普创大数据科技有限公司(总代理) | 广西中蓝信息工程有限公司 | |
| 内蒙古省教育行业代理 | 内蒙古万富圣达教育科技有限公司(总代理) | 南宁西大思科软件有限责任公司 | |
| 河北省教育行业代理 | 河北惠美电子科技有限公司 | 河南教育行业代理 | 河南奇酷网络工程有限公司 |
| 析牛(北京)科技有限责任公司 | 郑州枫叶科技有限公司(总代理) | ||
| 石家庄展思科技有限公司 | 上海微赢信息科技有限公司 | ||
| 湖北省教育行业代理 | 武汉飞鸟云科技有限公司 | 湖南教育行业代理 | 湖南启云信息科技有限公司 |
| 武汉市兴鑫高科技发展有限公司 | 湖南神州宜达信息技术有限公司 | ||
| 武汉伟福赛思电子有限公司 | 湖南紫薇垣信息系统有限公司 | ||
| 武汉未来空间科技有限公司 | 长沙众元网络有限公司 | ||
| 武汉云中点信息科技有限公司 | 山西教育行业代理 | 太原太工天宇教育科技有限公司(总代理) | |
| 江苏省教育行业代理 | 南京八星网络科技有限公司 | 辽宁教育行业代理 | 辽宁新淞信息技术有限公司(总代理) |
| 南京翼马数控机床有限公司 | 沈阳稀有金属研究所 | ||
| 无锡微迪艾科技有限公司 | 沈阳中港石化有限公司 | ||
| 江西省教育行业代理 | 江西臻宸科技有限公司 | 浙江教育行业代理 | 杭州帆若信息科技有限公司 |
| 南昌鼎秀信息技术有限公司 | 浙江掌尊信息科技有限公司(总代理) | ||
| 陕西省教育行业代理 | 陕西精测电子仪器有限公司(总代理) | 上海教育行业代理 | 上海秉渡教育科技有限公司 |
| 陕西朗益通科技有限公司 | 上海玖数软件有限公司 | ||
| 西安普飞特科技有限公司 | 尊虞教育科技（上海）有限公司 | ||
| 山东省教育行业代理 | 山东利扬大数据科技有限公司 | 重庆教育行业代理 | 重庆八城科技有限公司(总代理) |
| 山东今领教育科技有限公司(总代理) | 重庆闪易科技有限公司 | ||
| 济南舜意望特管理咨询有限公司 | 重庆卓合科技有限公司经理 | ||
| 青岛华星科电子设备有限公司 | 四川教育行业代理 | 成都优越教育咨询有限公司(总代理) | |
| 北京美国英语语言学院 | 云南省教育行业代理 | 云南磐恩科技有限公司 |
公安行业代理
| 区域/行业 | 代理商 | 联系人 | 手机号 | 邮 箱 |
| 山东省公安行业代理 | 山东闻远通信技术有限公司 | 戴宇 | 18761674128 | [email protected] |
| 山东尊启信息技术有限公司 | 张为晓 | 13954141334 | [email protected] | |
| 山东融御中安信息安全有限公司 | 赵慧奇 | 18660862096 | [email protected] | |
| 海南省公安行业 | 海南怡盟电子科技有限公司(总代理) | 熊桂霞 | 15298946071 | [email protected] |
| 海南阿福企业策划有限公司 | 黄振福 | 18789630559 | [email protected] | |
| 浙江省公安行业代理 | 杭州联洲科技有限公司 | 史慧平 | 18968188988 | [email protected] |
| 杭州宁杭信息技术有限公司 | 许其元 | 13738038938 | [email protected] | |
| 福建省公安行业代理 | 杭州宁杭信息技术有限公司 | 许其元 | 13738038938 | [email protected] |
| 贵州省公安行业总代理 | 北京云教互动科技有限公司贵州分公司 | 穆俊玲 | 17311090120 | |
| 江苏省公安行业代理 | 徐州麒麟物联网科技有限公司 | 迟明秋 | 15862186070 | [email protected] |
| 陕西省公安行业总代理 | 陕西乐享电子科技股份有限公司 | 张化斌 | 13909215859 | [email protected] | 安徽省公安行业总代理 | 南京点道数据科技有限公司 | 李天宇 | 15951823701 | [email protected] |
| 河北省公安行业代理 | 河北惠美电子科技有限公司 | 张慧 | 15283231728 | [email protected] |
| 重庆市公安行业代理 | 重庆贵飞科技有限公司 | 秦龙 | 18623001736 | [email protected] |
| 河南省公安行业代理 | 河南翰林网络技术开发有限公司 | 张磊 | 15617216616 | [email protected] |
| 四川省公安行业总代理 | 成都国策正义文化传媒中心 | 李斌 | 18620323772 | [email protected] |
| 山西省公安行业代理 | 中泰鼎晟（北京）科技有限公司 | 田泽雨 | 13835177588 | [email protected] |
| 内蒙古公安行业代理 | 中泰鼎晟（北京）科技有限公司 | 田泽雨 | 13835177588 | [email protected] |
诚征全国代理 总机:400-8855-360
负责人 |
分 机 |
手机号 |
邮 箱 |
腾讯QQ |
杨 剑 |
8030 |
18751869256 |
|
