北京科杰科技有限公司专利技术

北京科杰科技有限公司共有146项专利

  • 本发明公开了一种基于大数据kudu分区监控和监控慢sql的方法,对大量以及分类众多的数据进行集群分类物理分区划分,更直观展示对各个分区系统中存在的数据状态问题、存储量、分区数等,同时对系统中存在的慢sql能直观地查看,应用字典表可动态配...
  • 本发明公开了一种针对大规模Hadoop集群资源调度管理办法,通过设置一个全局控制各个RM的路由器,可获取并根据各个集群的状态信息来选择目标的子集群,实现集群资源的调度和管理,从而既可以方便各个子集群的管理,又可以提高资源的利用率。提高资...
  • 本发明公开了一种异构大数据管理平台任务迁移方法,将开发环境的元数据信息导出,通过配置的算法将开发环境的数据导入到生产环境中,然后处理生产环境哪些数据需要覆盖,哪些数据保持不变,实现在自动进行任务迁移的同时,不会出现任务反复的问题。不会出...
  • 本发明公开了一种基于可配置参数的大数据SQL程序设计方法,具体过程为:S1、在参数管理中创建参数,根据参数类型来进行配置参数对应的参数值内容;S2、SQL开发时,在系统开发平台填写SQL语句,支持HIVE、SPARKSQL、IMPALA...
  • 本发明公开了一种数据实时同步场景下的数据准确性检测预警系统及方法,能够支持同构和异构数据源等任意数据源之间的数据交互和数据同步,支持关系型数据库、非关系型数据库、大数据平台、文件系统,用于企业的多源数据融合。本发明能够通过数据源模块、单...
  • 本发明公开了一种基于flink实现的数据开发平台预警系统,通过消息队列接收转发业务处理时的时序数据,使用flink实时计算引擎对接收到的数据进行实时处理分析,同时对不同的业务划分不同的数据敏感度等级,对不同的敏感度等级的数据进行不同数据...
首页 1 2 3 4 5 6 7 8