您好,欢迎访问山丽信息!

大数据组件

加载失败

可视化开发平台

  1. 可以以可视化的方式接入所有类SQL开发;
  2. 可视化页面可以显示各种不同的引擎、语言,可以选择编译的方式;
  3. 系统开发框架植入了统计程序运行的本身的信息(需要的CPU、内存、容器、MAP和REDUC数等);
  4. 程序每次跑会根据系统情况智能优化,调度解决跑不跑的问题,程序本身解决跑的好不好的问题。

加载失败

数据资产系统

  1. 一切皆资产的思想,可以实时显示当前系统的所有数据运行情况,程序运行情况;
  2. 可以显示大数据仓库的模型,数据仓库的分层、数据仓库的表、数据情况;
  3. 可以实时显示当前调度的运行情况。

加载失败

监控系统平台

  1. 监控集群的所有CPU、内存、网络、容器、CPU核、MAP核REDUCE数目等等;
  2. 程序本身会采集自己需要的CPU、内存、网络、容器、CPU核、MAP和REDUCE数目;
  3. 监控信息会实时影响调度系统,并根据预先设置规则发送告警信息。

加载失败

可视化采集平台

  1. 对离线和实时都采用统一的可视化解密拖拉实现原有复杂的配置

加载失败

数据质量平台

  1. 对调度的任务运行情况进行评估;
  2. 对运行的数据和指标进行评估。

加载失败

分布式调度平台

  1. 具有最丰富的调度程序类型:可支持所有数据库存储过程、大数据HIVE、IMPALA、SPAPK-SQL等类SQL程序,也支持各种JAR、SHELL和执行文件,也能支持各种ETL工具开发的程序等;
  2. 具有时间、事件、消息等触发机制。
  3. 调度会主动采集程序的运行情况,并做出任务降级、解耦、熔断、故障转移、延后等的智能处理调度依赖可以跨集群、跨程序类型。

加载失败

指标管理系统

  1. 能以图形化方式显示任何一个指标的数据来源,计算方式、版本历史修改情况,显示血缘图谱,达到任何指标口径都可追溯的目的。

加载失败