大数据综合分析统一编程平台

产品介绍:

随着行业应用的不断发展,大数据技术日趋成熟,大数据技术在众多领域得到了越来越广泛的应用。然而企业的数据量日渐庞大、相关文档繁多、底层平台也越来越丰富,各种各样的应用需求如数据管理、数据分析、资源协调等需要一个统一的平台来集中实现。 本

产品提供了一个基于大数据的综合分析统一编程平台,为用户提供独立的Python开发环境,具体功能分别包括:提供基于HDFS/HBase的数据存储和浏览、提供基于Impala/Hive的SQL的数据查询、提供并行化算子编程调用接口、提供大数据文档管理、提供用户权限管理的功能。

产品功能:
  • • 基于Web的集成化大数据开发环境:

    给用户提供一个基于Web的集成化开发环境,避免用户需要到底层手动配置不同系统或切换不同开发平台。

  • • 内置主流大数据平台支撑:

    内置了对Hadoop、Spark、HBase、Hive、Impala等各类大数据存储和计算的支撑,并且支持扩展对接新的组件。

  • • 与Python语言和Jupyter Notebook无缝融合:

    无缝融合基础了Python Jupyter开发编译平台,现有相关遗产项目或代码可以实现一键导入。

  • • 用户权限的统一管理与审计:

    通过集成化开发环境,可以对统一用户对大数据平台的使用权限进行统一的管理与资源使用情况审计。

产品优势:
  • ● 提供基于Web UI的易用开发平台,方便开发程序员使用

  • ● 提供大数据开发人员工作效率,减少反复在后端平台调配的时间投入

  • ● 提供集成主流大数据存储和计算平台,功能强大

  • ● 提供开发用户统一权限认证和审计功能,便于综合管理

产品示例图:

使用场景:

需要使用多个大数据分析组件,并且希望在统一集成化环境中进行开发的场景。主要用于大数据应用开发编程环境支撑。

应用案例:

华泰证券