/aliyun-spark-deploy-tool

Spark on ECS

Primary LanguagePythonArtistic License 2.0Artistic-2.0

Spark on ECS

介绍

  1. 脚本使用指南
  2. SSH隧道配置

特性


  1. 快速搭建基于ECS的Spark集群
    通过脚本一键式快速搭建高效、稳定的Spark集群运行环境,并可以通过命令行快捷、简单的管理集群的生命周期
  2. Spark工具支持
    运行环境集成Spark-notebook、Hue等,并开放原生的Spark UI,可以方便快捷的通过图形界面运行、调试代码和监控作业
  3. 安全
    所有Web页面的访问均采用SSH隧道技术,可以在非安全环境下使用端口转发来加密Web页面的访问,保护个人隐私以及重要商业信息
  4. 开放
    所有软件均使用社区开源版本,代码开放透明、文档丰富