数据处理服务 (Sahara) 规范¶
按发布版本实现的规范
- Rocky 规范
- Queens 规范
- Pike 规范
- Ocata 规范
- Newton 规范
- Mitaka 规范
- 为 Sahara 添加暂停和恢复 EDP 作业的能力
- 允许在受保护的资源上设置 ‘is_public’
- 将 CDH 5.5 支持添加到 Sahara
- CDH 插件的代码重构
- 实现 Sahara 集群验证检查
- 移除 MapR 插件中不受支持的版本
- 支持分布式周期性任务
- 使用 castellan 改进密钥存储
- 将场景测试移动到单独的仓库
- 为 Sahara 添加循环 EDP 作业
- 减少仪表板面板数量
- 移除 Direct Engine
- 移除插件 Vanilla V2.6.0
- 修改模板中 ‘is_default’ 行为相对于 ‘is_protected’ 的行为
- 为 Sahara 添加调度 EDP 作业的能力
- SPI 方法用于验证镜像
- Liberty 规范
- 将自定义场景添加到场景测试
- 将集群/实例/job_execution ID 添加到日志消息
- 允许同时创建多个集群
- Sahara API 中支持对象更新
- 重试所有 OpenStack 客户端调用
- 使用信任机制进行集群创建和扩展
- 废弃 Direct Engine
- 在配置插件中移除 Hadoop v1 支持
- [EDP] 添加 Spark Shell Action 作业类型
- 允许在数据源 URL 中使用占位符
- [EDP] 允许编辑数据源对象
- [EDP] 允许编辑 Job Binary
- CDH HDFS HA 支持
- CDH YARN ResourceManager HA 支持
- 添加对 HDP 2.2 插件的支持
- 迁移到 HEAT HOT 语言
- 为 Heat 分解集群模板
- 更新身份验证以使用 keystone 会话
- Manila 作为运行时数据源
- 将 Manila 添加为 Binary Store
- 用于将 Manila Shares 挂载和卸载到 Sahara 集群的 API
- 提供自动配置最重要的配置项的能力
- Heat WaitConditions 支持
- 使用模板进行场景测试配置
- 支持共享和受保护的资源
- 在 Cloudera 集群 5.3.0 上运行 Spark 作业
- Storm EDP
- Storm 扩展
- 支持集群实例的 NTP 服务
- 统一的 Map 用于定义 Job 接口
- 升级 sahara edp oozie 引擎的 oozie Web Service API 版本
- Kilo 规范
- 将 CM API 库添加到 Sahara
- 将更多服务添加到 CDH 插件
- 在集成测试中添加服务检查测试
- 为某些事情添加无限轮询超时
- 授权策略支持
- CDH HBase 支持
- Cloudera 插件中更好的版本管理
- CDH Zookeeper 支持
- 为每个插件提供默认模板
- 移除 Vanilla 插件中对 Hadoop 2.3.0 的支持
- 在集群启动时在 hdfs 中添加通用的 HBase 库
- [EDP] 添加 Oozie Shell Action 作业类型
- EDP API 的 JSON 示例文件
- [EDP] 在 job_configs 中添加支持 DataSource 标识符的选项
- 启用带有 vanilla 插件的 Swift resident Hive 表的 EDP
- [EDP] 改进 Java 类型兼容性
- [EDP] 添加一个新的 job-types 端点
- 启用 Spark 作业访问 Swift URL
- 集群最近日志事件的存储
- 异常改进
- 使用 first_run 进行一键启动集群
- 启用 HDP 2.0.6 插件中的 HDFS NameNode 高可用性
- 间接访问虚拟机
- 带有 MapR 的 Sahara 插件
- 重构 MapR 插件代码
- 清理长时间处于非最终状态的集群
- 支持多 worker Sahara API 部署
- 新的日志记录风格
- sahara-api 的 HTTPS 支持
- Sahara 的场景集成测试
- 创建安全指南文档
- Spark 临时作业数据保留和清理
- 规范仓库 Backlog 重构
- Storm 集成
- 支持 Cinder API 版本 2
- 支持 Cinder 可用区
- 支持 Nova 可用区
- 规范 - 添加结果过滤支持
- 规范 - 添加模板编辑支持
- Cinder volume 实例局部性功能
- Juno 规范
未实现 Backlog 规范
其他组件
