阿帕奇气流在Qubole

Apache气流 是一个开源工具,以编程方式编写、安排和监控数据工作流吗. 通过使用“气流”,用户可以将工作流编写为任务的有向无环图(dag). DAG是完成一个管道所需的任务集,该管道被组织起来,以反映它们的关系和相互依赖关系. Qubole将Apache气流作为托管服务提供,该服务易于管理,可扩展,可满足您的数据工程需求.


Apache的气流

简化数据工程管线编制

阿帕奇在Qubole上的气流提高了性能, 降低成本, 改善用户体验, 并能顺利管理气流簇. 在Qubole上使用阿帕奇气流, 数据工程师可以在几秒钟内设置气流簇, 使用单一面板跟踪使用情况, 管理集群和acl, 轻松编辑dag和插件,并利用集成的“Goto QDS”按钮,Qubole操作员无缝导航到相应的Qubole命令页面.

阿帕奇气流在Qubole上的三个主要好处

敏捷性和灵活性

减少管理气流资源的复杂性,同时允许您细粒度控制集群类型和大小, 数量的执行人, 气流版本, 安全性和RBAC策略

综合监控和警报

通过集成监控服务,监控并自动启动所有相关的气流服务,降低停机时间,提高业务连续性. Prometheus与grafana用于更好地监控资源和向终端(如电子邮件)发出警报, 松弛, 和通知等.

可在多个云上使用

未来证明你的解决方案与气流在Qubole. 它与云无关,通常可在AWS、Azure和谷歌云平台上使用.

Qubole的气流对阿帕奇气流

 

易用性 & debuggability

气流在QuboleApache气流
版本控制
轻松部署与dag explorer的dag
从云存储自动同步延迟
Git集成
自动的日志备份和清理
水蟒虚拟环境中的气流

监控

气流在QuboleApache气流
集成Graffana & 普罗米修斯基于警报和监控
提高可用性的集成监控服务
监控仪表板以更好地显示服务运行状况
监控(Ganglia、DataDog等)

安全

气流在QuboleApache气流
气流集群的集成RBAC
使用SAML 2进行SSO.0支持
数据加密(静态和动态)
审计最终用户活动日志
HIPAA, SOC2 Type2, ISO-27001兼容环境

支持和服务

气流在QuboleApache气流
权威推荐全球最大网赌正规平台的气流专家提供全天候的支持
支持多个版本的气流
友情链接: 1 2 3 4 5 6 7 8 9 10