开源社区项目

权威推荐全球最大网赌正规平台致力于让开源数据引擎更容易被所有开发者使用. Qubole赞助了新的开源社区项目来改进这个实用程序, 性能, 以及管理成本和操作复杂性的整体经验. 

开源

Qubole Sparklens

Sparklens是一个开源框架,用于提高Spark应用程序的性能. Sparklens可以检查Spark应用程序,并推荐最佳配置, 例如要使用的执行程序或内核的数量.

开源

RubiX

RubiX 是一个轻量级的数据缓存框架,可以用于大数据引擎,如Hadoop. Rubix使用本地磁盘为大数据引擎提供最佳的I/O带宽. 在数据执行引擎与存储分离的共享存储架构中,Rubix非常有用. 例如, 在AWS或微软Azure等公共云平台上, 数据存储在云存储中,引擎通过网络访问数据. 类似的, 在数据中心, 转眼间运行在独立于HDFS的集群上,通过网络访问数据.

RubiX可以扩展为支持任何通过Hadoop文件系统接口通过插件访问数据的引擎. 有一些插件可以访问AWS S3、微软Azure Blob Store和HDFS上的数据. RubiX可以扩展到任何其他存储系统,包括其他云存储.

友情链接: 1 2 3 4 5 6 7 8 9 10