如何访问Spark sql中的HIVE ACID表? [英] How to access the HIVE ACID table in Spark sql?

查看:611
本文介绍了如何访问Spark sql中的HIVE ACID表?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

如何在Spark sql中访问HIVE ACID表?

解决方案

我们已经研究并开源了一个数据源,该数据源将使用户能够使用Spark处理其Hive ACID事务表.

Github: https://github.com/qubole/spark-acid

它可以作为Spark软件包提供,其使用说明在Github页面上.当前,数据源仅支持从Hive ACID表读取,并且我们正在努力增加通过Spark写入这些表的功能.

欢迎反馈和建议!

How could you access the HIVE ACID table, in Spark sql?

解决方案

We have worked on and open sourced a datasource that will enable users to work on their Hive ACID Transactional tables using Spark.

Github: https://github.com/qubole/spark-acid

It is available as a Spark package and instructions to use it are on the Github page. Currently the datasource supports only reading from Hive ACID tables, and we are working on adding the ability to write into these tables via Spark as well.

Feedback and suggestions are welcome!

这篇关于如何访问Spark sql中的HIVE ACID表?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆