《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe) [英] Databricks: How to switch from R Dataframe to Pandas Dataframe (R to python in the same notebook)
本文介绍了《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
推荐答案
我认为在数据库中不同内核之间的命名空间是分开的。因此,即使在同一个笔记本中,您也不会在Python中看到R变量,反之亦然。
我的理解是,有两种方法可以在内核之间共享数据:1)使用文件系统(CSV等)和2)临时数据库表。我认为后者是更典型的路线[1]。
- 文件系统:
%r
write.csv(df, "/FileStore/tmp.csv")
%python
import pandas as pd
df = pd.read_csv("/FileStore/tmp.csv")
- 临时数据库表:
%r
library(SparkR)
sparkR.session()
df <- read.df("path/to/original_file.csv", source="csv")
registerTempTable(df, "tmp_df")
%python
df = spark.sql("select * from tmp_df").toPandas()
这篇关于《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!
查看全文