《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe) [英] Databricks: How to switch from R Dataframe to Pandas Dataframe (R to python in the same notebook)

查看:24
本文介绍了《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe)的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我正在数据库笔记本中编写R代码,该笔记本在R中执行几个操作。一旦清理了数据帧,我想使用‘%python’在一个python单元中调用它,从而使用python代码继续对该数据帧进行操作。

因此,我想在python块中将R Dataframe转换为Pandas DataFrame。有人知道怎么做吗?谢谢!

推荐答案

我认为在数据库中不同内核之间的命名空间是分开的。因此,即使在同一个笔记本中,您也不会在Python中看到R变量,反之亦然。

我的理解是,有两种方法可以在内核之间共享数据:1)使用文件系统(CSV等)和2)临时数据库表。我认为后者是更典型的路线[1]。

  1. 文件系统:
%r
write.csv(df, "/FileStore/tmp.csv")
%python
import pandas as pd
df = pd.read_csv("/FileStore/tmp.csv")
  1. 临时数据库表:
%r
library(SparkR)
sparkR.session()
df <- read.df("path/to/original_file.csv", source="csv")
registerTempTable(df, "tmp_df")
%python
df = spark.sql("select * from tmp_df").toPandas()

[1]https://forums.databricks.com/questions/16039/use-python-and-r-variable-in-the-same-notebook-amo.html

这篇关于《数据库:如何从R Dataframe切换到Pandas Dataframe》(R到Pandas Dataframe)的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆