Spark java.io.IOException:在作业中未指定输入路径 [英] Spark java.io.IOException: No input paths specified in job

问题描述

我遇到以下错误:

java.io.IOException: No input paths specified in job

当我执行以下行时:

val df = sqlContext.read.json("file://home/test.json")

有什么想法吗?

推荐答案

如果要从本地加载数据，请使用

If you want to load data from local please use

sqlContext.read.json("file:///home/shankar/test.json")

或者只是

sqlContext.read.json("/home/shankar/test.json")

将起作用

如果要从HDFS加载文件，请使用

If you want to load the file from HDFS use

sqlContext.read.json("hdfs:///user/shankar/test.json")

希望这会有所帮助！

这篇关于Spark java.io.IOException:在作业中未指定输入路径的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！