初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败 [英] The init script works fine in databricks notebook but fails when attached to cluster

查看:36
本文介绍了初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我希望将init脚本(它具有所有库依赖项)与Databricks中的交互式集群相关联。初始化脚本看起来像下面的附件,在Databricks笔记本中运行得很好。

我希望这个外壳脚本在集群启动时运行,但当我将其配置为集群的init脚本时,它返回一个错误。下面是我将init脚本附加到我的集群的方式,

错误如下所示,

我发现url正在讨论相同的问题,但这里提供的解决方案(将文件扩展名从.sh更改为.bash)对我不起作用。请帮助我解决此问题。

推荐答案

请务必删除多余的(")才能成功安装初始化脚本。

根据我的复制:我使用了与上面相同的代码。

结果:集群终止原因:初始化脚本失败

删除多余引号后(")。

结果:Init_Script已成功安装。

这篇关于初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆