The init script works fine in databricks notebook but fails when attached to cluster(初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败)
本文介绍了初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我希望将init脚本(它具有所有库依赖项)与Databricks中的交互式集群相关联。初始化脚本看起来像下面的附件,在Databricks笔记本中运行得很好。 我希望这个外壳脚本在集群启动时运行,但当我将其配置为集群的init脚本时,它返回一个错误。下面是我将init脚本附加到我的集群的方式, 错误如下所示, 我发现url正在讨论相同的问题,但这里提供的解决方案(将文件扩展名从.sh更改为.bash)对我不起作用。请帮助我解决此问题。
推荐答案
请务必删除多余的(
")才能成功安装初始化脚本。
根据我的复制:我使用了与上面相同的代码。
结果:集群终止原因:初始化脚本失败
删除多余引号后(")。
结果:Init_Script已成功安装。
这篇关于初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
编程基础网
本文标题为:初始化脚本在Databricks笔记本中运行良好,但在连接到群集时失败
基础教程推荐
猜你喜欢
- 用 Python 编写 Fortran 无格式文件 2022-01-01
- 在 Celery 工作人员中捕获 Heroku SIGTERM 以优雅地关 2022-01-01
- 将 x 轴刻度更改为自定义字符串 2022-01-01
- numpy float:比算术运算中内置的慢 10 倍? 2022-01-01
- Discord.py 缺少必需的参数 2022-01-01
- 尝试制作WhatsApp机器人 2022-01-01
- pyserial - 可以从线程 a 写入串行端口,是否阻塞从线程 b 读取? 2022-01-01
- 与常规 dict 相比,Python manager.dict() 非常慢 2022-01-01
- 使用生成器和迭代器时 Python 多循环失败 2022-01-01
- 由Python将MP3转换为MIDI(类型错误:无法加载插件:mtg-Melodia:Melodia) 2022-01-01
