我使用Livy REST API提交Spark应用。
{
“file”: <application-jar>,
“className”: “<main-class>”,
“args”: my_args,
“conf”: my_conf
}
my_args = [args1, args2, ...]
my_conf = {'foo1': 'bar1', 'foo2': 'bar2'...}
我希望my_conf(json机密)存储在AWS SSM参数存储中,并在我使用Livy的python脚本提交spark应用时从参数存储中使用它。如何存储和从参数存储中获取(从python中获取相同的json)my_conf?