我看到一封电子邮件,表明在IBM Cloud中支持1.6 apache spark的日落。我很确定我的版本是2.x,但我想确认一下。我在UI中找不到任何指示版本的地方,而我认为会显示它的bx cli命令没有。
[chrisr@oc5287453221 ~]$ bx service show "Apache Spark-bc"
Invoking 'cf service Apache Spark-bc'...
Service instance: Apache Spark-bc
Service: spark
Bound apps:
Tags:
Plan: ibm.SparkService.PayGoPersonal
Description: IBM Analytics for Apache Spark for IBM Cloud.
Documentation url: https://www.ng.bluemix.net/docs/services/AnalyticsforApacheSpark/index.html
Dashboard: https://spark-dashboard.ng.bluemix.net/dashboard
Last Operation
Status: create succeeded
Message:
Started: 2018-01-22T16:08:46Z
Updated: 2018-01-22T16:08:46Z
如何确定我使用的火花版本?此外,我尝试从上面转到“仪表板”URL,登录后收到“内部服务器错误”消息。
在How to check the Spark version上找到的信息似乎没有帮助,因为它似乎与本地安装的spark实例有关。我需要使用UI或bluemix CLI从IBM Cloud(即Bluemix)中找到信息。其他可能性是从运行在Data Science Experience(IBM Cloud的一部分)中的iPython中的Jupyter Notebook运行一些命令。
上面的ptitzler给出了答案,只是根据我发送的电子邮件的要求添加了答案。
Spark服务本身不是特定于版本的。要确定您是否需要迁移,您需要检查使用该服务的应用程序/工具。例如,如果您在DSX中创建了笔记本,则将它们与绑定到特定Spark版本的内核相关联,并且您需要打开每个笔记本以找出它们正在使用的Spark版本。 - ptitzler 1月31日16:32