远程运行 python 脚本和 jupyter notebooks

问题描述 投票:0回答:0

最近,我写了一些python脚本用于网络抓取大数据,然后在jupyter笔记本上做一些分析。我很快意识到其中一些任务需要很长时间才能执行,我想到在远程服务器上运行这些任务并稍后检索结果。

我已经找到了一些关于 Google Cloud、Heroku 或 AWS 的信息,但我真的不知道哪些服务适合我的问题。我考虑了一些连接我的 jupyter 笔记本的远程实例,但我也想运行一些“正常”的 python 脚本。我只是在寻找合适的服务,让我有机会远程运行我的脚本,而无需一直连接,稍后检索一些结果或在两者之间进行一些监控以检查我的任务进度。

有人可以给我推荐吗?我还考虑过为我的家买一个 Raspberry Pi,以便在我自己的远程主机上运行这些任务,所以如果有人知道我可以在那里使用什么?

我已经尝试对 Google Cloud、Heroku 等产品页面进行一些研究,但我只是不知道哪些产品适合我的需求。我希望我可以得到一个远程实例来运行我的笔记本,或者我可以推送到 github 并且远程服务开始运行。

heroku jupyter-notebook remote-server google-cloud-tasks
© www.soinside.com 2019 - 2024. All rights reserved.