在一个dask数组的片上运行一个函数

问题描述 投票:0回答:1

我一直在试图弄清楚如何在dask数组的切片上执行函数。例如,如果我创建以下dask数组:

import numpy as np
import dask.array as da
x = da.random.normal(10, 0.1, size=(200, 4),chunks=(100, 100)) 

并定义功能:

#test function
def test(x,y,z=4):
    return x*y+z, z*y

执行

a,b = test(x[:,0],x[:,1])
a.compute()
b.compute()

按预期工作,但如果我尝试将这些结果分配回x,则函数将失败:

x[:,0],x[:,1] = test(x[:,0],x[:,1])

抛出NotImplementedError:不支持的项目分配有没有办法解决这个问题呢?谢谢,

python-3.x dask dask-delayed
1个回答
1
投票

对于Dask,变异不是正常的工作流程:您将需要创建输入和返回新值的函数,例如,

def test(x,y,z=4):
    return x*y+z, z*y

a, b = test(x[:, 0], x[:, 1])
out = da.hstack([a.reshape(200, 1), b.reshape(200, 1), 
                 x[:, 2].reshape(200, 1), x[:, 3].reshape(200, 1)])

(要么

out = da.vstack([a, b, x[:, 2], x[:, 3]]).T

)

© www.soinside.com 2019 - 2024. All rights reserved.