5

我有两个形状的ndarray:

A = (32,512,640)

B = (4,512)

我需要将 A 和 B 相乘以获得新的 ndarray:

C = (4,32,512,640)

另一种思考方式是,向量 B 的每一行沿 A 的轴 =-2 相乘,得到一个新的 1,32,512,640 立方体。B 的每一行可以循环形成 1,32,512,640 个立方体,然后可以使用np.concatenateor来构建 C np.vstack,例如:

# Sample inputs, where the dimensions aren't necessarily known
a = np.arange(32*512*465, dtype='f4').reshape((32,512,465))
b = np.ones((4,512), dtype='f4')

# Using a loop
d = []
for row in b:
    d.append(np.expand_dims(row[None,:,None]*a, axis=0))

# Or using list comprehension
d = [np.expand_dims(row[None,:,None]*a,axis=0) for row in b]

# Stacking the final list
result = np.vstack(d)

但是我想知道是否可以使用类似的东西np.einsumnp.tensordot将其全部矢量化在一行中。我还在学习如何使用这两种方法,所以我不确定这里是否合适。

谢谢!

4

1 回答 1

7

在扩展withbroadcasting的维度后,我们可以利用-BNone/np.newaxis

C = A * B[:,None,:,None]

einsum它将是 -

C = np.einsum('ijk,lj->lijk',A,B)

这里没有减少总和,所以einsum不会比那个更好explicit-broadcasting。但是因为,我们正在寻找 Pythonic 解决方案,一旦我们通过了它的字符串表示法,就可以使用它。

让我们安排一些时间来完成任务-

In [15]: m,n,r,p = 32,512,640,4
    ...: A = np.random.rand(m,n,r)
    ...: B = np.random.rand(p,n)

In [16]: %timeit A * B[:,None,:,None]
10 loops, best of 3: 80.9 ms per loop

In [17]: %timeit np.einsum('ijk,lj->lijk',A,B)
10 loops, best of 3: 109 ms per loop

# Original soln
In [18]: %%timeit
    ...: d = []
    ...: for row in B:
    ...:     d.append(np.expand_dims(row[None,:,None]*A, axis=0))
    ...: 
    ...: result = np.vstack(d)
10 loops, best of 3: 130 ms per loop

杠杆作用multi-core

我们可以利用的多核功能numexpr,这适用于arithmetic operationslarge data因此在这里获得一些性能提升。让我们花时间 -

In [42]: import numexpr as ne

In [43]: B4D = B[:,None,:,None] # this is virtually free

In [44]: %timeit ne.evaluate('A*B4D')
10 loops, best of 3: 64.6 ms per loop

在一行中作为 : ne.evaluate('A*B4D',{'A':A,'B4D' :B[:,None,:,None]})

Related post关于如何控制多核功能。

于 2018-06-08T16:44:39.630 回答