我有以下代码:
r = numpy.zeros(shape = (width, height, 9))
它创建一个width x height x 9
填充零的矩阵。相反,我想知道是否有一种函数或方法可以将它们初始化为NaN
s,而方法很简单。
我有以下代码:
r = numpy.zeros(shape = (width, height, 9))
它创建一个width x height x 9
填充零的矩阵。相反,我想知道是否有一种函数或方法可以将它们初始化为NaN
s,而方法很简单。
Answers:
您很少需要在numpy中进行矢量操作循环。您可以创建一个未初始化的数组并立即分配给所有条目:
>>> a = numpy.empty((3,3,))
>>> a[:] = numpy.nan
>>> a
array([[ NaN, NaN, NaN],
[ NaN, NaN, NaN],
[ NaN, NaN, NaN]])
我已经在a[:] = numpy.nan
这里和a.fill(numpy.nan)
Blaenk发布的时间安排了时间:
$ python -mtimeit "import numpy as np; a = np.empty((100,100));" "a.fill(np.nan)"
10000 loops, best of 3: 54.3 usec per loop
$ python -mtimeit "import numpy as np; a = np.empty((100,100));" "a[:] = np.nan"
10000 loops, best of 3: 88.8 usec per loop
时序显示优先选择ndarray.fill(..)
更快的替代方法。OTOH,我喜欢numpy的便捷实现,在该实现中您可以同时为整个slice分配值,代码的意图非常明确。
请注意,ndarray.fill
它是就地执行其操作,因此numpy.empty((3,3,)).fill(numpy.nan)
将改为return None
。
a = numpy.empty((3, 3,)) * numpy.nan
。它的时间比fill
分配方法快但慢,但它是一个单行!
.fill()
方法,但是随着数组变大,速度的差异几乎没有减少。
np.empty([2, 5])
创建了一个数组,然后fill()
就地修改了该数组,但没有返回副本或引用。如果要np.empty(2, 5)
使用名称进行调用(“将变量分配给变量”),则必须先进行调用,然后才能对其进行就地操作。如果这样做,也会发生同样的事情[1, 2, 3].insert(1, 4)
。创建了列表并插入了4,但是不可能获得对该列表的引用(因此可以假定它已被垃圾回收)。对于诸如字符串之类的不可变数据,将返回一个副本,因为您无法就地操作。熊猫都可以做到。
另一个选择是使用numpy.full
,NumPy 1.8+中可用的一个选项
a = np.full([height, width, 9], np.nan)
这非常灵活,您可以用任何其他所需的数字填充它。
full
意思。 np.empy((x,y))*np.nan
是一个不错的亚军(并且与numpy的旧版本兼容)。
fill
python -mtimeit "import numpy as np; a = np.empty((100,100));" "a.fill(np.nan)" 100000 loops, best of 3: 13.3 usec per loop python -mtimeit "import numpy as np; a = np.full((100,100), np.nan);" 100000 loops, best of 3: 18.5 usec per loop
python -mtimeit "import numpy as np; a = np.empty((1000,1000)); a.fill(np.nan)" 1000 loops, best of 3: 381 usec per loop $ python -mtimeit "import numpy as np; a = np.full((1000,1000), np.nan);" 1000 loops, best of 3: 383 usec per loop
我比较了建议的速度替代方案,发现对于足够大的向量/矩阵填充,除val * ones
和以外的所有替代方案array(n * [val])
都同样快。
复制剧情的代码:
import numpy
import perfplot
val = 42.0
def fill(n):
a = numpy.empty(n)
a.fill(val)
return a
def colon(n):
a = numpy.empty(n)
a[:] = val
return a
def full(n):
return numpy.full(n, val)
def ones_times(n):
return val * numpy.ones(n)
def list(n):
return numpy.array(n * [val])
perfplot.show(
setup=lambda n: n,
kernels=[fill, colon, full, ones_times, list],
n_range=[2 ** k for k in range(20)],
logx=True,
logy=True,
xlabel="len(a)",
)
numpy.full(n, val)
是,a = numpy.empty(n) .. a.fill(val)
它比内部慢,因为它在内部做同样的事情
你熟悉numpy.nan
吗?
您可以创建自己的方法,例如:
def nans(shape, dtype=float):
a = numpy.empty(shape, dtype)
a.fill(numpy.nan)
return a
然后
nans([3,4])
将输出
array([[ NaN, NaN, NaN, NaN],
[ NaN, NaN, NaN, NaN],
[ NaN, NaN, NaN, NaN]])
我在邮件列表线程中找到了此代码。
如果您不立即调用.empty
或.full
方法,则始终可以使用乘法:
>>> np.nan * np.ones(shape=(3,2))
array([[ nan, nan],
[ nan, nan],
[ nan, nan]])
当然,它也可以与其他任何数值一起使用:
>>> 42 * np.ones(shape=(3,2))
array([[ 42, 42],
[ 42, 42],
[ 42, 42]])
但是@ u0b34a0f6ae 可接受的答案快了3倍(CPU周期,而不是记住numpy语法的大脑周期;):
$ python -mtimeit "import numpy as np; X = np.empty((100,100));" "X[:] = np.nan;"
100000 loops, best of 3: 8.9 usec per loop
(predict)laneh@predict:~/src/predict/predict/webapp$ master
$ python -mtimeit "import numpy as np; X = np.ones((100,100));" "X *= np.nan;"
10000 loops, best of 3: 24.9 usec per loop
另一种选择是numpy.broadcast_to(val,n)
,无论大小如何,它都将在恒定时间内返回,并且也是最有效的内存使用方法(它返回重复元素的视图)。需要注意的是,返回值是只读的。
以下是使用与NicoSchlömer的答案相同的基准所建议的所有其他方法的性能的比较。
如前所述,numpy.empty()是必经之路。但是,对于对象,fill()可能并不能完全按照您的想象:
In[36]: a = numpy.empty(5,dtype=object)
In[37]: a.fill([])
In[38]: a
Out[38]: array([[], [], [], [], []], dtype=object)
In[39]: a[0].append(4)
In[40]: a
Out[40]: array([[4], [4], [4], [4], [4]], dtype=object)
一种解决方法可以是例如:
In[41]: a = numpy.empty(5,dtype=object)
In[42]: a[:]= [ [] for x in range(5)]
In[43]: a[0].append(4)
In[44]: a
Out[44]: array([[4], [], [], [], []], dtype=object)
np.nan
在转换为int时出错。