Skip to main content
 首页 » 编程设计

python之用字典值替换大型 numpy 张量中的条目

2025年05月04日8shihaiming

我有一个巨大的 numpy 张量和一个巨大的字典,将张量中的条目(假设它们是键)替换为字典中具有相应值的条目的最快方法是什么。

例如我有成千上万的条目,例如:

np.asarray([[[1,2,3],[4,5,6],[7,8,9],[2,4,5,]], 
             [[2,3,4],[7,8,9],[10,11,23],[6,3,1]], 
             [[4,55,6],[90,8,2],[1,2,3],[0,94,1]], 
             [[6,7,8],[3,4,5],[6,7,8],[9,8,2]], 
             [[9,8,8],[4,5,6],[34,55,6],[3,52,2]] 
             ................................... 
             ...................................] 
 
dictionary = {4:6,5:67,8:99,.........} #million entries in dictionary 

请您参考如下方法:

不确定这是否是最快的方法,但现在开始:

In [33]: arr = np.asarray([[[1,2,3],[4,5,6],[7,8,9],[2,4,5,]], 
    ...:              [[2,3,4],[7,8,9],[10,11,23],[6,3,1]], 
    ...:              [[4,55,6],[90,8,2],[1,2,3],[0,94,1]], 
    ...:              [[6,7,8],[3,4,5],[6,7,8],[9,8,2]], 
    ...:              [[9,8,8],[4,5,6],[34,55,6],[3,52,2]]]) 
 
In [34]: dct = {int(random.random()*100): int(random.random()*100) for _ in xrange(100)} 
 
In [35]: arr.ravel()[:] = np.fromiter((dct.get(x, x) for x in arr.ravel()), dtype=arr.dtype) 
 
In [36]: arr 
Out[36]:  
array([[[18, 94, 53], 
        [71, 73,  6], 
        [35,  7,  9], 
        [94, 71, 73]], 
 
       [[94, 53, 71], 
        [35,  7,  9], 
        [10, 42, 15], 
        [ 6, 53, 18]], 
 
       [[71, 50,  6], 
        [90,  7, 94], 
        [18, 94, 53], 
        [ 0, 94, 18]], 
 
       [[ 6, 35,  7], 
        [53, 71, 73], 
        [ 6, 35,  7], 
        [ 9,  7, 94]], 
 
       [[ 9,  7,  7], 
        [71, 73,  6], 
        [99, 50,  6], 
        [53, 52, 94]]])