каков был бы самый быстрый способ объединить список массивов numpy в один массив, если известны длина списка и размер массивов, которые одинаковы для всех?
Я пробовал два подхода:
merged_array = array (list_of_arrays)
из Питонический способ создания массива numpy из списка массивов numpy и
vstack
A вы можете увидеть vstack
работает быстрее, но по некоторым причинам первый запуск занимает в три раза больше времени, чем второй. Я предполагаю, что это вызвано (отсутствующим) предварительным распределением . Итак, как мне предварительно выделить массив для vstack
? Или вы знаете более быстрый метод?
Спасибо!
[ОБНОВЛЕНИЕ]
Я хочу (25280, 320)
не (80, 320, 320)
, что означает, merged_array = array (list_of_arrays )
у меня работать не будет. Спасибо, Джорис за указание на это !!!
Вывод:
0.547468900681 s merged_array = array(first_list_of_arrays)
0.547191858292 s merged_array = array(second_list_of_arrays)
0.656183958054 s vstack first
0.236850976944 s vstack second
Код:
import numpy
import time
width = 320
height = 320
n_matrices=80
secondmatrices = list()
for i in range(n_matrices):
temp = numpy.random.rand(height, width).astype(numpy.float32)
secondmatrices.append(numpy.round(temp*9))
firstmatrices = list()
for i in range(n_matrices):
temp = numpy.random.rand(height, width).astype(numpy.float32)
firstmatrices.append(numpy.round(temp*9))
t1 = time.time()
first1=numpy.array(firstmatrices)
print time.time() - t1, "s merged_array = array(first_list_of_arrays)"
t1 = time.time()
second1=numpy.array(secondmatrices)
print time.time() - t1, "s merged_array = array(second_list_of_arrays)"
t1 = time.time()
first2 = firstmatrices.pop()
for i in range(len(firstmatrices)):
first2 = numpy.vstack((firstmatrices.pop(),first2))
print time.time() - t1, "s vstack first"
t1 = time.time()
second2 = secondmatrices.pop()
for i in range(len(secondmatrices)):
second2 = numpy.vstack((secondmatrices.pop(),second2))
print time.time() - t1, "s vstack second"