我目前正在处理一个包含大量“INF”值的数据集,这些值会打乱我的计算。我试图删除这些值,但我一直无法找到使用二维数组执行此操作的方法。我的一些代码如下:
def date2str(date_str):
date = datetime.strptime(date_str, '%Y-%m-%d %H:%M:%S')
return date.toordinal()
def readfiles(file_list):
data = []
for fname in file_list:
data.append(
np.loadtxt(fname,
usecols=(0,18),
comments='#', # skip comment lines
delimiter='\t',
converters = { 0 : date2str },
dtype=None))
return data
data = readfiles(['soundTransit1_remote_rawMeasurements_15m.txt'])
print data
data = data[np.isfinite(data)]
np.set_printoptions(threshold='nan')
column_0 = np.array(data)[0][:,0]
column_1 = np.array(data)[0][:,1]
thermTemp1_degC = 1/(1.401E-3 + 2.377E-4*np.log(column_1) + 9.730E-8*np.log(column_1)**3)-273.15
我读入了两列(一列包含数据,另一列包含关联的日期和时间)并将它们分开,以便我可以操作数据(在代码的最后一行)。我需要能够跳过包含“INF”的数据行。我目前的解决方案 'data = data[np.isfinite(data)] 不起作用。我收到错误“TypeError:只有具有一个元素的整数数组才能转换为索引”。谁能给我一些指导?
请您参考如下方法:
你的函数 readfiles 返回一个 python 列表,而不是一个 numpy 数组。 Python 列表无法使用 numpy 的 bool 数组之一进行索引,这就是为什么 data[np.isfinite(data)] 出现错误的原因; data 是一个 python 列表,但是 np.isfinite(data) 是一个 bool 值的 numpy 数组。
或者从 readfiles 返回一个 numpy 数组,类似
return np.array(data)
或者在尝试使用 numpy 的 bool 索引之前将结果转换为数组:
data = np.array(data)
data = data[np.isfinite(data)]
您可能需要稍微调整列表以获得具有所需形状的数组。
