Ошибка Numpy savetxt

Ниже приведен код, с которым я борюсь как новичок:

commonfields = arcpy.ListFields(gt_pnts)
names = [f.name for f in commonfields]
needed_names = names[3:]

gt_pnts_arr = arcpy.da.FeatureClassToNumPyArray(gt_pnts, needed_names)
gt_pnts_arr = gt_pnts_arr.reshape((gt_pnts_arr.shape[0],1))
eq_smpled_pnts_arr = arcpy.da.FeatureClassToNumPyArray(eq_smpled_pnts, needed_names)
eq_smpled_pnts_arr = eq_smpled_pnts_arr.reshape((eq_smpled_pnts_arr.shape[0],1))
master_table = np.concatenate((gt_pnts_arr, eq_smpled_pnts_arr), axis=0)
np.savetxt(outputcsvfilename,master_table, fmt="%.1f")

Ошибка, как показано ниже:

TypeError: требуется аргумент с плавающей запятой, а не numpy.void

Я искал и обнаружил, что это исключение возникает, когда тип данных не определен. Но когда я проверяю, как показано ниже, я стою перед дилеммой:

>>>master_table.dtype.descr
>>>[('grid_code', '<i4'), ('b1_Clip_ProximityRaster1', '<f4'), ('b2_Clip_ProximityRaster1', '<f4'), ('b3_Clip_ProximityRaster1', '<f4'), ('b4_Clip_ProximityRaster1', '<f4'), ('b5_Clip_ProximityRaster1', '<f4'), ('b6_Clip_ProximityRaster1', '<f4'), ('b7_Clip_ProximityRaster1', '<f4'), ('b8_Clip_ProximityRaster1', '<f4'), ('b9_Clip_ProximityRaster1', '<f4'), ('b10_Clip_ProximityRaster1', '<f4'), ('b11_Clip_ProximityRaster1', '<f4'), ('b12_Clip_ProximityRaster1', '<f4'), ('b13_Clip_ProximityRaster1', '<f4'), ('resp', '<U2')]
>>>master_table
array([[ (13, 13.0, 3810.0, 3810.0, 1982.952392578125, 3873.71923828125, 34869.9140625, 5483.3564453125, 7272.138671875, 4409.591796875, 872.0665283203125, 36238.62109375, 4441.62109375, 6775.2861328125, u'1')],
       [ (1, 1.0, 3601.99951171875, 3603.12353515625, 1626.9295654296875, 3725.922607421875, 34595.9453125, 5810.5595703125, 7592.90478515625, 4476.0361328125, 576.2811889648438, 36462.984375, 4499.0, 7164.47509765625, u'1')],
       [ (13, 13.0, 3721.93505859375, 3723.02294921875, 1642.3458251953125, 3842.928466796875, 34713.43359375, 5702.3681640625, 7597.17041015625, 4562.07177734375, 657.9513549804688, 36343.12890625, 4586.9599609375, 7111.0126953125, u'1')],.....................
>>>master_table.shape
>>>(50, 1)
>>>gt_pnts_arr.shape
>>>(25, 1)

Даже я не могу загрузить этот master_table в кадр данных pandas, как показано ниже:

df = pd.DataFrame(data=master_table[1:,1:], index=master_table[1:,0],columns=master_table[0,1:])

Типы данных моей таблицы: в master_table 13 столбцов и 50 строк. Типы данных первого и последнего столбца соответственно целочисленные и целочисленные, но все остальные (11) типы данных являются плавающими.


python numpy python-2.7 arcpy
person SIslam    schedule 22.11.2016    source источник
comment
мне кажется, что ваш master_table не является числовым из-за последнего столбца u'1', а также содержит кортежи Python вместо того, чтобы быть многомерным с поплавками. Возможно, вам просто нужно переформатировать данные...   -  person Julien    schedule 22.11.2016
comment
@JulienBernu Хорошо отредактировал вопрос. Ты прав!   -  person SIslam    schedule 22.11.2016
comment
Двумерные числовые массивы проще всего использовать для savetxt. Он также может обрабатывать структурированные массивы 1d, но получить правильное fmt может быть сложнее. Код не сложный — просто повторите и отформатируйте «строку» с помощью fmt%tuple(row). numpy void — это запись вашего структурированного массива.   -  person hpaulj    schedule 22.11.2016
comment
stackoverflow.com/a/36509122/901925   -  person hpaulj    schedule 22.11.2016
comment
stackoverflow.com/a/35209070/901925   -  person hpaulj    schedule 22.11.2016

Ответы (1)


arrow_upward
1
arrow_downward

Воссоздавая ваши данные (спасибо за достаточно информации), я делаю массив data

In [33]: data.shape
Out[33]: (3, 1)
In [34]: len(data.dtype.fields)

Попытка savetxt:

In [28]: np.savetxt('test.csv',data, fmt="%.1f")
-> 1158   fh.write(asbytes(format % tuple(row) + newline))
   1159      except TypeError:

TypeError: cannot convert to a float; scalar object is not a number

и вторичная ошибка:

TypeError: Mismatch between array dtype .... and format specifier ('%.1f')

savetxt повторяет data

for row in data:
    f.write(fmt%tuple(row))

Но с этой формой row представляет собой (1,) массив.

Но если я избавлюсь от ненужного 2-го измерения (размер 1)

In [37]: np.savetxt('test.csv',data[:,0], fmt="%.1f")
TypeError: a float is required

а также

TypeError: Mismatch between array dtype .... and format specifier ('%.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f')

Обратите внимание, что он взял ваши fmt и реплицировал их, чтобы они соответствовали количеству полей. Скопируйте этот последний спецификатор формата и настройте его для работы с последним строковым столбцом.

In [38]: fmt='%.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %.1f %s'

Теперь это работает:

In [39]: np.savetxt('test.csv',data[:,0], fmt=fmt)
In [40]: cat test.csv
13.0 13.0 3810.0 3810.0 1983.0 3873.7 34869.9 5483.4 7272.1 4409.6 872.1 36238.6 4441.6 6775.3 1
1.0 1.0 3602.0 3603.1 1626.9 3725.9 34595.9 5810.6 7592.9 4476.0 576.3 36463.0 4499.0 7164.5 1
13.0 13.0 3721.9 3723.0 1642.3 3842.9 34713.4 5702.4 7597.2 4562.1 658.0 36343.1 4587.0 7111.0 1

Итак, есть 2 исправления - структурированный массив должен быть 1d для работы с savetxt - строками и полями. И fmt должен работать с dtype. В этом случае вам нужно обработать строковое поле.

Если бы последнее поле было числовым (например, int), а не U2, то data[:,0] работало бы с простым %.1f fmt. Исходное поле int сохраняется просто отлично (хотя fmt также может быть настроен для этого).

person hpaulj    schedule 22.11.2016