dask

3зной

1ответ

Создание dask dataframe из списка файлов HDF5

Каков правильный способ создания dask.dataframe из списка файлов HDF5? Я в принципе хочу, чтобы это сделать, но с dataframe dsets = [h5py.File(fn)['/data'] for fn in sorted(glob('myfiles.*.hdf5')] ar

1зной

1ответ

Установка/использование dask.array на python3

Я тестирую модуль dask (https://github.com/ContinuumIO/dask) для работы с большими массивами данных, но не смог заставить его работать до сих пор. На первый взгляд, мне кажется, что существует конфлик

3зной

1ответ

Как я могу прочитать разделитель CSV, разделенный табуляцией?

У меня есть файл данных "CSV" в следующем формате (ну, это скорее TSV): event pdg x y z t px py pz ekin 3383 11 -161.515 5.01938e-05 -0.000187112 0.195413 0.664065 0.126078 -0.736968 0.00723234 1694

6зной

3ответ

сумка для дачи, не использующая все сердечники? альтернативы?

У меня есть скрипт python, который выполняет следующие действия: i. который принимает входной файл данных (обычно вложенный формат JSON) ii. передает данные по строкам на другую функцию, которая манип

4зной

2ответ

Как справиться с изменением больших кадров данных pandas

У меня довольно большой размер данных pandas (1.5gig .csv на диске). Я могу загрузить его в память и запросить его. Я хочу, чтобы создать новый столбец, комбинированное значение двух других столбцов,