MATLAB: Используя TextScan и преобразование массива ячеек в матрице

Question

У меня есть большой файл CSV (должна быть около 1 миллиона строк) с опцией данными со следующей структурой (содержание изменяется):

secid, date, days, delta, impl_volatility, impl_strike, impl_premium, dispersion, cp_flag, ticker, index_flag, industry_group 
100000, 02/05/1986, 60, -80, 0.270556, 74.2511, 5.2415, 0.021514, C, ASC, 0, 481 
100000, 03/05/1986, 30, -40, 0.251556, 74.2571, 6.2415, 0.025524, P, ASC, 0, 481 

Я успешно импортирован тестовый файл, используя следующие:

ftest = fopen('test.csv'); 
C = textscan(ftest,'%f %s %f %f %f %f %f %f %s %s %f %f','Headerlines',1,'Delimiter',','); 
fclose(ftest); 

Однако, C представляет собой массив ячеек, и это делает его труднее обрабатывать содержимое файла в MATLAB. Было бы проще иметь его как «обычный» массив (простите меня за то, что я не знаю правильной номенклатуры, я только начал работать с Matlab).

Если выход I C, я получаю:

Columns 1 through 6 
[2x1 double] {2x1 cell} [2x1 double] [2x1 double] [2x1 double] [2x1 double] 
Columns 7 through 12 
[2x1 double] [2x1 double] {2x1 cell} {2x1 cell} [2x1 double] [2x1 double] 

Так внутри массива ячеек, который является C, есть массивы и клеточные массивы - массивы для чисел и сотовых массивов для строк. Если я попытаюсь проверить элемент (1,2), я должен использовать C {1} (2), но если я хочу проверить элемент (2,2), я должен использовать C {2} {2}. В идеале я хотел бы получить доступ как к C (1,2), так и к C (2,2). Вопрос в том, как мне это сделать?

Я искал решения и нашел cells2mat, но он работает только в том случае, если все содержимое является числовым (я думаю). Я нашел это решение: Convert cell array of cell arrays to matrix of matrices, но horzcat извлекает ошибку, которая, как я полагаю, может возникнуть из-за той же проблемы.

Заранее благодарю вас за ваше время.

Answer 1

Поскольку у вас есть массив, содержащий как числовые, так и символьные данные, то, что вы хотите, невозможно (и, поверьте, это было бы непрактичным тоже).

Ссылка на отдельные номера в числовом массиве отличается от ссылки на целые строки. Это просто не ускользает от этого, и не должно быть: вы относитесь к цветам иначе, чем относитесь к людям (надеюсь, так или иначе).

В MATLAB строка представляет собой обычный массив с той разницей, что каждая запись массива не представляет число, а символ. Реферирование отдельных символов идет так же, как ссылки на номера в массивах:

>> a = 'my string' 
>> a(4) 
ans = 
s 
>> a+0 % cast to double to show the "true character" of strings 
ans = 
    109 121 32 115 116 114 105 110 103 

Однако textscan предполагает (справедливо), что вы не хотите делать что, а вы хотите, чтобы извлечь целые строки из файл. И целые строки следует ссылаться по-разному, чтобы указать, что вы имеете в виду целые строки, а не отдельные символы.

Я думаю, что вы сможете найти все это немного более понятным, если разделить результаты textscan вверх в обычный числовой массив и массив ячеек строк, например, так:

% load the data 
ftest = fopen('test.csv'); 
C = textscan(ftest,... 
    '%f %s %f %f %f %f %f %f %s %s %f %f',...  
    'collectoutput', true,... 
    'Delimiter',',\n'); 
fclose(ftest); 

% split into numeric and char arrays 
numeric = [C{[1 3 5]}] 
alpha = [C{[2 4]}] 

REFERENCING данные в numeric затем следует тем же правилам, как и любой обычный массив, и ссылки на строки в alpha затем следует нормальные клетки ссылок правила (как в alpha{2,1}, чтобы получить '03/05/1986')

EDIT на основе нет вашего комментарии, вы хотите сделать преобразование, как это:

% Read the data 
fid = fopen('test.csv', 'r'); 
C = textscan(fid,... 
    '%f %s %f %f %f %f %f %f %s %s %f %f',... 
    'Headerlines', 1,... 
    'Delimiter',','); 
fclose(fid); 

% Delete 10th element ('ASC') 
C(10) = []; 

% Mass-convert dates to datenums 
C{2} = datenum(C{2}, 'dd/mm/yyyy'); 

% Map 'P' to 1 and 'C' to 2 
map('PC') = [1 2]; 
C{9} = map([C{9}{:}]).'; 

% Convert whole array to numeric array 
C = [C{:}]; 

Answer 2

У меня был тот же вопрос ... Я бы предпочел, чтобы иметь массив ячеек с 2-D для легкого доступа и использования встроенного в MATLAB сортировка функции.

Вот еще одно решение, которое может сработать для вас (так TMW делает это в своем автоматическом сгенерированном коде в инструменте импорта). Он превращает числовые массивы в массивы ячеек, чтобы вы могли объединить их в двумерную матрицу.

C([1,3,4,5,6,7,8,11,12]) = cellfun(@(x) num2cell(x), C([1,3,4,5,6,7,8,11,12]),'UniformOutput', false); 

C = [C{1:end}];