Excelからのデータの読み込みと書き出しの速度を速くするにはどうしたらいいですか？
显示 更早的评论
ある計測器の出力データがExcelで出力されます． 1フレーム35×35の数値データで1シートに100フレームのデータが入っており，それが8シートぐらいあります．(ファイルごとにシートの枚数は異なります) ここから繰り返し処理を使って1フレームずつのcsv形式のデータに出力しているのですが，1つのファイルを処理するのに何時間もかかってしまいます．コードは以下のような形で書いていますが処理を速くする方法があったら教えてください．
%切り抜き範囲の設定
xlrange=strcat(start_col,num2str(start_row),':',end_col,num2str(end_row));
%切り抜き
mat=xlsread(inputfilename,sheet,xlrange);
%csvで書き出し
dlmwrite(outputfilename,mat);
采纳的回答
xlsread/xlswrite 関数は R2015b で繰り返し実行の際のパフォーマンスが改善されています。もし R2015a 以前のバージョンを使用されている場合は、是非バージョンアップを。
また提示のコードでは、1シートに100フレームのデータを、100回に分けて xlsread関数で読み取っているようですが、例えば一度に100フレーム分読み取ったあとで個別に処理をするなど、読み取り回数を減らすことでも高速化が望めそうです。
上記以外でも、ユーザコミュニティである MATLAB Central/File Exchange において、xlswrite 関数の高速化を図ったコードがいくつか紹介されていますので、試してみてください。
MATLAB Central: File Exchange https://jp.mathworks.com/matlabcentral/fileexchange/?utf8=%E2%9C%93&term=xlswrite+fast
5 个评论
Yumi Iwakami
2017-7-6
各フレーム（35×35の数値データ）の間に空白の行が存在するようでしたら、
mat=xlsread(inputfilename,sheet);
とシート全体を読み込んだ場合に、NaNが空白の位置に入った行列として読み込まれると思います。その後、すでに実施されている「切り抜き範囲の設定」で行列の範囲を指定すれば、個別に処理ができるのかなと考えていました。
Jiro Doke
2017-7-6
Michioさんが仰っている通り、せめて1シートに対して1回だけ xlsread を使うのをお勧めします。100フレーム × 8 シート × ファイル数の回数 xlsread を呼ぶのは非常に遅くなります。
Jiro Doke
2017-7-7
こんな感じでできるかと思います。
data = xlsread('test.xls'); % フレーム間の空行は NaN で入ってくる
startID = 1:38:size(data,1); % フレームは 35 行でフレーム間は 3 行とする
endID = 35:38:size(data,1);
for iF = 1:length(startID)
mat = data(startID(iF):endID(iF),:);
csvwrite(sprintf('data%02d.csv',iF),mat)
end
Yumi Iwakami
2017-7-13
更多回答（1 个）
mizuki
2017-7-6
3 个投票
Excelファイルのすべての列ではなく特定列だけであれば、 datastoreや並列計算を組み合わせたらさらに高速化できる可能性があります。
ただし、Michioさんのご提案された基本的な内容をお試しされた後にご検討ください。
类别
在 帮助中心 和 File Exchange 中查找有关 スプレッドシート 的更多信息
产品
Community Treasure Hunt
Find the treasures in MATLAB Central and discover how the community can help you!
Start Hunting!
