node.js 에서 csv 파일 처리하는 방법 (일본어)

Node.jsの実装例

node-csv を利用する例。

Node.jsの場合は、node-csvを用いることで、CSVの読み書きができる。
もし、cp932などの文字コードも試用する場合は、iconvモジュールも使用する。

インストール方法

node-csvのインストール

npm install csv

iconvのインストール

npm install iconv

CSVの読み込み例

var csv = require('csv');
var fs = require('fs');
var Iconv = require('iconv').Iconv;
var conv = new Iconv('cp932','utf-8');
dumpCsv('test1.csv');
dumpCsv('test2.csv');
dumpCsv('test3.csv');
dumpCsv('test4.csv');

function dumpCsv(path) {
  fs.readFile(path, function(err, sjisBuf) {
    var buf = conv.convert(sjisBuf);
    console.log(path + '================');
    csv.parse(buf.toString(),{comment:'#'}, function(err, data) {
      console.log(err);
      console.log(data);
    });
  });
}

実行結果

test1.csv================
null
[ [ 'ジャック', '12', '戦士', '説明１' ],
  [ 'バーン', '17', '騎士', '説明２' ],
  [ 'マァム', '15', '僧侶', '説明３' ] ]
test2.csv================
[Error: Invalid closing quote at line 1; found "ジ" instead of delimiter ","]
undefined
test3.csv================
null
[ [ 'ジャック', '12', '戦士', ',や"が入力可能' ],
  [ 'バーン', '17', '騎士', '説明２\r\n\r\nダブルクォート中に空の改行がある場合' ],
  [ 'マァム', '15', '僧侶', '説明３' ] ]
test4.csv================
null
[ [ 'ジャック', '12' ], [ 'バーン' ], [ 'マァム', '15', '僧侶', '説明３' ] ]

test2.csvの読み込み結果がエラーになっている。
csv.parseは次のようにコメント中にダブルクォーテーションのあるデータを読み込めない。

#名前,歳,クラス,説明に(",)を入れる

これを直すには、node_modules/csv/node_modules/csv-parse/lib/index.jsに次のようなパッチを適用する必要がある。

--- node_modules/csv/node_modules/csv-parse/lib/index_bk.js 2014-06-20 17:36:56.000000000 +0900
+++ node_modules/csv/node_modules/csv-parse/lib/index.js    2014-07-22 22:06:12.826116745 +0900
@@ -253,7 +253,7 @@
         this.closingQuote = i;
         i++;
         continue;
-      } else if (!this.field) {
+      } else if (!this.field && !this.commenting) {
         this.quoting = true;
         i++;
         continue;

これを当てた場合の結果は次のようになる。

実行結果

test2.csv================
null
[ [ 'ジャック', '12', '戦士', ',や"が入力可能' ],
  [ 'バーン', '17', '騎士', '説明２\r\n改行を行う' ],
  [ 'マァム', '15', '僧侶', '説明３' ] ]

CSVの書き込み例

var csv = require('csv')
var data = [
  ['xx', 'ああああ', 1],
  ['id', '"atagfa,asteata','#teat','aaa'],
  ['newline', 'tests\n\ntesat']
];
console.log(data);
csv.stringify(data, {quoted: true}, function(err, output) {
  console.log(err);
  console.log(output);
});

作成される文字列

"xx","ああああ","1"
"id","""atagfa,asteata","#teat","aaa"
"newline","tests

tesat"

以上の結果より、node-csvを使用した場合は次のことがいえる。

・node-csvを使用するとCSVの読み書きが行える。
・コメントを取り扱うことも可能である。
・ただし、コメント周りに上記で説明した通りのバグか仕様があるので自分でパッチを作成して適用するか、コメントを使用しない。

[원본] CSVの解説と各プログラミング言語での実装例