CSVの途中から列がずれたり、1件のデータが何行にも分かれたり、残り全部が1つのセルに入ったりする場合、原因はダブルクォート周辺にあるかもしれません。 CSVでは引用符の内側にカンマや改行を含められるため、「改行位置を直す」「カンマを消す」といった見た目だけの修正は危険です。 まず、正常なCSVと異常なCSVを見分けま...
データ・表計算
データ・表計算の記事一覧
CSVは「1行をカンマで分ければ読めるファイル」と思われがちですが、それだけでは正しく扱えません。 理由は、値そのものにカンマ、ダブルクォート、改行を含められるからです。RFC 4180で文書化されている一般的なCSV形式では、これらをダブルクォートで囲むことで1つのフィールドとして扱います。 CSVを壊さず扱うには、...
CSVの文字コードで困る場面は、たいてい「何の文字コードか知りたい」と「別の文字コードに変えたい」が同時に起きています。 ここで先に押さえておきたいのは、文字化けして見えるだけでは元の文字コードを確定できないということです。ファイルの先頭情報、UTF-8として正しく読めるか、作成元・受け渡し先の仕様、Excelなどでの...
UTF-8のCSVをExcelで開いたら日本語が文字化けした。そんなとき、まず避けたいのは、文字化けした状態のまま「名前を付けて保存」で上書きすることです。 元CSVをコピーして残し、Excelのデータ取り込みから開き直します。Microsoftも、BOMなしのUTF-8 CSVについてはPower Queryの「テキ...
CSVが文字化けしたとき、「CSV形式が壊れている」と考えがちですが、CSVの構造と文字コードは別の問題です。同じ id,name というCSVでも、UTF-8、UTF-8 BOM付き、Shift_JISではバイト列が違います。 実務では文字コードの歴史を全部覚える必要はありません。重要なのは、受け渡し先が何を期待して...
