【入門編】【CSV データの正規化】ADODB.Connection (Microsoft Text Driver) を用いた SQL による CSV データの結合と集計 – VBScript (Visual Basic Scripting Edition)解析バイブル

スポンサーリンク
スポンサーリンク

Excelを卒業する第一歩。SQLでCSVを「テーブル」として操る、極限のデータ加工術

こんにちは。現場の荒波を乗り越えてきたエンジニアの皆さん。
今日は、少しだけ「視座」を高くして、プログラミングの新しい景色を見に行きましょう。

皆さんは、大量のCSVファイルを処理する際、どのように書いていますか?
「`FileSystemObject` で一行ずつ読み込み、`Split` 関数で配列に切り分け、`If` 文で条件判定をして……」

もし、あなたがそう考えているなら、それは素晴らしい一歩です。しかし、同時に「もっとエレガントで、圧倒的に高速な方法がある」という扉の前に立っています。

今日お伝えするのは、VBScriptの真の力を引き出すテクニック。それは、「CSVファイルをデータベース(テーブル)として扱い、SQLで結合・集計する」という手法です。

Excelを開く必要も、複雑なループ処理を書く必要もありません。SQLという「最強の武器」を、VBScriptという「使い慣れた手」で操る。この感覚を掴めば、あなたの業務自動化スキルは劇的に進化します。

さあ、準備はいいですか? さっそく始めましょう。

1. なぜ「ループ」ではなく「SQL」なのか?

まず、なぜわざわざSQLを使うのか、その本質的な理由を理解しておきましょう。

通常のプログラミング(命令型)では、「どうやってデータを処理するか(How)」をすべて書かなければなりません。

  • ファイルを開く
  • 1行ずつ読み込む
  • 結合したいキーを探す
  • 一致したら新しい配列に入れる……

これに対し、SQL(宣言型)は「何が欲しいか(What)」だけを書けばいいのです。

  • 「ユーザー名と、その人の購入合計金額が欲しい」

この違いは、コードの可読性(読みやすさ)だけでなく、実行速度と保守性において決定的な差を生みます。Microsoft Text Driverという「通訳」を介することで、VBScriptはCSVをあたかもSQL ServerやOracleのようなデータベースとして扱えるようになるのです。

2. 魔法の架け橋:Microsoft Text Driver

このテクニックの心臓部は、ADODB (ActiveX Data Objects) と Microsoft Text Driver です。

通常、SQLはデータベースに対して発行するものですが、Text Driverを使うと、「特定のフォルダ」をデータベース、「CSVファイル」をテーブルに見立てることができます。

仕組みのイメージ図

[ CSVファイルA ] ----┐
[ CSVファイルB ] ----┼--> [ Microsoft Text Driver ] ----> [ SQLエンジン ] | (通訳者) (結合・集計) [ CSVファイルC ] ----┘ ^ └─ このファイルが入っている「フォルダ」が、SQLにおける「データベース」になる

3. 実践:2つのCSVを結合して集計する

では、具体的なコードを見ていきましょう。
以下の2つのCSVがあると仮定します。

users.csv (ユーザー情報)

ID Name
1 田中
2 佐藤
3 鈴木

orders.csv (注文情報)

UserID Product Amount
1 りんご 100
1 みかん 150
2 バナナ 200

やりたいこと: 「ユーザー名」と「その人の合計購入金額」を結合して取得する。

魂のコード:CSV_Join_Aggregate.vbs

' ==========================================================================
' テーマ: ADODBを用いたCSVデータの結合と集計
' 概要: 2つのCSVをSQLのJOIN句で結合し、GROUP BYで集計を行う
' ==========================================================================

Option Explicit

' --- 設定エリア ---
Dim folderPath, connectionString
' ※CSVファイルが格納されている「フォルダ」のパスを指定します
folderPath = "C:\Work\Data\" 
' Microsoft Text Driverへの接続文字列
' HDR=Yes は「1行目がヘッダーである」ことを示します
connectionString = "Provider=Microsoft.Text;Data Source=" & folderPath & ";Extended Properties='text;HDR=Yes;FMT=Delimited';"

' --- メイン処理 ---
Dim conn, rs, sql
Set conn = CreateObject("ADODB.Connection")

On Error Resume Next
conn.Open connectionString

If Err.Number <> 0 Then
    WScript.Echo "接続エラー: " & Err.Description
    WScript.Quit
End If
On Error GoTo 0

' SQL文の構築
' users.csv と orders.csv を UserID で結合し、名前ごとに金額を集計する
sql = ""
sql = sql & "SELECT u.Name, SUM(o.Amount) AS TotalAmount "
sql = sql & "FROM [users.csv] AS u "
sql = sql & "INNER JOIN [orders.csv] AS o ON u.ID = o.UserID "
sql = sql & "GROUP BY u.Name"

WScript.Echo "実行中のSQL: " & sql
WScript.Echo "------------------------------------------"

' クエリの実行
Set rs = conn.Execute(sql)

' 結果の出力
If Not rs.EOF Then
    WScript.Echo "名前" & vbTab & "合計金額"
    WScript.Echo "------------------------------------------"
    Do Until rs.EOF
        ' rs.Fields("列名").Value でデータにアクセス
        WScript.Echo rs.Fields("Name").Value & vbTab & rs.Fields("TotalAmount").Value
        rs.MoveNext
    Loop
Else
    WScript.Echo "該当するデータは見つかりませんでした。"
End If

' --- 後始末(オブジェクトのライフサイクル管理) ---
' プロフェッショナルとして、開いたリソースは必ず明示的に閉じます
rs.Close
Set rs = Nothing
conn.Close
Set conn = Nothing

WScript.Echo "------------------------------------------"
WScript.Echo "処理が完了しました。"

4. ここが落とし穴!エンジニアが陥る3つの罠

この手法は強力ですが、初心者の方が必ずと言っていいほど躓くポイントがあります。ここをクリアすれば、あなたはもう「初級者」ではありません。

① 「ファイル」ではなく「フォルダ」に接続する

接続文字列の `Data Source` に指定するのは、CSVファイルそのものではありません。CSVファイルが置いてある「フォルダ」です。SQL文の中で `FROM [users.csv]` と書くことで、初めてファイルがテーブルとして認識されます。

② 型推論の罠(schema.ini の重要性)

Text Driverは、CSVの最初の数行を見て「この列は数値だ」「この列は文字列だ」と勝手に判断します。
しかし、例えば「郵便番号」の列が `00123` だった場合、Driverが「これは数値だ!」と判断すると、先頭の `00` が消えて `123` になってしまいます。

これを防ぐには、同じフォルダに `schema.ini` という名前のテキストファイルを作成し、列の型を明示的に指定するのがプロの作法です。

schema.ini の例:

[users.csv]
ColNameHeader=True
Format=CSVDelimited
Col1=ID Integer
Col2=Name Text

③ ファイルのロック

実行中にCSVファイルをExcelなどで開いていると、`Permission Denied`(アクセス拒否)のエラーが発生することがあります。自動化スクリプトを動かす際は、対象ファイルが他のプロセスに掴まれていないか確認しましょう。

5. まとめ:次なるステージへ

いかがでしたか?
`FileSystemObject` で必死にループを回していた昨日までの自分とは、少し違う景色が見えてきたのではないでしょうか。

「複雑なロジックは言語(VBScript)に書くのではなく、データエンジン(SQL)に任せる」

これこそが、大規模なデータを扱うエンジニアが共通して持つ思考プロセスです。
このテクニックをマスターすれば、CSVの結合、フィルタリング、集計といった作業は、わずか数行のSQL文に変わります。

ここをクリアすれば、VBScriptの基本はバッチリですよ。
自信を持って、次の自動化プロジェクトに挑んでください。応援しています!

タイトルとURLをコピーしました