先日、個人情報データ（Ａ）と顧客名簿マスタ（Ｂ）を付き合わせ、個人情報データ（Ａ）の顧客氏名が正しいことをチェックして欲しいという依頼がありました。（Ａ）のデータ件数が約１０万件、（Ｂ）のデータ件数が約１４０万件です。普通に頑張っても終わる作業ではありません。この作業が今後も随時、発生するためツール化して欲しいとのこと。また、個人情報なのでＤＢに保管せずに、作業の都度、（Ａ）と（Ｂ）をテキストファイルで渡すので読み込んで処理できるように。とのお話でした。
データ件数が巨大のため、データベースを利用してＳＱＬで処理したいと思いました。まず、ＭＤＢを利用して処理しようと思いました。ＭＤＢにＭＳ−ＡＣＣＥＳＳを利用してデータをインポートして、クエリを作成することにしました。数件程度のデータでテストを実施し、正常に動作することが確認できたので本番データで処理を実行しました。
結果は、ＮＧでした。問題点が２つ。１つは、インポートしたデータ件数が途中で終わっていること。もう１つは、処理時間がかかりすぎること。インポートは手動でＭＳ−ＡＣＣＥＳＳから実行すると正しく動作するので、コードから実行した場合の何か問題があるのでしょう。処理時間は、約２時間くらいかかりました。
色々と粘りましたがＭＤＢファイルのサイズがどんどん膨れ上がり、あまり進展が望めないので他の方法を探すことにしました。ＭＤＢファイルのように簡単に扱え、クライアントで十分のフリーのＤＢＭＳはないか？と・・・。そこで見つけたのが「SQLite」でした。
SQLiteの情報は少ないです。あまりメジャーではないようですね。それもVBAで利用するという奇特な方は少ないようで、さらに少なくなります。まずは、情報集めから開始です。
(1) SQliteの特徴
・サーバ不要、軽量
・ライセンスはパブリック・ドメイン
・SQL92サポート(完全ではない)
・トランザクションサポート
・最大サイズ 2テラバイト
(2) SQLiteサイト
こちらから
(3) COM Wrappers/VisualBasicDLLs
・SQLitePlus
・dhSQLite
・SQLiteDB
・SQLite3VB
・LiteX
・SqLite2X
他にもありますが一部リンク切れもありました。
(4) ツール
・SQLite ControlCenter
・SQLite Database Browser
(5) SQLiteが認識できるSQL
こちらから
(6) 役に立つサイト
・rakutoネット
・MS Access庵
今日はこの辺で。また！
| 
