【データとうごう】

データ統合 とは?

最終更新:
💡 形式と意味をそろえて、情報を合わせて使う

複数の場所にあるデータの形式や意味をそろえ、関連する情報を合わせて利用できるようにすること。一か所に集める方法も、元の場所に置いたまま統一した見方を提供する方法もある。

📌 このページのポイント
データ統合:同じ対象を結ぶ 販売:顧客ID 42 会計:顧客ID 42 売上 100円 請求 200円 共通IDと値の意味を確認 同じ顧客・通貨として結び付ける 統合後の記録(例) 顧客ID 42 売上100円 / 請求200円
共通の顧客IDと通貨が確認できた架空の例。売上と請求を別の項目として合わせて見る。名前だけで同じ対象と決めず、更新状況も確認する。
ひよこ ひよこ
データ統合って、ただデータをくっつけるの?
ペンギン先生 ペンギン先生
分析や業務で一緒に使えるよう、形式と意味をそろえることだよ。例えば販売と会計の記録を結び付ければ、同じ顧客の売上と請求を合わせて見られる。データを一か所に移さず、統一した見方を提供する方法もあるんだ。
ひよこ ひよこ
名前の表記をそろえれば、同じ顧客だと分かる?
ペンギン先生 ペンギン先生
名前だけでは判断できないよ。同名の別の会社もあり得るからね。共通の顧客IDや、確認した対応関係を使って結び付けよう。列名だけでなく、金額の通貨や日時の基準など、値の意味も合わせるんだ。
ひよこ ひよこ
どんな方法で統合するの?
ペンギン先生 ペンギン先生
ETLは取り出して変換してから格納、ELTは取り出して格納した後に変換する方法だよ。元の場所に置いたまま、統一した見方を提供する方法もある。APIはシステム間の受け渡しに使えるけれど、それだけで統合の方法や更新頻度が決まるわけではないんだ。
ひよこ ひよこ
統合したら、いつでも最新の情報になる?
ペンギン先生 ペンギン先生
更新の仕組みによるよ。定期的なバッチ処理なら次の実行まで待つし、逐次処理でも遅延や失敗はあり得る。どの時点まで反映済みか、重複や欠損がないかを確かめる必要があるんだ。
ひよこ ひよこ
クラウドのツールに任せれば全部できる?
ペンギン先生 ペンギン先生
取り出しや変換などを支援するツールはあるよ。でも、どの記録を結び付けるか、どう値をそろえるかは設計が必要だね。実行後も件数や反映状況を確かめ、失敗した処理をどうやり直すかまで決めておこう。
ペンギン
まとめ:ざっくりこれだけ覚えればOK!
「データ統合」って出てきたら「異なる場所のデータの形式と意味をそろえ、一緒に利用できるようにすること」と思えばだいたいOK!
📖 おまけ:英語の意味
「Data Integration」 = データを統合すること
💬 Integrationは「統合」という意味だよ。ファイルを並べるだけでなく、異なる形式や意味を調整して、関連する情報を合わせて使えるようにするんだ。

参考資料

← 用語集にもどる