PRODUCTS > ALTIBASE DATA INTEGRATOR > BACKGROUND データ統合の必要性 分散コンピュータ環境の拡大で企業のITシステムはより複雑になり、膨大化しています。企業は数多い異機種のDBMSとOS、サーバーシステム、 ストレージ、アプリケーション等を使用しています。 システムが複雑になることにより、企業の悩みは深くなります。意思決定及び顧客サービスプロセスの一貫性のため、複数のシステムに分散されているデータを連動し、 統合しなければならないからです。 複数のOLTPに分散されているデータをOLAP システムに統合して単一なビューを提供し、人事システムと会計システム、 営業情報システムの間にも自由に情報共有が行われるようにしなければなりません。 高可用性の必要性及び重要性もデータ統合に対する要求につながります。インターネットの普遍化は企業に24*7 サービスを要求し始めて、 これにより企業の全てのサービスは365日フル稼動しなければなりません。 24*7 無停止サービスを利用するということは、システムのアップグレードや切り替える場合、また災害が発生した場合や運用システムのデータを分析用DWHで統合する場合など、 どのような状態でもシステムが停止されてはいけないということを意味します。 本社でのデータ変更内容を分散されている支社にリモートで同時に転送するか、支社の変更データを本社サーバーにリアルタイムで反映するためにもデータは統合されなければなりません。 伝統的な統合技術の限界 様々なデータ統合要求を満足させるため、多くの技術が研究・開発され、 ETL(Extract, Transform, Load)が最も協力なツールとして活用されてきました。しかし、 企業の要求を完全に満足させることはできませんでした。これらのツールには、大きく二つの面で限界があります。 ひとつめに、リアルタイム性能が劣っています。ETLを利用したデータ統合は主に日単位、週単位、もしくは月単位で行われます。このような配置作業では、 ソースシステムの変更内容をこれを必要とするターゲットシステムに直ちに反映することは根本的に不可能です。 しかし、実際の企業ではリアルタイム性が要求されています。一日前、1週間前の情報ではない、今の瞬間に発生して変更された最新のデータで分析を実行して意思決定をしようとしています。 ‘最新のデータ’は、場合により数時間前の情報、もしくは1秒前の情報を意味することもあります。 ふたつめとして、24*7 サービスに支障が発生します。ETLによるデータ統合方式では、深夜の遅い時間かアクセス頻度が低い特定の時間帯を利用してシステムを停止させデータ抽出作業を実行します。 ETLの特性として変更内容だけトラッキングすることができないのでソースデータの全体を抽出します。しかし、ITシステムは24時間稼動しなければならず、これは配置作業の時間の最小化、 もしくはゼロを要求します。停電や災害、又はシステムやアプリケーションの障害が発生した場合でも、最小の時間内にサービスは復旧されなければなりません。 このようなETLの限界と企業の新しい要求はCDC(Change Data Capture)という一歩進んだ技術の商用化を成し遂げました。 リアルタイム統合の代案‘CDC’ 最近ETLを補完する手段として、CDCに対する関心が高まっています。 CDCはソースシステムの変更されたデータをキャプチャーして、 これを多様な運用及び分析システムによりリアルタイムで転送する技術です。データ 統合プロセスの開始点に位置しながら、 ETLの限界を補い、データ統合に対する企業の要求に答えていきます。 ソースシステムが変更内容を直ちにキャプチャーしてターゲットシステムに複製する技術はいくつかの方式があります。 ODBC/JDBCアダプタ、Timestampを活用して抽出するレコード構文を DBMSに適用するSQLクエリー方式、トリガーを利用したDBトリガー、 そしてDBログで直接、変更内容を抽出するログ基盤のCDCなどがあります。 ALTIBASEが提供するALTIBASE Data Integratorはこの中で最も革新的な方法で評価されている最新の複製技術のログ基盤CDCを利用してデータ 統合の‘リアルタイム性’を解決します。