マルチDB対応論理レプリケーションは Qlik Replicate |株式会社コーソル

01.課題

以下のような課題に対してご活用いただけます。

・DXにより新たな価値を生み出すために既存のデータベースを有効活用したデータの分析基盤を作りたい

・さまざまな種類のデータベース製品に散在しているデータを一つのデータベースに集約したい

・本番環境に負荷をかけることなく、データベースのレプリケート環境を構築したい

・レプリケーション先のデータを常に最新化させたい

・クラウドのマネージドサービスへデータ連携したい

・レプリカ環境はライセンス費用の安い別のデータベースで作成したい

・データをレプリケーションしつつマスキングもしたい

・最小限のダウンタイムでデータベースの移行を行いたい

02.特徴

・複数の異なるデータベース製品からデータを集約し、BI 分析用のレプリカデータベースにデータ連携することが可能

・エージェントレスであるためデータベースサーバーの負荷を最小限で同期を実現

・70種類以上のさまざまなデータベース製品間の同期をリアルタイムで実現

・ブラウザベースの GUI による簡易設定・監視により、お客様自身で運用可能

・AWS、Azure、GCP、Oracle Cloudなど主要なパブリッククラウドすべてに対応

・AWS RDS、Azure SQL、Cloud SQL、Redshift、Big Queryなどクラウドベースのマネージドサービスにも対応

・ロジカルレプリケーションであるため、レプリケーション中にデータを変換したり特定のSQLを伝搬対象から除外することが可能

・マスキングオプションを使用することにより、データをマスキングしながら同期可能

・データベース移行を最小限のダウンタイムで実施可能

03.構成と機能

機能構成図

構成

Replicate Server	Qlik Replicate製品をインストールするサーバー。コンソールのUIやレプリケーション処理を実行
ソースDB	レプリケーション元のデータベース。対応データベース製品は、05 対応データプラットフォーム参照
ターゲットDB	レプリケーション先のデータベース。対応データベース製品は、05 対応データプラットフォーム参照

機能

①FULL LOAD	対象テーブルのデータの一括反映、データベースの初期同期
②CDC	ソースデータベースからの変更データの取得とターゲットへの反映高速かつ最適化されたデータ入出力。変更データはデータベースログから取得、データ反映はターゲットに最適化
③DDLレプリケーション	ソーステーブルの構成変更（CREATE/DROP/ALTER）をターゲットに反映
④データのフィルタ・変換	テーブル・カラムの選択、カラムの追加、マッピング、名前の変換、データ変換、データフィルタ
⑤データマスキング	指定カラムのデータをマスキングしながらターゲットに反映 ※詳細は 07. データマスキングオプション参照
稼働状況のリアルタイムモニタ機能	通知機能エラー／処理遅延／リソース障害を設定条件に従い自動的に検知し通知通知先：メール送信、イベントログ出力、モニタ画面への表示
タスクスケジューラ	組込みスケジュール機能により、タスクの起動／停止／リロードを実行可能日次・週次・月次、または日時指定の一時実行スケジュール

04.システム要件

Replicate Server 対応OS	Windows Server 2012 x64 Windows Server 2012 R2 x64 Windows Server 2016 x64 Windows Server 2019 x64 Red Hat Enterprise Linux 7.x and 8.x x64 ※Oracle LinuxなどRed Hatと互換性のあるディストリビューションもサポートされます。詳しくは本ページ下部の「お問い合わせはこちら」からお問い合わせください。 Amazon Linux 2 (on Amazon EC2)
推奨H/Wスペック	CPU : 8core 以上 Memorｙ : 8GB～64GB以上 Disk : 320GB～500GB Network : 1Gbps～10Gbps×2

05.対応データプラットフォーム

ソース

ターゲット

06.構成例

07.データマスキングオプション

※データマスキングオプションは別途オプションライセンスが必要です。詳しくは本ページ下部の「お問い合わせはこちら」からお問い合わせください。

08.Qlik Replicate活用パターン

09.Qlik Replicateサービスメニュー

弊社サービスメニューでは、お客様自身で導入・設定を行うためのフォローをさせていただきます。
具体的には次のようなフォローを想定しています。

– Qlik Replicateの技術的なレクチャー
– 各種設計書 / 手順書 / レクチャー資料など必要となる資料やドキュメントテンプレートの提供
– 定例会議開催
– QA対応
– PoC支援
– その他応相談

詳しくはQlik Replicate関連サービスをご参照ください。

010.マルチデータベース環境のパフォーマンス監視

Qlik Replicateでマルチデータベース間のリアルタイムレプリケーションが行えますが、レプリケーション元・先のパフォーマンス監視も行いたいというニーズもあるかと思います。

そのニーズには弊社取扱のDatabase Performance Analyzer（DPA）がお勧めです。
DPAでは、以下の様々なデータベース製品、マネージドデータベースを1つの製品モジュールで統合監視できます。

オンプレミス / 仮想 / クラウド IaaS / クラウド PaaS：

　Oracle Database / SQL Server / DB2 / SAP ASE / MySQL / PostgreSQL

クラウドマネージドデータベース：

　Azure SQL Database / Amazon RDS / Amazon Aurora / Google Cloud SQL

Database Performance Analyzerはこちら