Amazon Web Serviceが提供するサービスRedshiftは、PostgreSQLをベースとして開発された、分析用途のデータ処理に特化したデータベースです。
AWSではこのサービスを、DWaaS(Data Warehouse as a Service)と位置付けています。
Redshiftはペタバイト単位の拡張性・超並列演算、「カラムナ型」と呼ばれる特別なデータ格納方式による高速処理、そして低額の従量課金制という特徴を持ち、ビッグデータ分析に当たっての、その大量のレコードデータの処理に使われます。
こういった分析用途の大規模なデータ処理機構としてはHadoopがよく利用されてきました。
HadoopはAWSからもAmazon Elastic MapReduce（EMR）というサービス名で提供されていますが、これとRedshiftの違いはどこにあるのでしょうか？
DBMoto Ver9.0では、AS/400からの差分レプリケーション時にLog Reader APIが選択可能になりました。
弊社取扱いのRDBデータレプリケーションンツールDBMotoでは、レプリケーション中にデータベースとのネットワークなどで問題で切断が発生した場合でも、次のインターバル間隔で再度接続をやり直してレプリケーションを継続しようとします。
DBMotoは異種データベースのレプリケーションツールですが、テキストデータとの連携も行えます。連携の方式としては以下のようになっています。
弊社のRDBデータレプリケーションソフト、DBMotoでは異種DB間でレコードデータを連携できます。
そして連携に際して要望が多い事柄に関しては、設定のオンオフだけで実施可能となる機能として標準搭載されています。
DBMotoの機能として「非クリティカル使用」というものがあります。これは英文の「Use non critical」というものを訳したものです。
どちらにしても名前を聞いてすぐにピンとくる機能ではありません。
いったいどういった機能でしょうか。このブログ記事にて紹介いたします。
SQLデータベースはユーザのERPやCRMシステムは他のミッション・クリティカルなアプリケーションと同様に心臓部に相当します。そのダウンタイムとデータ損失は従業員の仕事時間の損失とビジネスと利益の損失に直結します。ダウンタイム時に多くのデータを保存したければSQLトランザクション・ログのバックアップの必要性が重要になります。どの時点でのデータベースのリストアが可能になればSQL Serverの可用性は最大となります。ネーティブなマイクロソフトのツールか、3rdパーティのソリューションを使用することでトランザクション・ログを取り扱うことができます。ネーティブなツールにはSQL Server Management Studio, Transact-SQL (T-SQL), SQL Server Agent ジョブ, SQL Server Maintenance Plans, PowerShell スクリプトが含まれます。これらのオプションについてはMicrosoft TechNet トランザクション・ログとMSDNトランザクション・ログを参照ください。
Amazon Web Servicesは2007年にSimpleDBをリリースしましたが、データベース・パフォーマンスに問題がありました。RDS(Relational Database Service)が続いて紹介されました。このサービスはアベイラビリティーと一貫性の為にAWSクラウドでMySQLを必要とする開発者のための約束の多くを提供しました。RDSはSimpleDBでの多くの万台を解決し、AWSはOracle、 SQL Server、PostgreSQLの他のデータベースのサポート、ゾーンにまたがるレプリケーションのオプション、SSD(solid-state drive)のサポートと機能を広げました。
DBMotoでは、通常レプリケーション対象とするテーブルの選択には、「テーブル選択」から表示されるテーブル一覧よりチェックを入れて選択します。
この一覧表示は逐一データベースにクエリで問い合わせを行っています。
マルチテナント用Oracle 12cをDBMotoで使用する場合は、PDBとCDBユーザそれぞれに必要な権限が異なります。詳細は下記の通りです。
PDBユーザ名を「dbmotoP」、CDBユーザを「c##dbmotoC」とした場合の例となります。
※2019/06/10 一部修正しました。
Teradataは開発や評価を目的に無償で「Teradata Express」を使用することができます。
具体的には以下の2つのクラウド用に仮想マシンとして提供されており、ダウンロード可能です。
DBMotoのレプリケーションにおいて、お客様から以下のようなご質問をいただくことがあります。
レプリケーションの元となるデータベースで、数値型のフィールドに”20151118”といった形式で日付データが用意されています。
このデータをレプリケーション先にある日付型フィールドに適切な形に変換したいのですが、可能でしょうか。
これに対しての答えですが、DBMoto標準機能であるスクリプト機能を利用すれば変換可能です。
DBMotoでは、DB2 LUW(DB2 for Linux Unix and Windows)からのミラーリングレプリケーションの形式として、トリガー形式とDB2ログ利用形式の２つを用意しています。
トリガー形式ではレプリケーション対象のテーブルに対し、更新を検知する３つのトリガーとログ用テーブルを作成して変更点を検知しますが、対象テーブルに対し既存のトリガーがあり新たに設定できない場合などにはDB2ログ利用形式を採用します。
RSSフィードを取得する
