DataSyncについて2021年03月30日コラムAWS活用支援サービス担当TwitterFacebookはてブPocketLINEみなさん、こんにちは。DataSyncについてお伝えします。メリットや他のサービスとの違いについて、理解が深まれば幸いです。DataSync近年、AIやデータ分析による、データの利活用が盛んになっており、様々な企業でデータの重要性が叫ばれています。Services)に移行して、AIやデータ分析を行う、といった会社も増えて生きています。DataSyncというサービスを使うことができます。DataSyncを使うとどのようなメリットがあるのか、どういうユースケースが考えられるのか記載していきます。DataSyncで何ができるの?データが増え続けると、データの移動が大きな課題になってきます。DataSyncは、大容量のデータ移動における様々な課題を解決し、安全かつ高速なデータ移動を実現できるサービスです。データ移動の課題データ移動には、どのような課題があるのでしょうか。DataSyncを利用しないといけないのでしょうか。DataSync以外にも様々なデータの移動手段があります。Linuxコマンドのcp、scpから始まり、ftpといったプロトコル、httpsによるデータの移動といった様々な手段があります。小規模・小容量のデータであれば、cpコマンドやftpを利用すればいいのですが数千万ファイルや数TBクラスのデータになってくると、ファイル送信元のエラー、NWの帯域、もれなくデータを転送できているかといったデータ整合性の考慮、といった様々な考慮すべき点が生じてきます。DataSyncなのです。DataSyncは、オンプレミス環境とAWS間、およびAWS内のストレージサービス間のデータ転送を高速かつセキュアに実施するマネージドサービスです。オンプレミス環境であれば、仮想アプライアンスの「DataSyncエージェント」というサーバを立てることで、オンプレミスのデータをDataSyncエージェント経由で高速にデータ転送できるようになります。AWSの他アカウントや他リージョンのEFS、S3といったストレージサービスに対しても高速にデータ転送を行うことができます。DataSyncを使うことによる、データ移動のメリットについて、具体的に見ていきましょう。高速化DataSyncエージェントはAWS側との複数セッションの確立やデータの圧縮といった、データ転送を高速化させる様々な仕組みが備わっています。DataSyncエージェントは複数起動することも可能です。複数起動してデータ転送を行うことでより高速なデータ転送を実現できます。セキュアな転送DataSyncエージェントとAWS側はTLSにより暗号化されるようになっているので、セキュアなデータ転送ができるようになっていますエラーハンドリング万が一NW通信が途絶えても再送処理を行う仕組みが備わっています。データの整合性検証も行うため、データの送信漏れやデータの欠損についても、利用者側で考慮する必要がありません。自動化”タスク”という設定を行うことで、データ転送を決められた日時に自動で行うことができます。これにより、バッチ的なデータ転送ができるようになり、運用の幅が広がります。DataSyncはどのように使っていけばいいのでしょうか。代表的なユースケースについて紹介していきます。1)オンプレミス環境のファイルサーバのバックアップDirectConnectやVPNを利用し、オンプレミス環境のファイルサーバをAWSにバックアップする、といった活用方法が考えられます。2)ストレージのレプリケーションアプリケーションの海外展開や、事業所の海外拠点新設といった場合に、海外のAWS環境にデータを同期させることも考えられます。DataSyncを利用し、S3やファイルサーバに格納されているデータを同期させる、といった活用方法が考えられます。ほかのサービスとの違いAWSにもデータ移動サービスは様々な種類があります。どのように使い分けをしていけばいいのか、SnowシリーズAWSの大容量データ移動サービスの代表格として、Snowシリーズがあります。Snowシリーズは、オンプレミスからAWSへのデータ移行でのみ、使用できます。DataSyncを利用するといいでしょう。テラバイト級~ペタバイト級といった、非常に大容量のデータ移動を行う場合は、Snowシリーズのほうが高速かつ安価にデータを移動させることができます。USDの利用料金がかかります。DataSyncの場合は3000ドル以上の値段がかかってしまいますが、Snowシリーズの場合は300ドルと配送料で済むため、非常に安価に住むことがわかります。Syncこちらは、S3やEFSといった特定のサービスに限定した場合、利用するといいでしょう。DataSyncを利用するといいでしょう。DataSyncもStrageGatewayも、いずれもオンプレミスからのデータ連携が可能です。主な違いはデータの移行先です。DataSyncはEFSやFSxといった対象にもデータを送ることができます。StrageGatewayはファイルのキャッシュ機能やアーカイブ機能が備わっているため、そのような要件がある場合はStrageGatewayを利用するといいでしょう。KinesisシリーズKinesisシリーズはストリーミングサービスを目的として開発されたものです。DataSync、といった形で使い分けるといいでしょう。DataSyncは編集中のファイルも特に制限なく転送することが可能です。DataSyncの機能であるファイル整合性チェックの段階で、不整合と判定されてエラーとして処理されてしまいます。DataSyncでデータの転送処理が行われている時間帯には、ファイル編集をしない、または深夜など、ファイル書き込みが行われにくい時間帯にデータ転送処理を行う、といった工夫をする必要があります。DataSyncは非常に様々な機能があり、高速かつセキュアにデータ移動を行うことができます。ほかのAWSにおけるデータ移動サービスと組みあわせて、データを集中・蓄積させ、企業のAI活用やデータ分析をより進めていきましょう。SunnyCloudまでお問合せをお願いします。担当者より追ってご連絡させていただきます。AWSをご利用いただくには、直接契約するより断然お得。テレワーク支援...を幅広くご提供しています。(1)え、私のAWS利用料高すぎ・・!?AWS利用料を誰でも5%お得にご利用できます。大小問わずお気軽にご相談ください。AWSを熟知した弊社スタッフがお応えします。Corporation無料相談会お問い合わせ。