Hadoopのデータの移行

正解は ア です。 DataSync は HDFSからS3への転送 に対応しています(S3DistCpなども候補)。S3に移した後、 Glueのクローラー で表を登録すれば、EMRとAthenaで使えます。 段階 方法 転送 DataSync(HDFS→S3) 表の登録 Glueのクローラー 分析 EMR・Athena 専用線で効率よく移し、分析で使える状態にできる。 現実的な手段ではない。 並列の転送ができず、遅い。 データレイクの要件と、EMR・Athenaとの連携の利点を満たさない。

オンプレミスのHadoopのクラスターのHDFSにある500TBのデータを、S3のデータレイクへ移す。Direct Connectがある。移行の後は、EMRとAthenaでデータを使う。

最も適切なものを1つ選択してください。

出典AWS非公式・オリジナル問題
ア
DataSyncのHDFSの転送でS3へ移し、Glueで表を登録する
イ
HDFSの全ノードのディスクを外して、AWSのデータセンターへ送る
ウ
HDFSのデータを1つのファイルにまとめて、1本の接続でS3へ送る
エ
移行先もEC2でHadoopのクラスターを作り、HDFSのまま使い続ける