Return to Video

Data_Redundancy

  • 0:00 - 0:03
    現在の問題は1つのノードがエラーになると
  • 0:03 - 0:06
    ファイルのデータが消滅することです
  • 0:06 - 0:08
    ノードがエラーになると
  • 0:08 - 0:12
    64MBの穴が mydata.txt 内に空きます
  • 0:12 - 0:16
    他のファイルにも類似の問題が発生します
  • 0:16 - 0:22
    その為Hadoopはデータを保存する時
    ブロックを3回複製します
  • 0:22 - 0:25
    BLK_1はこに存在するだけでなく
    他のブロックにもあります
  • 0:25 - 0:29
    BLK_2も他のブロックに存在します
  • 0:29 - 0:34
    BLK_3も同様です
  • 0:34 - 0:38
    3つのノードをランダムに選択し複製します
  • 0:38 - 0:42
    正確には限りなくランダムに近くです
  • 0:42 - 0:44
    ブロックは3つの複製があるので
  • 0:44 - 0:48
    エラーが起きても大丈夫です
  • 0:48 - 0:52
    ネームノードは2つの複製ができたと分かると
  • 0:52 - 0:56
    さらにクラスタ上に再複製します
  • 0:56 - 0:59
    つまり3つのコピーができるのです
  • 0:59 - 1:01
    データがエラーになっても問題に対処できます
  • 1:01 - 1:05
    しかしまだ別のエラーポイントがあります
  • 1:05 - 1:09
    もしネームノードでハードウェアの障害が起きたら?
  • 1:09 - 1:11
    データにアクセスできない?
  • 1:11 - 1:16
    HDFSのデータが消滅する? 障害は起きない?
Cím:
Data_Redundancy
Leírás:

more » « less
Video Language:
English
Team:
Udacity
Projekt:
ud617 - Intro to Hadoop and Mapreduce
Duration:
01:17
Fran Ontanaya edited Japán subtitles for 03-03 Data Redundancy

Japanese subtitles

Felülvizsgálatok