Ano ang pagbabalanse sa HDFS?
Ano ang pagbabalanse sa HDFS?

Video: Ano ang pagbabalanse sa HDFS?

Video: Ano ang pagbabalanse sa HDFS?
Video: Introduction to Amazon Web Services by Leo Zhadanovsky 2024, Nobyembre
Anonim

HDFS nagbibigay ng utility ng balancer. Sinusuri ng utility na ito ang block placement at binabalanse ang data sa DataNodes. Ito ay patuloy na gumagalaw ng mga bloke hanggang sa ang kumpol ay ituring na balanse, na nangangahulugan na ang paggamit ng bawat DataNode ay pare-pareho.

Tinanong din, paano ko i-rebalance sa HDFS?

HDFS nagbibigay ng tagabalanse ” utility para makatulong na balansehin ang mga block sa DataNodes sa cluster.

?Rebalancing HDFS

  1. Sa Ambari Web, mag-browse sa Services > HDFS > Summary.
  2. I-click ang Mga Pagkilos sa Serbisyo, at pagkatapos ay i-click ang Rebalance HDFS.
  3. Ilagay ang halaga ng Balance Threshold bilang isang porsyento ng kapasidad ng disk.
  4. I-click ang Start.

Bilang karagdagan, ano ang pagbabalanse ng pag-load sa Hadoop? A Magkarga - Pagbabalanse Algorithm para sa Hadoop Naipamahagi File System. Ang mga file ay nahahati sa mga bloke at ang mga replicated na bloke ay iniimbak sa maraming DataNode sa isang distributed na paraan.

Dito, ano ang balancer sa Hadoop?

HDFS nagbibigay ng a tagabalanse utility na nagsusuri ng block placement at nagbabalanse ng data sa DataNodes. Namamahagi ito ng data sa isang pare-parehong paraan sa lahat ng mga disk ng isang datanode. Disk tagabalanse ay iba sa Balancer , na sinusuri ang paglalagay ng data block at binabalanse ang data sa mga datanode.

Paano ko kakanselahin ang aking Hdfs balancer?

Sa kasalukuyang dokumentasyon ng hadoop, ito ay "hadoop tagabalanse [-threshold]" upang simulan ang a tagabalanse at sa huminto ang tagabalanse pindutin ang ctrl-c. Ngunit sa ilang iba pang mga lugar (YDN at mas lumang hadoop version documentation), tawagan ang "start- tagabalanse .sh" para simulan ito at tawagan ang " huminto - tagabalanse .sh" sa huminto ito.

Inirerekumendang: