Acest articol este un articol oglindă al traducerii automate, vă rugăm să faceți clic aici pentru a sări la articolul original.

Architect_Programmer_Code Rețeaua Agricolă»Arhitect › Programare › Alte programe › Am aflat prima dată despre Hadoop și HBase big data
Vedere: 9718|Răspunde: 3

Am aflat prima dată despre Hadoop și HBase big data

[Copiază linkul]
Postat pe 27.12.2018 15:04:25 | | | |
Recent, compania trebuie să folosească hbase pentru a stoca o cantitate mare de date, iar managerul ne-a dat o lecție despre cunoștințele relevante.
Mediu:

Sistem:

Lansarea CentOS Linux 7.5.1804 (Core)

Comanda:



Versiunea Java:

Versiunea Java "1.8.0_191"
Java(TM) SE Runtime Environment (build 1.8.0_191-b12)
Java HotSpot(TM) Server VM pe 64 de biți (build 25.191-b12, mod mixt)


Comanda:



Versiunea Hadoop:

Hadoop 2.8.3
SubversiuneAutentificarea cu hyperlink este vizibilă.-r b3fe56402d908019d99af1f1f4fc65cb1d1436a2
Compilat de jdu la 2017-12-05T03:43Z
Compilat cu protoc 2.5.0
De la sursă cu sumă de verificare 9ff4856d824e983fa510d3f843e3f19d
Această comandă era rulată folosind /home/itsvse/apache/hadoop-2.8.3/share/hadoop/common/hadoop-common-2.8.3.jar


Comanda:




Versiunea HBase:

2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Vin 26 octombrie 19:27:03 PDT 2018

Comanda Hbase Shell:


Shell-ul HBase poate fi pornit folosind următoarea comandă
[root@master ~]# găsește / -nume "hbase"
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/src-html/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/src-html/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/src-html/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/src-html/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/bin/hbase
/home/itsvse/apache/hbase-2.1.1/lib/ruby/hbase
[root@master ~]# cd /home/itsvse/apache/hbase-2.1.1/bin/
[root@master bin]# ./hbase shell
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/home/itsvse/apache/hadoop-2.8.3/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/home/itsvse/apache/hbase-2.1.1/lib/client-facing-thirdparty/slf4j-log4j12-1.7.25.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindingspentru o explicație.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]

HBase Shell
Folosește "help" pentru a obține lista comenzilor suportate.
Folosește "ieșire" pentru a ieși din acest shell interactiv.
Pentru referință, vă rugăm să vizitați:http://hbase.apache.org/2.0/book.html#shell
Versiunea 2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Vin 26 Oct 19:27:03 PDT 2018
A durat 0,0050 secunde                                                                                                                                                            
hbase(main):001:0>
hbase(main):002:0*
hbase(main):003:0* versiunea
2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Vin 26 octombrie 19:27:03 PDT 2018
A durat 0,0006 secunde                                                                                                                                                            
hbase(main):004:0>


Introducere

După ce instalarea Hadoop este pornită cu succes, rulează comanda jps pentru a verifica dacă procesul începe cu succes, dacă este reușit (nu testat).

[hadoop@master ~]$jps
Masternode-ul va apărea:
NameNode
JobTracker
Nodul SecundarNameNode

Apare nodul slave1:
DateNode
TaskTracker

Apare slave2node:
DateNode
TaskTracker


Versiunea HBase suporta versiunea Hadoop

S înseamnă susținere
X nu este suportat
NT înseamnă fără test



Linkuri de referință:Autentificarea cu hyperlink este vizibilă.

Câteva comenzi de bază pentru operațiuni ale HBase Shell sunt listate astfel:

numeExpresii de comandă
Vezi ce tabele existăListă
Creează un tabelcreează 'nume tabel', 'nume coloană 1', 'nume coloană 2', 'nume coloană N'
Adaugă un recordPuneți 'Numele tabel', 'Nume rând', 'Nume coloană:', 'Valoare'
Vezi înregistrareaobține 'numele tabel', 'numele rândului'
Vizualizați numărul total de înregistrări în tabelConte 'Nume de tabel'
Șterge înregistrareașterge 'numele tabel', 'numele rândului', 'numele coloanei'
Șterge un tabelTabelul trebuie blocat înainte ca tabelul să poată fi șters, primul pas este dezactivarea 'table name'. Al doilea pas este eliminarea 'table name'
Vezi toate înregistrărilescanează "numele tabelului"
Vezi toate datele dintr-o anumită coloană a unui tabelscanează "numele tabelului", ['numele coloanei:']
Actualizează înregistrareaEste să o rescrii și să revii


Înțelege

Hadoop Distributed File System (HDFS), HBase este un proiect de stocare a datelor bazat pe Hadoop, iar Hive este folosit pentru analiza datelor.

(Sfârșit)






Precedent:Instalarea Vim pe CentOS 7 (nu este instalat implicit)
Următor:Pachet cadou de Revelion Microsoft 2018 pentru produse uscate

Postări conexe
 Proprietarul| Postat pe 28.12.2018 15:15:53 |
Introducere a portării web Hadoop:Autentificarea cu hyperlink este vizibilă.
Linkuri către cea mai recentă versiune:Autentificarea cu hyperlink este vizibilă.

Daemon
Note
NameNode
Portul HTTP implicit este 50070.
ResourceManager
Portul HTTP implicit este 8088.
Serverul JobHistory MapReduce
Portul HTTP implicit este 19888.

Portul implicit pentru HBase Web este: 16010


Pin
Postat pe 06.01.2019 21:32:01 |
QQ-ul maestrului altarului oferă o legătură
 Proprietarul| Postat pe 05.07.2019 12:06:12 |


Hadoop-3.1.1+ suportă deja HBase-2.2.x.

Pe 6 februarie 2019, a fost lansată versiunea Hadoop 3.1.2

Autentificarea cu hyperlink este vizibilă.
Disclaimer:
Tot software-ul, materialele de programare sau articolele publicate de Code Farmer Network sunt destinate exclusiv scopurilor de învățare și cercetare; Conținutul de mai sus nu va fi folosit în scopuri comerciale sau ilegale, altfel utilizatorii vor suporta toate consecințele. Informațiile de pe acest site provin de pe Internet, iar disputele privind drepturile de autor nu au legătură cu acest site. Trebuie să ștergi complet conținutul de mai sus de pe calculatorul tău în termen de 24 de ore de la descărcare. Dacă îți place programul, te rugăm să susții software-ul autentic, să cumperi înregistrarea și să primești servicii autentice mai bune. Dacă există vreo încălcare, vă rugăm să ne contactați prin e-mail.
Mail To:help@itsvse.com