Šis raksts ir mašīntulkošanas spoguļraksts, lūdzu, noklikšķiniet šeit, lai pārietu uz oriģinālo rakstu.

Skats: 9718|Atbildi: 3

Es pirmo reizi uzzināju par Hadoop un HBase lielajiem datiem

[Kopēt saiti]
Publicēts 27.12.2018 15:04:25 | | | |
Nesen uzņēmumam ir jāizmanto hbase, lai glabātu lielu datu apjomu, un vadītājs mums ir mācījis par attiecīgajām zināšanām.
Vide:

Sistēma:

CentOS Linux laidiens 7.5.1804 (kodols)

Pavēlēt:



Java versija:

Java versija "1.8.0_191"
Java(TM) SE izpildlaika vide (būvējums 1.8.0_191-b12)
Java HotSpot(TM) 64 bitu servera VM (būvējums 25.191-b12, jauktais režīms)


Pavēlēt:



Hadoop versija:

Hadoop 2.8.3
GraušanaHipersaites pieteikšanās ir redzama.-r b3fe56402d908019d99af1f1f4fc65cb1d1436a2
Sastādīja jdu 2017-12-05T03:43Z
Sastādīts ar protoc 2.5.0
No avota ar kontrolsummu 9ff4856d824e983fa510d3f843e3f19d
Šī komanda tika izpildīta, izmantojot /home/itsvse/apache/hadoop-2.8.3/share/hadoop/common/hadoop-common-2.8.3.jar


Pavēlēt:




HBase versija:

2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Fri Oct 26 19:27:03 PDT 2018

hbase shell komanda:


HBase apvalku var sākt, izmantojot šādu komandu
[root@master ~]# atrast / -nosaukums "hbase"
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/src-html/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/testapidocs/src-html/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/src-html/org/apache/hadoop/hbase
/home/itsvse/apache/hbase-2.1.1/docs/apidocs/src-html/org/apache/hbase
/home/itsvse/apache/hbase-2.1.1/bin/hbase
/home/itsvse/apache/hbase-2.1.1/lib/ruby/hbase
[root@master ~]# cd /home/itsvse/apache/hbase-2.1.1/bin/
[root@master bin]# ./hbase apvalks
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/home/itsvse/apache/hadoop-2.8.3/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/home/itsvse/apache/hbase-2.1.1/lib/client-facing-thirdparty/slf4j-log4j12-1.7.25.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindingspaskaidrojumam.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]

HBase apvalks
Izmantojiet "palīdzību", lai iegūtu atbalstīto komandu sarakstu.
Izmantojiet "iziet", lai izietu no šīs interaktīvās čaulas.
Lai uzzinātu, lūdzu, apmeklējiet:http://hbase.apache.org/2.0/book.html#shell
Versija 2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Fri Oct 26 19:27:03 PDT 2018
Aizņēma 0.0050 sekundes                                                                                                                                                            
hbase(galvenais):001:0>
hbase(galvenais):002:0*
hbase(main):003:0* versija
2.1.1, rb60a92d6864ef27295027f5961cb46f9162d7637, Fri Oct 26 19:27:03 PDT 2018
Aizņēma 0.0006 sekundes                                                                                                                                                            
hbase(galvenais):004:0>


Ievads

Pēc tam, kad Hadoop instalēšana ir veiksmīgi sākta, palaidiet komandu jps, lai pārbaudītu, vai process sākas veiksmīgi, ja tas ir veiksmīgs (nav pārbaudīts).

[hadoop@master ~]$jps
Parādīsies masternode:
NameNode
Darba izsekotājs
SecondaryNameNode

parādās slave1 mezgls:
DateNode
Uzdevumu izsekotājs

Parādās slave2node:
DateNode
Uzdevumu izsekotājs


HBase versija atbalstīta Hadoop versija

S apzīmē atbalstu
X netiek atbalstīts
NT nozīmē bez testa



Atsauces saites:Hipersaites pieteikšanās ir redzama.

Dažas HBase Shell pamata darbības komandas ir uzskaitītas šādi:

vārdsKomandu izteiksmes
Uzziniet, kādas tabulas pastāvSaraksts
Tabulas izveideizveidot 'tabulas nosaukums', 'kolonnas nosaukums 1', 'kolonnas nosaukums 2', 'kolonnas nosaukums N'
Ieraksta pievienošanaievietojiet 'tabulas nosaukums', 'rindas nosaukums', 'kolonnas nosaukums:', 'vērtība'
Skatīt ierakstuIegūt 'tabulas nosaukums', 'rindas nosaukums'
Kopējā ierakstu skaita skatīšana tabulācount 'tabulas nosaukums'
Ieraksta dzēšanasvītrot "tabulas nosaukums", "rindas nosaukums", "kolonnas nosaukums"
Tabulas dzēšanaTabula ir jābloķē, pirms tabulu var izdzēst, pirmais solis ir atspējot 'tabulas nosaukumu' Otrais solis ir atmest 'tabulas nosaukumu'
Skatīt visus ierakstusSkenēt "tabulas nosaukums"
Skatīt visus datus noteiktā tabulas kolonnāskenēt "tabulas nosaukums" , ['kolonnas nosaukums:']
Ieraksta atjaunināšanaTas ir pārrakstīt un atgriezties


Saprast

Hadoop Distributed File System (HDFS), HBase ir datu glabāšanas projekts, kura pamatā ir Hadoop, un strops tiek izmantots datu analīzei.

(Beigas)






Iepriekšējo:Vim instalēšana CentOS 7 (nav instalēta pēc noklusējuma)
Nākamo:Microsoft 2018 Jaungada vakara dāvanu pakete sausās preces
 Saimnieks| Publicēts 28.12.2018 15:15:53 |
Hadoop tīmekļa porta ievads:Hipersaites pieteikšanās ir redzama.
Saites uz jaunāko versiju:Hipersaites pieteikšanās ir redzama.

Dēmons
Piezīmes
NameNode
Noklusējuma HTTP ports ir 50070.
Resursu pārvaldnieks
Noklusējuma HTTP ports ir 8088.
MapReduce JobHistory serveris
Noklusējuma HTTP ports ir 19888.

HBase Web noklusējuma ports ir: 16010


Publicēts 06.01.2019 21:32:01 |
Altāra meistars QQ dod savienojumu
 Saimnieks| Publicēts 05.07.2019 12:06:12 |


Hadoop-3.1.1+ jau atbalsta HBase-2.2.x.

2019. gada 6. februārī tika izlaista Hadoop versija 3.1.2

Hipersaites pieteikšanās ir redzama.
Atruna:
Visa programmatūra, programmēšanas materiāli vai raksti, ko publicē Code Farmer Network, ir paredzēti tikai mācību un pētniecības mērķiem; Iepriekš minēto saturu nedrīkst izmantot komerciāliem vai nelikumīgiem mērķiem, pretējā gadījumā lietotājiem ir jāuzņemas visas sekas. Informācija šajā vietnē nāk no interneta, un autortiesību strīdiem nav nekāda sakara ar šo vietni. Iepriekš minētais saturs ir pilnībā jāizdzēš no datora 24 stundu laikā pēc lejupielādes. Ja jums patīk programma, lūdzu, atbalstiet oriģinālu programmatūru, iegādājieties reģistrāciju un iegūstiet labākus oriģinālus pakalpojumus. Ja ir kādi pārkāpumi, lūdzu, sazinieties ar mums pa e-pastu.

Mail To:help@itsvse.com