Hadoop için API işlemleri - HDFS

Küçük · Yayınlandı 5.07.2019 16:33:58

1. Bağımlılığı tanıtın

Not: Jar paketini manuel olarak içe aktarmanız gerekiyorsa, HDFS jar paketi Hadoop kurulum dizinini paylaşma altında ----

2. Pencere altındaki gelişim tanımı

Hadoop uygulamalarının Linux altında geliştirilmesi önerilir ve uyumluluk sorunu olmaz. Windows'ta bir istemci uygulaması geliştirmek istiyorsanız, aşağıdaki ortamı kurmanız gerekir:

A. Windows'ta bir dizinden bir Hadoop kurulum paketini açın

B. Kurulum paketi altındaki lib ve bin dizinlerini, platformun ilgili Windows sürümü için derlenen yerel kütüphanelerle değiştirin

C. Pencere sistemindeki HADOOP_HOME, açtığınız kurulum paketine yönlendirecek şekilde yapılandırın

D. Windows sisteminin yol değişkenine Hadoop'un bin dizinini ekle

HDFS'yi Java'da çalıştırmak için önce bir istemci örneği almanız gerekir

Giriş görünür.

İşlem hedefimiz HDFS, bu yüzden elde edilen fs nesnesi DistributedFileSystem'in bir örneği olmalı.

Get method: Belirli instance istemci sınıfı nereden geliyor?

- Conf'taki fs.defaultFS parametrelerinden birinin yapılandırma değerine bakılırsa;

Kodumuzda fs.defaultFS belirtmezsek ve proje sınıfyolu altında ilgili bir yapılandırma verilmezse, conf'taki varsayılan değer hadoop jar paketindeki core-default.xml'den gelir ve varsayılan değer şu file:/// olursa, o zaman edinim DistributedFileSystem'in bir örneği değil, yerel dosya sisteminin istemci nesnesi olur;

Belgelerin eklenmesi, silinmesi, değiştirilmesi ve denetimi

Giriş görünür.

HDFS'ye akış üzerinden erişim

Giriş görünür.

[Kaynak] Hadoop için API işlemleri - HDFS

İlgili Yazılar

Görüntülenen bölümler