HDFS を使用する

VPC環境で利用できます。

Data ForestでHDFSを活用する方法を説明します。

HDFSネームスペース

Data Forestで提供するHDFSは、NameNodeサーバ情報(ホスト名、ポート)を利用してHDFSにアクセスする代わりに、HDFSの論理名であるネームスペースを利用してHDFSにアクセスします。
Data Forestで提供するHDFSネームスペースは「koya」、「tata」です。

# HDFS NAMESPACE : koya
hdfs://koya/<hdfs path>

# HDFS NAMESPACE : tata
hdfs://tata/<hdfs path>

ネームスペースQuota情報の確認

アカウントの詳細情報領域で、各アカウントに設定されたHDFS Quota情報が確認できます。

1. NAVERクラウドプラットフォームコンソールで、Services > Big Data & Analytics > Data Forest > Accountメニューを順にクリックします。
2. アカウントの詳細情報を確認するためにアカウント領域をクリックします。
   • nameQuota(ファイル数)：HDFSネームスペースで使用できるファイル数
   • spaceQuota(容量)：HDFSネームスペースで使用できる容量
     

ネームスペースQuota設定の変更

ネームスペースのファイル数と容量を変更する方法は以下のとおりです。

1. NAVERクラウドプラットフォームコンソールで、Services > Big Data & Analytics > Data Forest > Accountメニューを順にクリックします。
2. アカウントを選択して [アカウント設定の変更] > [HDFS quotaを変更] ボタンをクリックします。
   
3. 変更するネームスペースを選択した後、変更後のファイル数と変更後のファイル容量を入力して [変更] ボタンをクリックします。
   

HUEアプリでHDFSにファイルをアップロード

Apache HUEアプリを利用してHDFSにファイルをアップロードする方法は以下のとおりです。

1. HUEアプリにログインします。
   • Data Forestアカウントとパスワードでログイン
2. 画面右上の [Upload] ボタンをクリックします。
   
3. [Select Files] ボタンをクリックします。
4. ファイルをアップロードします。
   
5. ファイルのアップロードが完了したら、HDFS上にアップロードされたファイルリストが表示されたか確認します。
   <例> bank.csvファイルをサンプルとしてアップロードした場合
   

HUEアプリでHDFSファイルをダウンロード

HUEアプリでHDFSファイルをダウンロードする方法は以下のとおりです。

1. HUEアプリにログインします。
   • Data Forestアカウントとパスワードでログイン
2. 画面左側メニューの [Files] をクリックします。
3. ダウンロードするファイルを選択して [Actions] > [Download] をクリックします。
   <例> 「bank.csv」ファイルを選択した場合