HDFS 사용

VPC 환경에서 이용 가능합니다.

Data Forest에서 HDFS를 활용하는 방법을 설명합니다.

HDFS 네임스페이스

Data Forest에서 제공하는 HDFS는 NameNode 서버 정보(호스트명, 포트)를 이용하여 HDFS에 접근하는 대신, HDFS의 논리 이름인 네임스페이스를 이용하여 HDFS에 접근합니다.
Data Forest에서 제공하는 HDFS 네임스페이스는 'koya', 'tata'입니다.

# HDFS NAMESPACE : koya
hdfs://koya/<hdfs path>

# HDFS NAMESPACE : tata
hdfs://tata/<hdfs path>

네임스페이스 Quota 정보 확인

계정 상세 정보 영역에서 각 계정에 설정된 HDFS Quota 정보를 확인할 수 있습니다.

1. 네이버 클라우드 플랫폼 콘솔에서 Services > Big Data & Analytics > Data Forest > Accounts 메뉴를 차례대로 클릭해 주십시오.
2. 계정 상세 정보를 확인하기 위해 계정 영역을 클릭해 주십시오.
   • name quota(파일 개수): HDFS 네임스페이스에 사용할 수 있는 파일 개수
   • space quota(용량): HDFS 네임스페이스에서 사용할 수 있는 용량
     

네임스페이스 Quota 설정 변경

네임스페이스의 파일 개수와 용량을 변경하는 방법은 다음과 같습니다.

1. 네이버 클라우드 플랫폼 콘솔에서 Services > Big Data & Analytics > Data Forest > Accounts 메뉴를 차례대로 클릭해 주십시오.
2. 계정을 선택하고 [계정 설정 변경] > HDFS Quota 변경 버튼을 클릭해 주십시오.
   
3. 변경하고자 하는 네임스페이스를 선택하고 변경할 파일 개수와 변경할 파일 용량을 입력 후, [변경] 버튼을 클릭해 주십시오.
   

Hue 앱으로 HDFS에 파일 업로드

Apache Hue 앱을 이용하여 HDFS에 파일을 업로드하는 방법은 다음과 같습니다.

1. Hue 앱에 로그인해 주십시오.
   • Data Forest 계정과 패스워드로 로그인
2. 화면 우측 상단의 [Upload] 버튼을 클릭해 주십시오.
   
3. [Select Files] 버튼을 클릭해 주십시오.
4. 파일을 업로드해 주십시오.
   
5. 파일 업로드가 완료되면 HDFS 상에 업로드된 파일 목록이 나타났는지 확인해 주십시오.
   <예시> bank.csv 파일을 샘플로 올린 경우
   

Hue 앱에서 HDFS 파일 다운로드

Hue 앱에서 HDFS 파일을 다운로드하는 방법은 다음과 같습니다.

1. Hue 앱에 로그인해 주십시오.
   • Data Forest 계정과 패스워드로 로그인
2. 화면 좌측 메뉴의 [Files] 를 클릭해 주십시오.
3. 다운로드 받을 파일을 선택하고 [Actions] > Download를 클릭해 주십시오.
   <예시> 'bank.csv' 파일을 선택한 경우