Hue 설치(하둡 관리 기능)
By 블루오션 [BLUE OCEAN] | 2017년 7월 26일 |
![Hue 설치(하둡 관리 기능)](https://img.zoomtrend.com/2017/07/26/c0093283_59786147e43a5.png)
설치환경 :CentOS Linux release 7.3.1611 (Core) Python2.7 0. 기본 설치 패키지설치하다 에러나면 의존성 파일이 무엇인지 확인 후 설치해준다.yum install ant python-devel krb5-devel krb5-libs libxml2 python-lxmlyum install libxslt-devel mysql-devel openssl-devel libgsasl-develyum install sqlite-devel openldap-develyum install gmp-develyum install java-1.8.0-openjdk* 1. Hue 다운로드최신 버전을 다운로드 했다.http://gethue.com/hue-4-and-its-new
HDFS NFS gateway 사용하기
By 블루오션 [BLUE OCEAN] | 2017년 7월 21일 |
![HDFS NFS gateway 사용하기](https://img.zoomtrend.com/2017/07/21/c0093283_5971cab48556c.png)
hadoop을 사용하다보면 상당히 많고 큰 용량의 파일이 등록된다. 파일을 hadoop명령을 통하여 등록할 수 있지만 상당히 느리고 명령을 실행하는게 귀찮은 일이다. 이때 NFS Gateway를 이용하면 cp명령으로 쉽게 파일을 등록할 수 있다.FUSE(Filesystem in Userspace)를 통한 마운트 방식도있는데 좀 복잡하다. 아래는 환경 구축 절차이다. 1. 기존 서비스 중지# service nfs stop (yum -y install nfs-utils)# service rpcbind stop (yum -y install rpcbind)portmap도 없으면 설치(yum -y install portmap) 2. portmap 서비스 실행# hdfs start portmap 3. nfsd
근황
By 새퍼 양파의 런던 일기 | 2012년 10월 21일 |
* 내일 뉴욕 간다. 화요일부터 목요일까지 Hadoop World 2012, Strada 컨퍼런스가 뉴욕에서 있다. 하둡 요즘에 완전 떠서 참가 인원도 왕창 늘었다. 쉐라톤 호텔에서 크게 한단다. 나도 쉐라톤 호텔에 방 잡았다. 내 성향 고려할 때 호텔에서 나가지도 않고 그냥 위아래층만 왔다갔다 하다가 올 가능성 약 85%. * 난 진짜 뉴욕 말고 다른 데 좀 가고 싶다구 ㅡ.ㅜ 미국이 이번으로 세번째인데 뉴욕만 세번째다. * 작년인가 비행기 타는데 한국 신혼부부를 봤다. 어디서 어디로 가는 거였는지는 모르겠다. 신부가 되게 예뻤지만 좀 깍쟁이 같았고 남자는 그냥 보통 한국 남자였다. 그 둘은 비행기 기내부터 시작해서 기내식도 다 사진찍고, 그냥 서 있을 때의 창문 밖 공항 풍경부터 착륙할 때까지