SIDCODE Life is..... SIDCODE Life is.....

HIVE THRIFT를 이용한 JAVA EXAMPLE (eclipse maven plugin) Hive Server 켜기 두가지 방법HIVE_PORT는 원하는 포트로 적용 (콘솔)$ HIVE_PORT=3460 hive --service server hadoop 실행시 같이 실행 $ vi $HADOOP_HOME/sbin/start-all.sh (hadoop 2.2.0 기준입니다.) 스크립트 제일 아래 추가 # start hive serverif [ -f "${HIVE_HOME}"/bin/hive ]; then HIVE_PORT=3406 "${HIVE_HOME}"/bin/hive --service hiveserver &fi 이클립스 maven plugin이 설치되었다는 전제로 진행합니다. ( 참고 : htt..

HIVE with MySql hive 다운로드및 설치$ su - hadoop$ wget http://apache.mirror.cdnetworks.com/hive/hive-0.12.0/hive-0.12.0-bin.tar.gz 압축해제 및 hadoop 이있는 디렉토리로 이동 (복사 위치는 본인이 원하는곳에 하면됨)$ tar xvzf hive-0.12.0*.tar.gz && cp -R hive-0.12.0-bin /usr/local/hadoop/hive profile에 hive_home 과 PATH 처리$ vi .profile 추가 내용 # hive homeexport HIVE_HOME=/usr/local/hadoop/hive # path export PATH=$PATH:$HADOOP_HOME/bin:$HAD..

wordcount maven java 관련 참고사이트http://hadoopi.wordpress.com/2013/05/25/setup-maven-project-for-hadoop-in-5mn/위 사이트에서 maven jar파일까지 완성 하시면됩니다. # HDFS구성$ hadoop dfs -mkdir /input$ hadoop dfs -mkdir /oupt # /home/hadoop/input/안에 test01 (카운트 할 내용이들어간 파일)$ mkdir ~/input$ vi /home/hadoop/input/test01-내용hadoop,sidcode,haddop,sidcode,sidcode,feirei # 생성한 파일 hdfs 로 넣기$ hadoop dfs -put /home/hadoop/input/te..

0. eclipse kepler 다운로드 (실행후 메뉴가 안보이는분은 http://sidcode.tistory.com/214 참조)http://www.eclipse.org/downloads/ 1. 마켓프라이스 이동 이클립스 실행 > help > Eclipse MarkPlace...> maven 검색 >Maven Integration for Eclipse(Juno and newer)1.4 install > 두가지나오는거 모두 설치 2. 설치완료 설치완료 후 이클립스 재실행프로젝트 생성에서 "maven" > maven 프로젝트로 생성 되면 끝.

우분투 13.10 에 하둡 2.2.0 설치 single-node setup 0. 하둡 다운로드 및 유저 설치 디렉토리로 이동 시키기 $ wget http://mirror.apache-kr.org/hadoop/common/stable/hadoop-2.2.0.tar.gz 다운로드 후 $ sudo tar xvzf hadoop-2.2.0.tar.gz && sudo cp -r hadoop-2.2.0 /usr/local/hadoop 1. JDK 7.0 설치 - hadoop 을 돌리기위하여 설치$ sudo apt-get install openjdk-7-jdk 2. 계정생성 - 하둡 관련 그룹및 계정을 생성하여 관리의 용의성 등을 활용 하기 위함 - 그룹 : hadoop, 계정 : hadoop$ sudo addgrou..