태그>하둡(총 38개의 글)

'하둡' 관련 최근글

• [Hadoop] 하둡 비정상 종료시 safe mode 종료

  Sigel's house made of ice 。。。  by Sigel|2012/04/19 16:29

  하둡이 정상적으로 종료되지 않아서 막 다뤘더니 다시 뜨질 않는다. 웃긴건 일부 datanode 같은건 정상적인데 job을 실행시키려니 안된다. TㅅT 다른건 잘 되고 job 실행이 안되니 job tracker가 이상한 것 같아서 job tracker 로그를 보니 이런. 2012-04-19 16:03:56,646 INFO org...

  hadoop, 하둡, 종료, SafeMode

• [Hadoop] wrong key class 오류

  Sigel's house made of ice 。。。  by Sigel|2011/08/09 10:02

  어허~ wrong key class라는데. 어디가 문제인지 모르겠다. 11/08/09 09:43:50 INFO mapred.JobClient: map 0% reduce 0% 11/08/09 09:44:00 INFO mapred.JobClient: Task Id : attempt_201108090850_0013_m_000000_0, Status : FAILED java.io.IOException: wrong key class: ..

  hadoop, 하둡, output, key, combiner

• [Hadoop] Mapper/Reducer를 찾지 못 할 때 - NoSuchMethodEx..

  Sigel's house made of ice 。。。  by Sigel|2011/04/28 14:18

  Hadoop 예제가 잘 됐었는데. 어제 뭔가를 손댔는데 동작하지 않는다. 그런데 하루가 지나지도 않았는데 그 뭔가가 기억이 나지 않는다. (이럴 때가 제일 난감 TㅅT) 해당 클래스와 생성자(hadoopSite.WordCount$Map.())가 분명히 있는데 아래처럼 NoSuchMeth..

  Hadoop, 하둡, NoSuchMethodException, Mapper, Reducer

• 

  hadoop - Fully-Distributed Mode

  한뱅  by 한뱅|2010/04/16 19:50

  사실 완전 분산모드에서의 하둡 클러스터 셋팅은 하둡 홈페이지에 기술되어있긴 하다 근데 뭔소린지 잘 모르겠어서 우선 가상 분산모드 기반으로 셋팅을 살짝 바꾸어 보았다. 우선 현재 상황은 clus07과 clus08 두..

  hadoop, 셋팅, fully, distributed, 하둡

• 

  hadoop - Pseudo-Distributed Operation

  한뱅  by 한뱅|2010/04/16 15:00

  하둡의 두번째 동작 모드는 가상 분산모드인다. 이 경우에는 java 프로세스를 복수로 생성하여 localhost에서 job tracker와 namenode를 관리하여 동작하는듯 싶다.(나도 잘 모름) 가상 분산모드 부터는..

  root, 로그인, hadoop, pseudo, 하둡

• hadoop - Standalone Operation

  한뱅  by 한뱅|2010/04/13 13:16

  hadoop의 기본 패키지는 Standalone Operation이 디폴트로 설정되어있다. 이 값을 그대로 복사해서 올바르게 동작하는지 확인해 보자 스탠드 얼론 모드는 디버깅이 용이하다. 아래와 같이 커맨드를 입력한다. $ mkdir input $ cp conf/*.xml input $ bin/hadoop jar ..

  hadoop, ubuntu, 하둡, 우분투

• 

  hadoop 실행을 위한 준비

  한뱅  by 한뱅|2010/04/13 12:51

  2010-04-13 부터 진행 시스템 환경 ::Ubuntu Desktop 9.10JDK6hadoop-0.20.2 - 1. Ubuntu Desktop 9.10 버전을 설치한다 우분투 홈페이지에서 무료로 다운 가능하다.http://www.ubuntu.com/ - 설치후 할 일(회색..

  hadoop, ubuntu, 하둡, 우분투

• IT업계가 사회과학 분야와 산학 연계를 하면 어떨까?

  gimmesilver's blog  by silverbird|2010/04/07 13:57

  사회과학이란 인간과 인간 사이의 관계에서 일어나는 사회 현상과 사회적 행동을 탐구하는 과학의 한 분야이다. 크게보면 인류학, 정치학, 경제학, 심리학 등등이 모두 사회과학 분야에 해당한다. 예전에 '밈은 사기인가?' 란 글에서 한번 언급했듯이 과학이란 관찰된 사실에 대해..

  사회과학, 하둡