이글루스!! 밸리 » 태그 » hadoop

태그>hadoop(총 25개의 글)

'hadoop' 관련 최근글

In Mapper Combiner

gimmesilver's blog by silverbird|2010/12/04 18:16
MapReduce 프로그램에서는 mapper에서 reducer로 전달되는 데이터 양을 줄이는 것이 매우 중요한 성능 최적화 요소이다. 그리고 이를 위해 하둡에서는 Combiner라는 인터페이스를 제공한다. Combiner는 쉽게 말해 local reducer 이다. 즉, 각 mapper 마다 자신이 ..
hadoop, cascading, InMapperCombiner
Social Network Analysis with Hadoop

impro by impro|2010/08/03 20:30

Hadoop, SocialNetwork
Hadoop PIG & Twitter

impro by impro|2010/08/01 07:13

Hadoop, PIG
Hadoop Architecture

impro by impro|2010/07/11 18:20
MapReduce Hadoop 완벽가이드
Hadoop, Cloude
hadoop - Fully-Distributed Mode

한뱅 by 한뱅|2010/04/16 19:50
사실 완전 분산모드에서의 하둡 클러스터 셋팅은 하둡 홈페이지에 기술되어있긴 하다 근데 뭔소린지 잘 모르겠어서 우선 가상 분산모드 기반으로 셋팅을 살짝 바꾸어 보았다. 우선 현재 상황은 clus07과 clus08 두..
hadoop, 셋팅, fully, distributed, 하둡
hadoop - Pseudo-Distributed Operation

한뱅 by 한뱅|2010/04/16 15:00
하둡의 두번째 동작 모드는 가상 분산모드인다. 이 경우에는 java 프로세스를 복수로 생성하여 localhost에서 job tracker와 namenode를 관리하여 동작하는듯 싶다.(나도 잘 모름) 가상 분산모드 부터는..
root, 로그인, hadoop, pseudo, 하둡
hadoop - Standalone Operation

한뱅 by 한뱅|2010/04/13 13:16
hadoop의 기본 패키지는 Standalone Operation이 디폴트로 설정되어있다. 이 값을 그대로 복사해서 올바르게 동작하는지 확인해 보자 스탠드 얼론 모드는 디버깅이 용이하다. 아래와 같이 커맨드를 입력한다. $ mkdir input $ cp conf/*.xml input $ bin/hadoop jar ..
hadoop, ubuntu, 하둡, 우분투
hadoop 실행을 위한 준비

한뱅 by 한뱅|2010/04/13 12:51
2010-04-13 부터 진행 시스템 환경 ::Ubuntu Desktop 9.10JDK6hadoop-0.20.2 - 1. Ubuntu Desktop 9.10 버전을 설치한다 우분투 홈페이지에서 무료로 다운 가능하다.http://www.ubuntu.com/ - 설치후 할 일(회색..
hadoop, ubuntu, 하둡, 우분투
Hadoop the Definitive Guide vs. Pro Hadoop

gimmesilver's blog by silverbird|2010/03/01 18:51

hadoop
[Hadoop]Oracle을 사용해 입출력하는 Map-Reduce

개발을 통한 자기수양 - benelog by 정상혁|2009/03/25 08:03
Hadoop의 Map-Reduce처리에서는 DB를 바로 연결해서 처리할 수 있는 DBInputFormat, DBOutputFormat의 클래스가 제공되고 있습니다. 그러나 이 클래스들은 이름이 'DB'가 붙어있는 것이 무색하게 Oracle과 연결해서 사용해보면 에러가 납니다. DBInputFormat..
hadoop, oracle, Springbatch, DBInputFormat, DBOutputFormat

1 2