태그>하둡(총 38개의 글)

'하둡' 관련 최근글

• 함수형 언어 맵리듀스(MapReduce)

  케찹만땅  by 케찹만땅|2020/06/29 16:20

  스마트폰, SNS, 사물인터넷 확산 등으로 엄청난 양의 데이터가 생산, 유통, 가공, 공유되는 빅데이터 시대에 진입하면서 다양한 속성들을 가진 데이터를 처리하기 위한 새로운 방법이 요구됨에 따라 등장하였으며 Map과 Reduce라는 함수를 기반으로 구현된다. 바야흐로 모..

  빅데이터, 맵리듀스, 하둡, Hadoop, MapReduce

• 

  빅데이터 수집 시스템 구성

  케찹만땅  by 케찹만땅|2020/06/22 16:06

  아파치 스쿱(apache scoop)은 관계형 데이터베이스와 같은 관계형 데이터스토어와 하둡(apache hadoop)간 대량의 데이터를 효과적으로 전송하기 위해 구현된 툴이다. 즉 MySQL, Oracle 환경..

  빅데이터, 하둡, 스쿱, 플룸, 스크래피

• 

  빅데이터 관련 서적

  케찹만땅  by 케찹만땅|2020/06/08 21:43

  빅데이터, 하둡, R, Hadoop

• Apache Tajo Project #1

  늠름하다, 우람궁딩!  by 우람궁딩|2018/11/13 15:20

  하둡 기반 하에서의 데이터 핸들링은 HDFS에 대한 보편적인 기능적 특징을 이해하고 나면 뭔가 이질감이 들게 마련이다하지만, 개발자들은 보다 손쉬운 혹은 보다 익숙한 환경으로 끌어들이고자 하는 노력을 하곤 한다그 결과로 탄생한 프로젝트 중 하나가 바로 "아파치;타..

  hadoop, 하둡, ApacheTajo, database

• Hive를 통한 HDFS접속(R->Hive->HDFS)

  블루오션 [BLUE OCEAN]  by 장땡|2017/08/21 13:29

  library(rJava)library(RJDBC)library(DBI) Sys.setenv("HADOOP_CMD"="/usr/hdp/2.3.2.0-2950/hadoop/bin/hadoop")Sys.setenv("HADOOP_HOME"="/usr/hdp/2.3.2.0-2950/hadoop")S..

  Hive, HDFS, 하둡, 하이브, 하둡데이터접근

• 

  하둡 파일 암호화

  블루오션 [BLUE OCEAN]  by 장땡|2016/12/18 13:57

  KMS(Key Management Server)는암호화 구역에 저장되는 파일은 자동으로 암호화된다. KMS는 암호화 키 저장을 담당한다.KMS에서 저장되는 Key에 대한 REST API 및 액세스 제어를 제공한다. [ 파..

  하둡파일암호화, 파일암호화, 하둡

• 

  빅데이터 시스템 구성도(패키지)

  블루오션 [BLUE OCEAN]  by 장땡|2016/09/07 14:55

  빅데이터 구축은 어떻게 사용하느냐에 따라 구성이나 사용하는 패키지가 다르겠지만오픈소스를 기반으로 일반적인 구성과 일반적인 오픈 패키지로 구성도를 작성해봤다.여기서 약간씩 추가,변경하며 사용한다..

  bigdata, 빅데이터, 하둡, 시스템구성도, 시스템구성

• 

  [위키북스] 시작하세요! 하둡 프로그래밍

  취객의 IT 연구실  by 긍지높은취객|2016/02/27 00:04

  하둡, 하둡프로그래밍, 빅데이터, 위키북스

• SAP ‘하둡 쿼리 처리’ 빨리 더 빨리…

  FCMS-Pusan  by FCMS관리팀|2015/09/16 14:52

  빅데이터 및 클라우드 구현의 만능으로 알려졌던 하둡이 이제는 속도의 문제에서 난제를 안게 됐고, 정형·비정형 데이터 관련 전문기업이 이 하둡 해결을 위해 발벗고 나섰다. 15일 SAP코리아(대표 형원준)은 서울 파크하얏트 호텔 3층에서 기자간담회를 갖고 ‘SAP HANA 보..

  SAP, 하둡

• 빅데이터와 하둡에 관한 9가지 잘못된 속설들

  케찹만땅  by 케찹만땅|2015/07/02 20:17

  1. 데이터 과학자를 구할 수 있다 최근 거래하는 파트너의 한 사전영업 엔지니어는 자사가 데이터 과학자를 찾는데 얼마나 어려움을 겪는지를 이야기했다. 그의 기업에서 원하는 데이터 과학자의 조건에 대해 묻자 수학부문 박사학위를 받고, 컴퓨터 과학 부문 배경, MBA 교육에다..

  빅데이터, 하둡

• SK C&C-美호튼웍스, 하둡 기술개발·지원 협력

  FCMS-Pusan  by FCMS관리팀|2014/08/20 11:02

  SK C&C(대표 정철길)는 미국 호튼웍스와 하둡 기술 사업 관련 양해각서(MOU)를 체결했다고 20일 밝혔다. 호튼웍스는 지난 2011년 야후 소속 하둡 엔지니어들이 독립해 세운 회사로 ▲하둡 상용 플랫폼 개발과 배포 ▲기술 지원 ▲컨설팅 ▲전문 교육을 제공한다. SK C&a..

  호튼웍스, SK씨앤씨, 하둡, hadoop

• 책 - 데이터는 언제나 옳다! 대규모 데이터 처리와 분석

  무재칠시(無財七施)  by 무재칠시|2014/07/03 18:29

  데이터는 언제나 옳다! 대규모 데이터 처리와 분석 실무마이클 마누체흐리 저/정부환,류상호,염화음,이화경 공역 위키북스 | 2014년 05월 이 책은 아무래도 약간은 소프트웨어 개발자들에게 도움이 많겠지만, 비전산 빅데이터 관련 기획 중인 사람에게도 어느 정도 도움이 될 것으로..

  빅데이터, R, 하둡, NoSQL

• [하둡 설치] 하둡 설치 일기 vol.3 (Install Hadoop) 완전 분산모드 설정

  Quixotism  by Kertz|2014/06/10 16:51

  수많은 변수와 환경적 요인 그리고 게으름으로 인해 무려 1년 이상 지난 시기에서 설치 일기 3편을 완성하려 합니다.열심히 따라오시다가 그만 밑 덜 닦인 기분으로 씁쓸히 다른 블로그나 정보사이트를 찾아가셔야 했던 방문자 분들께 진심으로 사과의 말씀 드립니다. 그럼 다시 시..

  hadoop설치, 하둡, 맵리듀스, RHadoop, R하둡

• 

  Rex를 이용한 하둡(Hadoop) 프로비저닝

  코퍼스의 블로그  by 코퍼스|2014/01/13 18:54

  거의 1년간을 불모지로 놔둔 이글루스인데. 오늘 기사 찾아 이글루스에 들어왔다 조금 미안한(?) 감정이 들었다. 작년 10월달쯤 공개 세미나에서 발표한 내용(그리고, 페이스북에서는 공개한)을 여기에도 ..

  하둡, hadoop, 프로비저닝, Rex

• 우분투에 Hadoop설치하기

  블루오션 [BLUE OCEAN]  by 장땡|2013/12/23 19:36

  1. 의존성 패키지/라이브러리 설치(root권한)# apt-get -y install ssh rsync java7-jdk rsync는 다중 하둡 운영 시 하둡 계정을 동기화하기 위한 것이다.# adduser hadoop (비밀번호 설정하고 넘어간다.)# su - hadoop 2. localhost에 대하여 무인증 로그..

  하둡, Hadoop