hadoop 친해지기

Apache™ Hadoop®친해지기 Day 1

Apache Hadoop• Hadoop은 아파치 재단이 지원하는 비영리 프로젝트의 하나

• Hadoop Common 하둡 공통 패키지HDFS, MapReduce 엔진, 자바 명령어 등

• Hadoop Distributed File System (HDFS™)

• Hadoop YARN 작업 스케쥴링과 클러스터 자원 관리

• Hadoop MapReduce YARN에 기반을 둔 대용량 데이터 병렬 처리 시스템

확대된 활용성1.0에서 2.0으로 > 파일 수준 처리에서 그 이상으로 http://hortonworks.com/hadoop/yarn/

하둡에 의존하는 다양한 앱http://hortonworks.com/hadoop/yarn/

하둡에 의존하는 데이터 중심 앱

http://www.infoworld.com/d/big-data/big-data-showdown-cassandra-vs-hbase-239592

http://www.slideshare.net/madvirus/hive-29724108

인텔의 활용 사례

HDFS? 맵리듀스?http://en.wikipedia.org/wiki/File:Hadoop_1.png

보관

분석

One or few masters and many slaves.컴퓨터 클러스터

정리하고(Map) 간추리기(Reduce)맵리듀스의 기반인 HDFS는 이름 그대로 파일 단위 처리를 지원

Word Count Example

Hadoop Demo

– 끝

‘수고하셨습니다. ^.^’

Software