따라하며 배우는 하둡과 빅데이터 분석 실무 또는 사진 잘 찍고싶다 > 도서

따라하며 배우는 하둡과 빅데이터 분석 실무



도서명 : 따라하며 배우는 하둡과 빅데이터 분석 실무
저자/출판사 : 조나단 오웬스 , 존 렌츠 , 브라이언 페미아노, 에이콘출판
쪽수 : 368쪽
출판일 : 2013-10-31
ISBN : 9788960774865
정가 : 30000

1장 하둡 분산 파일 시스템: 데이터 가져오기와 내보내기
___개요
___하둡 셸 명령어를 사용해 데이터를 내보내고 HDFS로 데이터 가져오기
___분산 복사를 사용한 클러스터 간의 효율적인 데이터 이동
___스쿱을 사용해 데이터를 MySQL에서 HDFS로 가져오기
___스쿱을 사용해 데이터를 HDFS에서 MySQL로 내보내기
___MS-SQL 서버를 위한 스쿱 구성
___데이터를 HDFS에서 몽고DB로 내보내기
___데이터를 몽고DB에서 HDFS로 가져오기
___피그를 사용해 데이터를 HDFS에서 몽고DB로 내보내기
___그린플럼 외부 테이블에서의 HDFS 사용
___데이터를 HDFS로 적재하기 위한 플룸 사용

2장 HDFS
___개요
___HDFS에서 데이터 읽고 쓰기
___LZO를 사용한 데이터 압축
___시퀀스파일로 데이터 읽고 쓰기
___데이터 직렬화를 위한 아파치 에이브로 사용
___데이터 직렬화를 위한 아파치 스리프트 사용
___데이터 직렬화를 위한 프로토콜 버퍼 사용
___HDFS 복제 계수 설정
___HDFS 블록 크기 설정

3장 데이터 추출과 변환
___개요
___맵리듀스를 사용해 아파치 로그를 TSV 포맷으로 변환
___웹 서버 로그에서 봇 트래픽을 필터링하기 위한 아파치 피그 사용
___웹 서버 로그 데이터를 타임스탬프로 정렬하기 위한 아파치 피그 사용
___웹 서버 로그 데이터를 세션화하기 위한 아파치 피그 사용
___아파치 피그 기능 확장을 위한 파이썬 사용
___페이지 뷰를 계산하기 위한 맵리듀스와 보조 정렬 사용
___지리 이벤트 데이터를 정리하고 변환하기 위한 하이브와 파이썬 사용
___시계열 분석을 수행하기 위한 파이썬과 하둡 스트리밍 사용
___출력 파일 이름을 지정하기 위한 맵리듀스의 MultipleOutputs 사용
___지리 이벤트 데이터를 읽기 위한 사용자 정의 하둡 Writable과 InputFormat 생성

4장 하이브와 피그, 맵리듀스를 사용한 공통 태스크 수행
___개요
___HDFS에서 웹로그 데이터와 외부 테이블을 매핑하기 위한 하이브 사용
___웹로그 쿼리 결과로부터 동적으로 테이블을 생성하기 위한 하이브 사용
___웹로그 데이터에서 필드를 연결하기 위한 하이브의 문자열 UDF 사용
___웹로그의 IP를 조인해서 해당 IP에 맞는 국가를 찾기 위한 하이브 사용
___맵리듀스를 사용한 뉴스 아카이브에서의 n-그램 생성
___뉴스 아카이브에서 특정 키워드를 포함하는 라인을 찾기 위한 맵리듀스 분산 캐시 사용
___데이터를 테이블에 적재하고 GROUP BY 절을 갖는 SELECT 문의 연산을 수행하기 위한 피그 사용

5장 고급 조인
___개요
___매퍼에서 맵리듀스를 사용한 데이터 조인
___아파치 피그의 복제 조인을 사용한 데이터 조인
___아파치 피그의 병합 조인을 사용한 정렬 데이터 조인
___아파치 피그의 편향 조인을 사용한 편향 데이터 조인
___지리 이벤트를 분석하기 위한 아파치 하이브 맵 사이드 조인 사용
___지리 이벤트를 분석하기 위한 아파치 하이브 완전 외부 조인 최적화
___외부 키/값 저장소(레디스)를 사용한 데이터 조인

6장 빅 데이터 분석
___개요
___맵리듀스와 컴바이너를 사용해 웹로그 데이터에서 개별 IP 주소 카운트
___지리 이벤트 데이터에서 이벤트 날짜를 변환하고 정렬하기 위한 하이브 날짜 UDF 사용
___지리 이벤트 데이터를 통해 월별 사망 보고서를 작성하기 위한 하이브 사용
___지리 이벤트 데이터의 소스 신뢰성을 검증하기 위한 하이브의 사용자 정의 UDF 구현
___하이브의 맵/리듀스 연산과 파이썬을 사용해 비폭력의 최장 기간 표시
___피그를 사용해 Audioscrobbler 데이터셋에서 가수들의 코사인 유사도 연산
___피그와 datafu 라이브러리를 사용해 Audioscrobbler 데이터셋에서 아웃라이어 제거

7장 고급 빅 데이터 분석
___개요
___아파치 지라프를 이용한 페이지랭크
___아파치 지라프를 이용한 단일 소스 최단 경로 구하기
___분산된 너비 우선 탐색을 수행하기 위한 아파치 지라프 사용
___아파치 머하웃을 이용한 협업 필터링
___아파치 머하웃을 이용한 클러스터링
___아파치 머하웃을 이용한 감성 분류

8장 디버깅
___개요
___리듀스 잡에서 잘못된 레코드 추적을 위한 카운터 사용
___MRUnit을 이용한 맵리듀스 잡의 개발과 테스트
___로컬 모드에서 실행되는 맵리듀스 잡의 개발과 테스트
___잘못된 레코드를 스킵하기 위한 맵리듀스 잡 활성화
___스트리밍 잡에서의 카운터 사용
___디버깅 정보를 표시하기 위한 태스크 상태 메시지 업데이트
___피그 잡을 디버깅하기 위한 illustrate 명령어 사용

9장 시스템 관리
___개요
___의사 분산 모드에서 하둡 시작하기
___분산 모드에서 하둡 시작하기
___기존 클러스터에 새 노드 추가
___안전한 노드 해제
___네임노드 장애 복구
___갱글리아를 사용한 클러스터 상태 모니터링
맵리듀스 잡 매개변수 튜닝

10장 아파치 어큐뮬로를 사용한 퍼시스턴스화
___어큐뮬로에서 지리 이벤트 저장을 위한 로우 키 설계
___지리 이벤트 데이터를 어큐뮬로로 대량으로 가져오기 위한 맵리듀스 사용
___어큐뮬로에서 지리 이벤트 데이터를 입력하기 위한 사용자 정의 필드 제한 설정
___정규식 필터링 이터레이터를 사용한 쿼리 결과 제한
___SumCombiner를 사용해 동일 키의 다른 버전을 위한 사망자 카운트
___어큐뮬로를 사용한 스캔에서의 셀 수준 보안 강화
___맵리듀스를 사용한 어큐뮬로에서의 소스 집계




사진 잘 찍고싶다



도서명 : 사진 잘 찍고싶다
저자/출판사 : 남규한, 혜지원
쪽수 : 272쪽
출판일 : 2013-08-16
ISBN : 9788983797957
정가 : 18000

Part 01. 사진을 위한 마음 준비

Unit 01. 주제를 보는 눈
* 주제란 무엇인가?
* 관심의 대상
프레이밍 // 조리개 // 셔터속도

Unit 02. 이야기를 넣는 방법
* 언어와 이미지
중의적 표현 // 문자언어와 조합하기
* 교감한 후에 찍기
대화하며 찍기 // 다양한 감정 // 계속해서 찍기 // 어린아이 촬영
* 소품 이용하기
* 대상 간의 관계 잡아내기
* 의미 부여하기
* 시사적인 이야기

Unit 03. 소재를 찾는(보는) 방법
* 일상
실내에서 촬영하기
* 다른 방법으로 바라보기
상상력 // 한 발짝 물러서서 바라보기
* 스스로 만들어 내기
* 시각적 유사성 찾아보기
다른 사진 안에서 찾아내는 유사성

Unit 04. 좋은 사진을 위한 준비
* 몸과 마음의 준비
* 순발력
* 배경 준비하고 기다리기


Part 02. 좋은 사진 만들기

Unit 01. 좋은 사진이란?
* 사진의 종류
기록사진 // 살롱 사진 // 다큐 사진 // 상업사진 // 예술사진
* 인상적인 이미지
* 좋은 사진 감상하기

Unit 02. 노출(Exposure)
* 노출의 3요소
* 다이내믹 레인지
* 존 시스템
* 노출 맞추는 방법
* 실제 촬영 시 응용 예

Unit 03. 빛
* 직사광
* 확산광
* 역광
* 새벽의 빛
* 아침의 빛
* 한낮의 빛
* 오후의 빛
* 저녁의 빛
* 밤의 빛
* 하이키 & 로우키

Unit 04. 현실과 가상
* 그림자
* 반영

Unit 05. 구도 이야기
* 장면의 구성
황금분할 // 중앙구도 // 사선구도 // 부소재 이용하기 //
달 이용하기 // 틀의 이용 // 훔쳐보는 듯한 구도 //
다른 사람의 시선으로 // 치우친 구도 // 대칭이 되는 구도

Unit 06. 흥미로운 요소
* 선
선을 만드는 방법 // 앵글에 대한 이해 // 시선의 이동으로 생기는 선
* 패턴
* 질감
* 색
* 형태

Unit 07. 단순화
* 라인의 단순화
* 색의 단순화
* 톤의 단순화
* 형태의 단순화
* 원근의 단순화
* 배경의 단순화

Unit 08. 대비
* 색상의 대비
* 크기의 대비
* 모양의 대비

Unit 09. 초점거리
* 광각의 이용
인물 // 풍경 // 설명하는 사진 // 3차원
* 망원의 이용
각도의 유지 // 원근의 압축

Unit 10. 흑백사진 이야기
* 흑백사진의 묘미
주제의 집중도 // 현실의 왜곡 // 컬러의 자유로움
* 좋은 흑백사진
빛 // 선 // 질감 // 톤 // 대비

부록 후보정
* 왜 RAW 파일인가?
* 노출의 정돈
* 명암의 강조
* 샤픈 효과
* 입자감 주기