[빅데이터] 데이터 유형별 수집기술
빅데이터 데이터 유형별 수집기술 1) 데이터 유형별 수집 기술 정형 데이터 : ETL, FTP, API, DBtoDB, Rsync, Sqoop 비정형 데이터 : 크롤링, RSS, Open API, Scrapy 등 반정형 데이터 : Sensing, Streming, Flume, Scribe, Chukwa 등 ※정형데이터 수집방식 설명 ETL 수집대상 데이터를 추출, 가공하여 데이터 웨어하우스(DW) 및 데이터 마트(DM)에 저장하는 기술 … 더 읽기