뇌운동일지

BigData 본문

BigData/개념

BigData

purpleduck 2020. 6. 9. 12:42

Hadoop : 저장 

기초명령 

워드카운트

(- 자바로 만들 수도 있고, 파이썬으로도 만들 수도 있다. 스크립트 명령어로도 만들 수 있음 (- 아마존을 분석 ))

정렬 

 

R : 분석 -> 시각화

요즘 활용도가 높다

 

수집 (크롤링) 

jQuery, Ajax

 


bigdata

: 기존의 방법으로 처리하기 힘든 대용량 데이터 ( 실시간 ... ) 

: 기존의 데이터와 상이한 구조를 가지는 데이터 ( log 파일, 문자 및 데이터 ... ) 



수집 -> 저장 -> 분석 -> 시각화 



hadoop eco system 

'BigData > 개념' 카테고리의 다른 글

Data에 대해서  (0) 2020.06.30
Comments