728x90
이번 학기에 분산시스템을 배우게 되었는데 교수님께서 Hadoop을 이용하여 수업을 하신다고 하셨다. 여기서 하둡이란 대용량의 데이터를 적은 비용으로 더 빠르게 분석 할수 있는 플랫폼이고 실무에서도 많이 쓰이는 툴 중 하나이다. 대용량 파일 저장하는 하둡 분산파일 시스템(HDFS), 저장된 분산 파일을 분산된 서버의 CPU와 메모리 자원을 이용하여 분석하는 맵리듀스(Mapreduce)로 구성되어 있다. 하지만 요즘은 맵리듀스 대신 스파크(Spark)를 많이 쓰는 추세이고 성능면에서 스파크가 더 좋기에 많이 쓰인다.
'4학년 공부 과정 > 분산 데이터베이스' 카테고리의 다른 글
| 하둡(Hadoop) - NoSQL Database, HBase - 1 (2) | 2023.05.24 |
|---|---|
| 하둡(Hadoop) - 네임노드, 세컨더리 네임노드, 데이터노드 및 장애대응 (0) | 2023.04.28 |
| 하둡(Hadoop) - 하둡 분산 파일시스템(HDFS) (0) | 2023.03.12 |
| 하둡(Hadoop) - 맵 리듀스 (0) | 2023.03.11 |
| 하둡(Hadoop) 개요 (0) | 2023.03.11 |