Boaz/Data Engineering2 Hadoop/Spark 이론 정리 및 예제 안녕하세요BOAZ 방학 Adv 세션 발표를 하며 준비했던 자료를 포스팅해보려고 합니다제가 담당한 부분은 Hadoop/Spark여서 이 자료를 업로드합니다 ㅎㅎSpark의 경우 학기 Base 세션 발표 때 했던 내용이랑 유사해서 생략합니다. Spark 포스팅:https://uni-datastudy.tistory.com/87 Apache Spark RDD/Dataframe 정리안녕하세요BOAZ 학기 Base 세션 발표를 하며 준비했던 자료를 포스팅해보려고 합니다제가 담당한 부분은 Spark RDD/DataFrame 이여서 이 자료를 업로드합니다 ㅎㅎ 목차1. Apache Spark의 개념과 등장uni-datastudy.tistory.com 목차1. Hadoop(1) Hadoop의 정의(2) Hadoop.. 2025. 2. 4. Apache Spark RDD/Dataframe 정리 안녕하세요BOAZ 학기 Base 세션 발표를 하며 준비했던 자료를 포스팅해보려고 합니다제가 담당한 부분은 Spark RDD/DataFrame 이여서 이 자료를 업로드합니다 ㅎㅎ 목차1. Apache Spark의 개념과 등장 배경(1) Apache Spark의 등장 배경(2) Apache Spark(3) Apache Spark의 아키텍처2. RDD, DataFrame(1) RDD (Resilient Distributed Dataset)(2) DataFrame(3) Dataset 1. Apache Spark의 개념과 등장 배경 Apache Spark의 등장 배경초기에는 하둡의 맵리듀스(MapReduce) 모델이 대규모 데이터 처리에 널리 사용맵리듀스의 제한된 프로그래밍 모델과 반복적 작업에서의 비.. 2024. 9. 12. 이전 1 다음