Hadoop

Apache Iceberg의 아키텍처와 핵심 기능(Time Travel, Schema Evolution, Partition Evolution)을 분석하고, Spark/Trino 연동과 프로덕션 운영 전략을 다룹니다.

HDFS 용량 관리, YARN 큐 설계, MapReduce 잡 튜닝 등 하둡 클러스터를 안정적으로 운영하기 위한 실전 기준과 체크리스트.

Hadoop의 핵심 구성 요소인 HDFS, MapReduce, YARN의 아키텍처와 동작 원리를 이해하고, 클러스터 구축부터 성능 튜닝, 모니터링까지 실전 운영 노하우를 다루는 종합 가이드.

HBase의 데이터 모델과 아키텍처를 이해하고, 테이블 설계, RowKey 전략, 읽기/쓰기 성능 최적화, Region 관리, 모니터링까지 실전 운영에 필요한 모든 것을 다루는 가이드.

HDFS의 핵심이 되는 NameNode와 DataNode의 아키텍쳐 그리고 각각의 역할과 기능에 대해서 알아봅니다.

Block 기반 File System에 대해서 알아보고, HDFS와 비교해봅니다.

Hadoo에서 동작하여 클러스터 자원관리와 분산처리 어플리케이션을 실행할 수 있는 플랫폼인 YARN(Yet Another Resource Negotiator)에 대해서 알아봅니다.

HBase fully distributed mode를 Ubuntu 22.04에 설치하는 법을 알아봅니다.

HBase 에서 테이블 생성시 presplit 하는 방법을 알아본다.

Hadoop 3.4를 Ubuntu22.04에서 build하는 방법을 알아본다.

Hadoop 3.4 (Non Secure) version을 Ubuntu에 설치하는 방법을 알아보겠습니다.

apache Zookeeper를 Ubuntu22.04에서 build하는 방법을 알아본다.

HBase와 Hive의 연동 방법을 알아본다.

Spark on YARN을 설치하는 법을 알아본다.

Apache Hive 설치 방법을 알아본다

Apache Hive 설치 방법을 알아본다

Hadoop MapReduce프레임워크를 이용하는 대표 예제인 Word Count를 실행하는 법에 대해서 알아보겠습니다

Hadoop에 Kerberos 보안을 적용하는 법을 알아본다.

HBase에 Kerberos 보안을 적용하는 법을 알아본다.

YARN 에 Kerberos 보안을 적용하는 법을 알아본다.

Zookeeper 에 Kerberos 보안을 적용하는 법을 알아본다.

Hadoop-Client NoClassDefFoundError 발생시 해결 방법

java hadoop client 사용법