[Operating System Concepts 10th] 10. Virtual Memory 리뷰
OS
프로세스 전체를 메모리에 올리지 않고도 실행을 가능하게 하는 가상 메모리의 원리와 이점을 살펴보고, 요구 페이징 기법과 쓰기 시 복사(Copy-on-Write)의 동작 메커니즘을 알아본다. 아울러 물리 프레임이 부족할 때 발생하는 페이지 교체 알고리즘(FIFO, OPT, LRU 등...
최근 포스트
[Spark] 스칼라를 이용한 Dataset 관련 기능 정리
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. spark 예제를 통해 dataset에 대해 알아봅니다.
[Operating System Concepts 10th] 9. Main Memory 리뷰
OS
Operating System Concepts 10th 9장 메인 메모리(Main Memory)를 다룬다. 주소 바인딩, MMU, 연속 메모리 할당과 외부 단편화 문제를 살펴보고, 이를 극복하기 위한 페이징 기법, TLB 캐시, 다양한 페이지 테이블 구조 및 스와핑까지 메모리 관리...
[Spark] 스파크 SQL 정리 (실행방법, 테이블, 뷰, 데이터베이스, 함수, 서브쿼리)
spark
Spark The Definitive Guide 책을 중심으로 스파크 SQL의 핵심 개념과 실습 예제를 정리합니다. CLI·프로그래밍 인터페이스·쓰리프트 서버를 통한 쿼리 실행부터 카탈로그, 관리형·외부 테이블, 뷰, 데이터베이스 관리, 그리고 복합 데이터 타입·UDF·서브쿼리 활...
Window10 또는 Ubuntu 22.04 내 도커(docker) 설치하기
tipsdocker
윈도우10 또는 우분투 내에서 도커를 설치하는 과정을 정리할 필요가 있다고 느꼈습니다. 설치에 도움이 되었으면 합니다.
[Spark] SQLite, PostgreSQL, 텍스트 파일 데이터소스 읽고 쓰는 방법
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. spark 예제를 통해 데이터소스에 대해 알아봅니다.
우분투(Ubuntu) 22.04 테마부터 필수 프로그램 설치까지 모든 것
tips
우분투를 여러 번 포맷하면서 다시금 정리할 필요성을 느꼈습니다. 제가 쓰는 환경에 대해 처음부터 끝까지 모든 것을 다루겠습니다.
[Spark] CSV, JSON, Parquet, SQL DB 등 데이터소스에 대한 옵션 정리
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. 데이터 소스에 대한 모드, 옵션들을 알아봅니다.