MySQL 서브쿼리·IN 활용
SQL
실무 적용 및 SQL 코테를 위한 자료입니다.
최근 포스트
MySQL 윈도우 함수 LAG·LEAD
SQL
실무 적용 및 SQL 코테를 위한 자료입니다.
macOS(M1) Hadoop·Spark 단일 노드 설치: JDK·SSH·환경변수·데몬
tipshadoop
M1 macOS에서 JDK 확인→SSH 무암호 설정→Hadoop/HDFS 포맷→Spark 실행까지 단일 노드 개발 환경 구성 절차
스파크 PySpark 추천 시스템 구현 가이드
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. spark 예제를 통해 pyspark를 이용한 간단한 추천 시스템 만드는 것에 대해 알아봅니다.
스파크 정형 스트리밍 + 카프카 연동 실전
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. spark 예제를 통해 아파치 카프카를 이용한 정형 스트리밍 예제에 대해 알아봅니다.
스파크 스트림 처리 입문: 정형 스트리밍 핵심 개념
spark
Spark The Definitive Guide 책을 중심으로 스파크를 요약 및 정리해보았습니다. spark 예제를 통해 스트림 처리 및 정형 스트리밍의 기초 개념 정리에 대해 알아봅니다.
논문 리뷰: Annotating Columns with Pre-trained Language Models (DODUO)
paper
DODUO는 테이블의 전체를 입력으로 받아 테이블의 여러 컬럼 정보들을 이용하여 컬럼 유형과 컬럼 관계 예측을 출력하는 트랜스포머 기반 멀티태스크 학습 아키텍처입니다. 본 논문을 리뷰해보았습니다.
논문 리뷰: Quasar: Resource-Efficient and QoS-Aware Cluster Management
paper
퀘이사(quasar) 클러스터 관리자는 각 워크로드에 대한 성능 및 QoS 제약 조건을 충족하면서 리소스 활용을 극대화해줍니다. 퀘이사 논문을 개인 공부 및 리뷰를 위해 써보았습니다.