DATA & AI

ResNet152 Scratch 구현: Bottleneck 블록 설계·스킵연결·깊이 확장

code

2022-04-18 2 분 소요

Bottleneck 구조 채널 압축·확장, identity/다운샘플 경로와 layer 스택 구성을 직접 코드로 구현해 깊은 네트워크 학습 안정 원리 이해

paper

2022-04-15 2 분 소요

SENet은 Squeeze와 Excitation이라는 연산작업으로 정보의 압축하고 재조정하여 ILSVRC 2017에서 우승합니다.

paper

2022-04-14 4 분 소요

NFNet은 imagenet 데이터셋에서 배치 정규화없이 ResNet을 학습시켰습니다. 그 결과, imagenet에서 SOTA를 갱신한 모델이 되었습니다.

code

2022-04-14 3 분 소요

LeNet-5 계층(Conv·Subsampling·FC) 흐름을 CIFAR10에 적용하며 증강·학습 루프·역전파 과정을 PyTorch로 단계 구현

paper

2022-04-13 2 분 소요

그 유명한 ResNet은 152층까지 네트워크를 쌓아올리는 데 성공하며 ILSVRC 2015 classification competition에서 우승하게 됩니다. 그리고 처음으로 3.57%의 top5 에러율을 달성했습니다.

code

2022-04-12 2 분 소요

ResNet 잔차 블록 개념과 layer 동결·부분 해제·맞춤 Linear 헤드 교체·학습률 전략으로 소규모 FashionMNIST를 효율 미세조정

paper

2022-04-02 4 분 소요

컨셉 드리프트는 시간이 지남에 따라 예기치 않은 방식으로 변경되는 것을 의미합니다. 서베이 논문 형식으로 작성되었고, 이것을 리뷰해보았습니다.

java

2022-03-31 3 분 소요

OOP는 문제를 여러 개의 객체 단위로 나눠 작업하는 방식으로, 객체들이 서로 유기적으로 상호작용하는 프로그래밍 이론입니다. 상속, 다형성, 추상화, 캡슐화를 다뤘습니다.