ML (13) 썸네일형 리스트형 [딥러닝] Federated Learning vs Distributed Learning Federated Learning: 데이터를 애초에 중앙에서 수집하지 않음 => 컴퓨팅 리소스간에 데이터 불균형 발생가능 Distributed Learning: 중앙에서 수집된 데이터를 여러 컴퓨팅 리소스로 분배함 => 데이터 불균형 발생하지 않음 https://zzaebok.github.io/federated_learning/machine_learning/Federated_Learning/ Federated Learning 정리 zzaebok.github.io [Pytorch] 불필요한 차원 줄이기 - torch.squeeze() 불필요한 차원 줄이기 예시: (4, 1) => (4) https://wikidocs.net/52846 03. 텐서 조작하기(Tensor Manipulation) 2 이어서 텐서를 조작하는 방법을 알아보겠습니다. ####4) 뷰(View) - 원소의 수를 유지하면서 텐서의 크기 변경. 매우 중요함!! 파이토치 텐서의 뷰(View)는 넘 ... wikidocs.net [딥러닝] Resnet - BottleNeck 이해 https://coding-yoon.tistory.com/116?category=825914 [딥러닝] DeepLearning CNN BottleNeck 원리(Pytorch 구현) 안녕하세요. 오늘은 Deep Learning 분야에서 CNN의 BottleNeck구조에 대해 알아보겠습니다. 대표적으로 ResNet에서 BottleNeck을 사용했습니다. ResNet에서 왼쪽은 BottleNeck 구조를 사용하지 않았고, 오른쪽은.. coding-yoon.tistory.com [딥러닝] Inductive bias 란 학습시에 만나보지 못한 상황에 대해서 예측하기 위한 추가적인 가정 https://dacon.io/en/forum/405840?page&dtype&ptype What is inductive bias? dacon.io [딥러닝] Batch / Mini-batch / Stochastic Gradient Descent 비교 https://89douner.tistory.com/43 9. Mini-Batch (데이터가 많은 경우에는 학습을 어떻게 시키나요?) Q. 굉장히 많은 데이터를 학습시키려고 한다면 어떻게 학습시켜야 하나요? 데이터 하나하나 단계적으로 학습시켜야 하나요? 안녕하세요~ 이번시간에도 DNN(Deep Neural Network) 모델을 좀 더 효율적 89douner.tistory.com - Batch Gradient Descent https://better-tomorrow.tistory.com/entry/%EA%B2%BD%EC%82%AC-%ED%95%98%EA%B0%95%EB%B2%95Gradient-Descent 경사 하강법(Gradient Descent) 2022.01.24 - [딥러닝관련/기초 이론] - .. [딥러닝] Learning rate schedule 이란 https://velog.io/@changdaeoh/learningrateschedule [학습률 스케쥴링] Cyclical Learning Rate Schedule - Cosine Decay Restarts / Cosine Annealing 신경망 모델의 성능을 끌어올리는 방법은 매우 다양하다.모델 Architecture 변경최적화 대상 목적함수 커스터마이징학습 데이터 추가Normalization, Regularization 적용Ensemble, Test Time Augumentation(이미지)Opt velog.io [ML] Likelihood와 Posterior 구분 기준 https://aimaster.tistory.com/79 Posterior, Likelihood, Prior 베이즈 정리를 구성하는 Posterior, Likelihood, Prior가 헷갈리는 이유는 각각을 구분하는 기준을 아직 모르기 때문이다. 우선 셋을 구분하기 위해선 문제 해결을 위해 구하고자 하는 대상, 주어진 대 aimaster.tistory.com [ML] 베타분포와 베르누이 가능도 관계 https://pongdangstory.tistory.com/516 [베이지안 통계] 4. 베타분포와 베이지안 추론 실제 데이터를 처리하는데 있어서 베이즈 규칙을 적용하기 위해서는 수학적인 테크닉이 필요하다. 특히, 사전확률의 분포와 사후확률의 분포와 서로 밀접한 관계가 있다면, 반복적으로 베이즈 pongdangstory.tistory.com 이전 1 2 다음