𝄢 𝄢

오늘은 코드 에디터 VSCode에서 원격 서버에 연결하여 서버에 있는 코드를 수정하려고 한다. 설정하는 법은 매우 간단하다. 우선적으로 할 일은 VSCode의 extension 으로 "Remote-SSH"를 설치하는 것이다. 그 다음 F1 키를 눌러 SSH configuration file을 열어준다. 그러면 본인의 컴퓨터에 있는 ssh configuration file이 나올텐데 이를 수정해주면 된다. VSCode로 원격 접속을 처음 해본다면 가장 기본적인 파일 내용이 들어있을 텐데 없는 항목들은 직접 추가해주면 된다. Host ____ HostName ____ User ____ UseKeychain ____ IdentityFile ~/.ssh/____ port ____ Host: SSH 접속시 표시될..

html 편집기 atom을 설치했는데 유용한 단축키를 사용할 수 있는 emmet을 설치하려고 install packages 에 갔는데 패키지가 존재하지 않았다. 찾아보니 22년 12월에 서비스 종료라고 한다. 그런데 현재 듣고 있는 생활코딩 강의에서 사용하는 프로그램을 동일하게 사용하고 싶어서 emmet의 깃허브를 찾아봤다. https://github.com/emmetio/emmet-atom GitHub - emmetio/emmet-atom: Emmet support for Atom Emmet support for Atom. Contribute to emmetio/emmet-atom development by creating an account on GitHub. github.com 이 깃헙 주소를 통해..

분산 학습(Distributed training)은 학습 워크로드를 여러 작업자 노드에 분산시켜 훈련 속도와 모델 정확도를 크게 향상시키는 모델 학습 패러다임이다. PyTorch에서 분산 학습을 수행할 수 있는 몇 가지 방법이 있으며 각 방법은 사용 용도별로 장점을 가진다. DistributedDataParallel (DDP) Fully Shared Data Parallel (FSDP) Remote Procedure Call (RPC) distributed traininng Custom Extensions 비분산 학습은 단일 GPU에서 모델을 학습시킨다. 학습 과정은 다음과 같다. 1. DataLoader로부터 입력 배치를 받는다. 2. Forward pass를 통해 loss 계산 3. Backward ..

확률미분방정식 (Stochastic differential equation) SDE는 일반 미분 방정식과 편미분 방정식 사이의 connection을 제공한다. 일반 미분 방정식(ODE)과 유사하나, 확률적 요소를 추가하여 더 복잡한 시스템을 모델링하는 데 사용된다. 1) ODE 일반미분방정식은 변수의 변화를 시간에 대해 설명하는 방정식이다. $$ \frac{dx}{dt}=f(x,t)$$ ODE는 동일한 초기변수와 매개변수 하에 해가 항상 동일하여 deterministic하다. randomness 를 고려하지 않기 때문이다. 2) SDE 반면 확률미분방정식은 ODE에 확률성 또는 노이즈를 통합하여 불확실성을 가진 시스템을 모델링한다. $$ dx=f(x,t)dt+g(x,t)\cdot dB(t)$$ 이때 $B..

anaconda 환경에서 jupyter notebook 명령어를 입력했을 때 아래와 같은 오류가 떴다. from jupyter_core.command import main ModuleNotFoundError: No module named 'jupyter_core' 해결 방법 pip3 install --upgrade notebook pip3 install lesscpy

[cumprod: cumulative product 함수] torch.cumprod 함수는 PyTorch 에서 제공하는 함수로, 텐서의 누적 곱을 요소별로(element-wise) 계산해준다. 사용법은 다음과 같다. import torch tensor = torch.tensor([1, 2, 3, 4]) cumprod_result = torch.cumprod(tensor, dim=0) print(cumprod_result) tensor([ 1, 2, 6, 24]) 예를 들어, 'torch.tensor([1,2,3,4])' 텐서에 대해 torch.cumprod 함수를 dim=0 (첫번째 차원)으로 적용하면, 이 함수는 각 요소의 누적곱을 계산하여 [1,2,6,24] 를 반환한다. 1 1x2=2 1x2x3=6..

어느날 서버에 접속했는데 conda env list, conda, conda activate 다 안먹히고 갑자기 tqdm 이 없다는 모듈 에러가 떴다. 갑자기 conda 명령어로 무엇도 할 수가 없었다... 왜 이런일이 발생했을까 맨 윗줄에서 실행되는 sys.exit(main()) 파일이 실행되는 파이썬 버전이 3.10 인것으로 보인다. 파이썬 3.10 에 tqdm 이 깔리지 않았다는 말이겠지 현재 환경에서 실행되는 파이썬 버전과 설치된 경로를 확인해봤다. 이상하게도 현재 실행되는 파이썬 버전은 /usr/bin/python 에 있는 python 3.8.10 이었다. 흠.. 어떻게 해결해야하지?! 해결했다!!! 되게 심각한 문제인 줄 알았는데 그냥 말그대로 miniconda3 가 실행하는 python3.1..

프로젝트마다 가상환경을 새로 파서 구성을 할 때 반복되는 작업이 많은데 이를 정리해보려고 한다. 우선 나의 개발 환경은 이렇다. OS: Linux Ubuntu 20.04.05 LTS Kernel: Linux 5.15.0-79-generic Architecture: x86-64 1) 가상환경 생성, 라이브러리 설치 - 파이썬 버전: 3.6 - pytorch 버전: 1.7 conda create -n pytorch1.7 python=3.6 conda activate pytorch1.7 conda install anaconda conda install pytorch==1.7.0 torchvision==0.8.0 torchaudio==0.7.0 cudatoolkit=10.2 -c pytorch pip insta..