일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 | 31 |
- 구름
- 깃허브 #우분투 #ubuntu #Github #깃허브 우분투 #깃헙 우분투 #깃헙
- 백준
- 트랜스포머 #transformer #attention #self-attention #어텐션 #인공지능 #AI #딥러닝 #NLP #자연어처리
- docker #우분투 #ubuntu #도커 설치 #docker 설치 #docker installation #우분투 도커
- 트랜스포머 #자연어처리 #딥러닝 #구글 #attention #self-attention #BERT #transformer #deeplearing
- 알고리즘 #levenshtein distance #편집거리 #edit distance
- pytorch #cuda #우분투 torch #ubuntu pytorch #cuda torch #cuda pytorch
- 백준 #알고리즘 #골드
- 머신러닝
- GPU #cuda out of memory #gpu 메모리 #pytorch
- Machine Learning
- pandas #folium #groupby #네이버부스트코스 #코칭스터디
- jupyter notebook #anaconda #vscode #pytorch #딥러닝 #deep learning #vscode server #서버 vscode #ssh vscode #vscode cuda
- 구름자연어처리과정
- docker #아나콘다 #anaconda #ubuntu anaconda #docker anaconda
- logistic regression
- docker #도커 #도커 컨테이너 #docker container #도커 우분투
- cuda #centos #cuda삭제 #리눅스 #cenos cuda삭제
- BERT #구글BERT #BERT의정석
- docker #cuda #docker container #도커 #도커 컨테이너 #쿠다 #cuda 11.3
- 파이썬 #Python
- ssh #우분투 ssh #우분터 서버 #도커 #우분투 도커 #docker #cuda #우분투 개발환경 #딥러닝 #ubuntu docker #ubuntu cuda
- GPU #jtorch GPU #파이토치 병렬 #파이토치 GPU #pytorch gpu #multi process torch #horovod
- Today
- Total
목록기타 (9)
바닥부터 시작하는 개발 공부

아마 마지막 포스팅일거 같네요 앞서 cuda부터 anaconda, pytorch까지 거의 모든 셋팅이 완료되었습니다. 이제 ide와 연결만 해주면 될거 같네요 Vscode의 extention에서 이친구를 깔아줍시다. 그 다음 F1을 누르시고 Remote-SSH:Open SSH Configuration File을 선택해줍시다 그리고 파일을 하나 만들어주겠습니다 요렇게 만들어주겠습니다. Host는 제가 임의로 라벨링 해주었고 연결하는 pc의 ip, user이름 그리고 (2)글에서 설정해준 port를 넣어줍시다 저장을 해주시고 다시 F1 키를 눌러 Remote-SSH: Connect to Host를 클릭해주면 방금 만들어준 configuration 파일을 선택할 수 있습니다. 눌러주시면 password 입력 ..

https://pytorch.org/get-started/previous-versions/ PyTorch An open source machine learning framework that accelerates the path from research prototyping to production deployment. pytorch.org 모든 cuda 버전과 pytorch가 잘 호환되면 괜찮겠지만 이게 그렇진 않은거 같습니다 공식 홈페이지에서 본인이 설치한 cuda 버전을 확인하시고 호환되는 버전을 찾아주시면 됩니다 conda install pytorch==1.12.1 torchvision==0.13.1 torchaudio==0.12.1 cudatoolkit=11.3 -c pytorch 왠지 11.4는..
이전글 보기 https://kjim.tistory.com/16 [기타]docker로 딥러닝 환경 구축하기(1) 서두에 먼저 말씀드리자면 저는 sever나 이번에 사용할 tool들에 대해 잘 모릅니다. 거의 1주일 정도 삽질하면서 이것저것 시도해보며 이렇게 진행하면 된다..! 정도니 정말 저처럼 무지한이신 분 kjim.tistory.com https://kjim.tistory.com/17 [기타]docker로 딥러닝 환경 구축하기(2) ssh 서버 연결 https://kjim.tistory.com/16 [기타]docker로 딥러닝 환경 구축하기(1) 서두에 먼저 말씀드리자면 저는 sever나 이번에 사용할 tool들에 대해 잘 모릅니다. 거의 1주일 정도 삽질하면서 이것저것 시도해보며 kjim.tistor..
https://kjim.tistory.com/16 [기타]docker로 딥러닝 환경 구축하기(1) 서두에 먼저 말씀드리자면 저는 sever나 이번에 사용할 tool들에 대해 잘 모릅니다. 거의 1주일 정도 삽질하면서 이것저것 시도해보며 이렇게 진행하면 된다..! 정도니 정말 저처럼 무지한이신 분 kjim.tistory.com 여기까지 완료되셨으면 이제 본격적으로 개발 환경을 구축해봅시다. 일단 Anaconda가 필요하고 jupyter notebook 혹은 pytorch 같은 딥러닝 프레임워크가 필요하겠네요 (심지어 아직 파이썬도 없습니다) 그리고 외부랑 연결하려면 ssh도 열어줘야합니다 현재 docker container는 순정 상태보다 더 깨끗해서 command라고 할만한게 거의 없습니다. 일단은 도커..

도커는 개발환경을 쉽고, 빠르게 구축가능 하게 해줍니다 특히 여러명이 한 컴퓨터를 공유하는 경우 도커를 사용하지 않으면 설정 등이 여러가지로 꼬일 확률이 높습니다 오늘은 도커를 설치하고 컨테이너를 사용하는 것을 해보도록 하겠습니다 준비물 https://kjim.tistory.com/14 [기타]우분투 docker 설치하기 최근에 GPU 서버 관련해서 docker를 사용할 일이 생겼습니다.(개발 환경 셋팅이 편해서..?) 우분투에 docker를 설치해서 관련 환경을 구축해보자 도커 엔진 다음 커맨드로 도커 엔진(latest)과 컨테이너 kjim.tistory.com 첫번째로는 도커를 설치해야합니다. 이전 포스팅에서 docker설치에 대해서 다룬적이 있습니다. 위의 포스팅을 참고 바라겠습니다 두번째로 저는 ..
https://kjim.tistory.com/14 [기타]우분투 docker 설치하기 최근에 GPU 서버 관련해서 docker를 사용할 일이 생겼습니다.(개발 환경 셋팅이 편해서..?) 우분투에 docker를 설치해서 관련 환경을 구축해보자 도커 엔진 다음 커맨드로 도커 엔진(latest)과 컨테이너 kjim.tistory.com 이전 글에서 docker를 설치해봤습니다. 이제 도커를 설치한 이유인 컨테이너를 만들어보겠습니다. 먼저 docker를 사용할려면 image라는게 필요합니다. 이미지는 간단히 설명드리면 잘 포장해놓은 가상 환경이라고 생각하시면 편할거 같습니다. 이걸 제가 열어서 사용하는 느낌..? https://kjim.tistory.com/12 [기타]Docker 이용해서 cuda11.3 설치..

최근에 GPU 서버 관련해서 docker를 사용할 일이 생겼습니다 우분투에 docker를 설치해서 관련 환경을 구축해보겠습니다 도커 엔진 다음 커맨드로 도커 엔진(latest)과 컨테이너 데몬 서비스를 설치합시다 $ sudo apt update $ sudo apt install docker-ce docker-ce-cli containerd.io 설치 가능 버전 리스트 $ apt-cache madison docker-ce 5:20.10.22~3-0~ubuntu-bionic 버전을 설치할 예정입니다. sudo apt-get install docker-ce= docker-ce-cli= containerd.io 원하는 버전을 version에 넣어줍시다. 저는 현재 가장 최신버전인 5:20.10.22~3-0~ub..

본 글은 Docker는 설치되어 있다는걸 전제합니다 1. Docker hub로부터 이미지를 가져오자 https://hub.docker.com/r/nvidia/cuda/tags Docker hub.docker.com 원하는 걸 하나 선택해봅시다. 저는 A5000에 맞는 cuda 11.3를 설치할 겁니다. 뒤에 이름 보시면 cuda 버젼 뒤에 OS랑 기타 등등이 명시되어있습니다. 저는 요걸루 결정했습니다. 이름을 알았으니 가져와봅시다 docker pull nvidia/cuda:11.3.0-devel-ubuntu20.04 docker pull [이미지 이름] 허브로부터 image를 가져오는 명령어입니다. 다른걸 원하시면 docker hub에서 다른 image 이름을넣으시면 됩니다. 잘설치되었으면 contain..