300x250
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | 6 | |
| 7 | 8 | 9 | 10 | 11 | 12 | 13 |
| 14 | 15 | 16 | 17 | 18 | 19 | 20 |
| 21 | 22 | 23 | 24 | 25 | 26 | 27 |
| 28 | 29 | 30 |
Tags
- CSS
- dp
- 파이썬
- 리눅스
- DFS
- 프로그래머스
- nlp
- BFS
- 코딩테스트
- AI
- 코딩
- 딥러닝
- 구글 킥스타트
- 순열
- 코딩 테스트
- 그래프
- 동적 프로그래밍
- linux
- kick start
- 알고리즘
- OS
- 운영체제
- google coding competition
- 브루트포스
- 동적프로그래밍
- 백준
- 킥스타트
- 네트워크
- 프로그래밍
- PYTHON
Archives
- Today
- Total
오뚝이개발자
1초 단위로 GPU 사용량과 메모리 확인하기(GPU 모니터링) 본문
728x90
300x250
모델 학습을 돌리다보면 GPU 상태를 모니터링해야 되는 경우가 종종 있다. 내가 지정한 GPU로 프로그램이 잘 돌아가고 있는지, GPU 메모리가 학습이 진행되는 정도에 따라 얼만큼 점유되고 있는지, GPU 사용률이 충분히 높게 잡히고 있는지 같은 사항들을 확인해야 되는 경우들이 그러하다.
이럴 땐 아래의 커맨드로 확인이 가능하다. 리눅스 커맨드 창에 아래와 같은 명령어를 입력하면 1초 단위로 갱신되는 GPU 상태를 모니터링할 수 있다.
watch -n -1 nvidia-smi
728x90
300x250
'AI > AI 개발' 카테고리의 다른 글
| RuntimeError: CUDA error: CUBLAS_STATUS_INVALID_VALUE when calling `cublasSgemm 에러 해결 (0) | 2022.07.09 |
|---|---|
| GPU 최적화, GPU 사용률 늘리는 방법 (0) | 2022.07.03 |
| 허깅페이스(Huggingface) 모델 inference(pipeline) GPU로 돌리기 (2) | 2022.06.26 |
| 텍스트를 문장 단위로 분할하기(nltk, sentence tokenizing) (0) | 2022.05.15 |
| 허깅페이스(Huggingface) transformers로 early stopping 사용하기 (0) | 2022.03.28 |
'AI/AI 개발' Related Articles
more
Comments