Issue11 [Linux] 리눅스 tar.gz 압축 및 해제 방법 용량이 큰 파일은 github에 올리지 못하다보니, csv를 따로 저장해야하는 일이 생겼다. 하지만 데이터가 너무 많아서 이를 일일히 저장하기 어려웠다. 그래서 linux에서 csv를 한 번에 찾아서 저장할 수 있는 방법을 찾아보았다. tar(타르) 파일이란?다수의 파일을 디렉토리 구조, 파일 속성 등을 보존하면서 하나의 파일로 묶는 데 사용되는 파일 형식으로, tar.gz는 tar로 tar로 묶인 파일을 추가로 gzip으로 압축한 파일이다. 파일을 묶는 것과 동시에 압축을 하여 파일 크기를 줄이는 데 유용하다. tar.gz로 압축하기tar -zcvf [파일명.tar.gz] [폴더명] csv파일만 tar.gz로 압축하기tar -czvf csv_files.tar.gz $(find . -name "*... 2025. 4. 25. [Linux] SLRUM 스케줄러 설명 Slrum(슬럼)이란?: 대규모 컴퓨팅 클러스터에서 작업(job)을 관리하고 스케줄링하는 오픈소스 작업 관리자(Job Scheduler). 리눅스 기반 클러스터에서 활용되는 스케줄러로, 서버 여러대에 있는 GPU등의 리소스를 효율적으로 쓰도록 함. Slurm Workload Manager - Quick Start User GuideQuick Start User Guide Overview Slurm is an open source, fault-tolerant, and highly scalable cluster management and job scheduling system for large and small Linux clusters. Slurm requires no kernel modifications.. 2025. 3. 27. [Linux] 가상환경 별 서버 사용량 확인 1) Conda 환경 폴더의 용량 확인-s: 각 환경의 총 크기만 표시-h: 사람이 읽기 쉬운 형식으로 출력user 부분을 각 사용자 이름으로 바꾸면 됨 du -sh /home/user/anaconda3/envs/* 2) 용량을 크기 순으로 정렬가장 작은 환경부터 큰 환경 순으로 정렬하여 보여줌| tail -20: 추가하면 가장 많은 용량을 차지하는 환경을 찾을 수 있음du -sh /home/user/anaconda3/envs/* | sort -h 3) 전체 디스크 용량 및 남은 공간 확인df -h ~: 홈 디렉토리 내에서 용량을 확인하려면 '~' 추가df -h 4) Conda 환경 폴더가 위치한 디스크의 남은 공간 확인df -h /home/user/anaconda3/envs/ 2025. 2. 10. [Linux] gpu 실시간 사용량 확인 기본적으로 gpu 사용량 확인은 아래와 같이 가능하다. 하지만 이는 조회하는 당시의 사용량만 확인이 가능하고, 다시 조회하려면 명령어를 다시 입력해야한다. nvidia-smi 실시간 사용량을 파악하기 위해서는 아래와 같은 명령어를 입력하면 0.5초마다 실시간으로 업데이트되며 확인이 가능하다. 초를 바꾸려면 숫자 부분만 수정하면 원하는 시간별로 조회가 가능하다. watch -d -n 0.5 nvidia-smi 2024. 12. 20. 이전 1 2 3 다음
