├── np4-bs256-da0-node4 │ ├── checkpoint.1.pth.tar (target_file) │ ├── checkpoint.2.pth.tar (target_file) │ ├── nccl (target_dir) │ └── torch.log ├── np4-bs256-da2-node5 │ ├── checkpoint.1.pth.tar (target_file) │ ├── checkpoint.2.pth.tar (target_file) │ ├── nccl (target_dir) │ └── torch.log ├── np4-bs256-da1-node6 │ ├── checkpoint.1.pth.tar (target_file) │ ├── checkpoint.2.pth.tar (target_file) ..
1. 우분투 서버에 필요한 패키지 설치 sudo apt install ubuntu-server sudo reboot 2. multi-user로 default target 변경 그래픽 세션을 시작하지 않음으로써 RAM 및 CPU 리소스를 절약 sudo systemctl set-default multi-user.target sudo reboot 3. 필요 없는 패키지 삭제 sudo apt purge ubuntu-desktop -y && sudo apt autoremove -y && sudo apt autoclean sudo reboot
1. IPoIB 인터페이스 하드웨어 주소 확인 ip a | grep ib 2. 설정 파일 (/etc/udev/rules.d/70-persistent-ipoib.rules) 수정 # This is a sample udev rules file that demonstrates how to get udev to # set the name of IPoIB interfaces to whatever you wish. There is a # 16 character limit on network device names. # # Important items to note: ATTR{type}=="32" is IPoIB interfaces, and the # ATTR{address} match must start with ..
인피니밴드 드라이버(MLNX_OFED)는 설치되어 있다고 가정 (설치가 필요한 경우 참고)서버의 네트워크 포트가 어떻게 생겼는지 미리 파악하면 좋음예를 들어 DGX H100의 네트워크 포트는 이렇게 구성되어있음 1. 변경하려는 장치의 PCI 주소 확인sudo ibdev2netdev -v 2. mlxconfig 명령어로 설정 변경sudo mlxconfig -d {PCI} set LINK_TYPE_P1={LT} LINK_TYPE_P2={LT}예시. mlx5_11 이름을 가진 HCA의 링크 레이어를 이더넷으로 변경 (DGX H100 기준) 3. 재확인sudo mlxconfig -d {PCI} q | grep -i link_type예시. 설정이 잘 반영되었는지 확인 4. 데몬 재시작 또는 재부팅sudo /etc..
1. 설정 파일 열기sudo visudo /etc/sudoers 2. 가장 아래에 아래 줄을 추가 후 저장가장 아래 줄에 적는 이유는 해당 계정이 sudo 그룹에 포함된 계정이라면 기존 설정인 "%sudo ALL=(ALL:ALL) ALL"보다 아래에 있어야 NOPASSWD: ALL 설정이 우선 적용되기 때문임{USER} ALL=(ALL) NOPASSWD: ALL{USER}가ALL: 모든 호스트에서(ALL): 모든 사용자로NOPASSWD: ALL: 비밀번호 입력 없이 모든 명령을 실행할 수 있음 3. 확인sudo -l
