모델 트레이닝 중에 인터넷 연결이 끊기면 어떻게 되나요?

라이브러리가 인터넷에 연결할 수 없는 경우, 재시도 루프에 진입하며 네트워크가 복구될 때까지 메트릭 스트리밍을 계속 시도합니다. 이 과정 중에도 프로그램은 중단 없이 계속 실행됩니다.

인터넷이 없는 머신에서 실행하려면 WANDB_MODE=offline으로 설정하세요. 이 설정은 메트릭을 로컬 하드 드라이브에 저장합니다. 나중에 데이터를 서버로 스트리밍하려면 wandb sync DIRECTORY를 실행하세요.