Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

vessl 서버 관련 #210

Open
jellyheadandrew opened this issue Aug 10, 2023 · 6 comments
Open

vessl 서버 관련 #210

jellyheadandrew opened this issue Aug 10, 2023 · 6 comments

Comments

@jellyheadandrew
Copy link

안녕하세요, 최근 server gpu를 사용하려고 하였으나
image

위와 같이 nvidia-smi를 돌려도 안 돌아가는 문제가 생기고, training code를 돌리려 해도 관련된 issue가 생깁니다. 원인이 뭔지 몰라 도움을 요청드리게 되었습니다.

감사합니다.

@wogur110
Copy link
Collaborator

안녕하세요, 2023 SNU FastMRI Challenge 조교 배재혁입니다.
Vessl 서버 몇 번 노드 (ex. iabeng03) 인지 알려주시면 필요한 조치를 취하겠습니다.

감사합니다.

@jellyheadandrew
Copy link
Author

jellyheadandrew commented Aug 11, 2023

iabeng34 노드입니다

감사합니다

@Giventicket
Copy link
Collaborator

백업 파일 있으시면 삭제하고 노드를 재생성하는 것이 빨라보입니다.
이전에도 같은 문제로 vessl 측에 연락하니 해결하는데 2-3일정도 소요됐던 것으로 기억합니다.
백업 파일이 없으시다면 vessl 측에 연락하여 복구하도록 하겠습니다.

감사합니다.
서준표 드림.

@jellyheadandrew
Copy link
Author

감사합니다!!

@jellyheadandrew
Copy link
Author

안녕하세요, 노드 재생성을 눌렀는데 다시 stopping이 되어 확인해보았더니 아래 사진과 같이 나옵니다.

image

혹시 관련해서 도움을 주실 수 있나요?

@Giventicket
Copy link
Collaborator

34번노드 working하고 있는 것으로 확인했습니다.
감사합니다.
서준표 드림.

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

3 participants