due to low balance 오류

[lsrock1]

low balance 오류가 일어나서 submit과 트레인 둘다 되지 않습니다.
low balance 오류가 일어나는 이유가 사용자에게 있나요?

[Chogyuwon]

저도 방금전에 잘 학습 중이던 세션이 low balance 오류 일어나면서... 중단되버렸네요ㅠ
credit 문제 같은데... 맞나요??

[nsml-admin]

안녕하세요.
네 크레딧이 적어서 세션이 학습도중 종료된 걸로 판단됩니다.

좀더 여유롭게 사용하실수 있도록 크레딧 충전량을 시간당 60에서 122로 변경하였습니다.

감사합니다.

[lsrock1]

크레딧이 34가 있는데 작동이 안되네요 혹시 확인 가능할까요?

[nsml-admin]

현재 lsrock1 님의 아이디로 할당된 크레딧은 34인데요. 해당 크레딧은 사실상 안쓰이고 실제로 확인해봐야할건 lsrock1님이 속한 팀그룹의 크레딧을 확인하셔야 합니다.

nsml credit 명령어로 확인 하실수있습니다.

[lsrock1]

감사합니다 302크레딧이 있는데 submit이 안돌아가네요ㅜㅜ

[nsml-admin]

에러메세지나 캡쳐화면을 볼수있을까요?

[lsrock1]

이렇게 나옵니다

[nsml-admin]

위에러는 크레딧과는 관련없어보입니다.

참고로 전체 에러스택을 전달드리겠습니다.

  File "main.py", line 63, in infer
    y = model(data.cuda(), position.cuda(), char.cuda())
  File "/usr/local/lib/python3.6/site-packages/torch/nn/modules/module.py", line 477, in __call__
    result = self.forward(*input, **kwargs)
  File "/app/transformer/Models.py", line 297, in forward
    enc_output, *_ = self.encoder(src_seq, src_pos, src_char)
  File "/usr/local/lib/python3.6/site-packages/torch/nn/modules/module.py", line 477, in __call__
    result = self.forward(*input, **kwargs)
  File "/app/transformer/Models.py", line 256, in forward
    enc_output = self.proj(torch.cat([enc_output, char_output], dim=2))
  File "/usr/local/lib/python3.6/site-packages/torch/nn/modules/module.py", line 477, in __call__
    result = self.forward(*input, **kwargs)
  File "/usr/local/lib/python3.6/site-packages/torch/nn/modules/linear.py", line 63, in forward
    return F.linear(input, self.weight, self.bias)
  File "/usr/local/lib/python3.6/site-packages/torch/nn/functional.py", line 1144, in linear
    output = input.matmul(weight.t())
RuntimeError: cublas runtime error : resource allocation failed at /pytorch/aten/src/THC/THCGeneral.cpp:266