캐글을 하면서 겪은 이슈들(kernel stopping, timeout error)

최근 캐글을 자주하고 있습니다.(새벽 5시 시리즈를 올려야하는데.. 블로그 글 쓸 시간이 만만치 않아서 못올리고 있습니다 ㅠ)

근데 캐글을 하면서 알 수 없는 에러를 자주 겪었습니다.

그것에 대해서 몇 개 정리해보려고 합니다.

먼저 아래와 같은 사진 이슈입니다.

timeout waiting for IOPub output 이라는 warning이 나옵니다.

음 그렇게 치명적인 오류는 아닌 것 같은데요. 저는 이게 나오면서 커널이 멈추는 현상이 나왔습니다(kernel stopping)

알고보니 이게 모델을 훈련 하는 등의 과정에서 output이 나오는데요.

예를 들어 verbose값이 1이거나 이런 상황에서요. 이런 출력이 좀 무리?가 되는 것이 있나봅니다.

verbose = 0으로 하면 별 문제없이 해결됩니다.

그리고 두 번째.

kernel commit을 했는데 몇 시간동안 저 같은 경우는 7시간 넘게.. 계속 commit이 running이되는 문제가 있었습니다.

데이터 셋이 저 정도 시간이 걸릴 게 아닌데도 말이죠.

알고보니 메모리 문제였습니다. 이게 어쩔 때는 error 로그에 찍히는데 이상하게 안찍히더라구요.

꼭 commit 전에 커널을 실행해보면서 메모리가 어떻게 변하는지 체크! 해주셔야합니다.

확인은 캐글 우측 상단에서 세션 정보와 함께 볼 수 있습니다.