Transformer를 설치하고 실행할 때 jupyter에서 커널이 죽는 문제가 발생했다.
the kernel appears to have died. it will restart automatically.
커널이 죽는 이유는 주어진 메모리 할당량을 초과했기 때문이라고 한다.
jupyter_notebook_config.py 파일에서 max_buffer_size를 다음과 같이 변경한다.
c.NotebookApp.max_buffer_size = 10000000000
나는 2번 방법으로 해결을 했다.
일단 pip로 설치한 transformer를 uninstall 해준다.
그 다음 conda로 transformer를 설치해 주고, 재실행 해주면 제대로 돌아가는 것을 볼 수 있다.
conda install -c huggingface transformers -y