조금씩 꾸준히 완성을 향해

[Python] Jupyter notebook 파일읽기 오류(IOPub data rate exceeded) 본문

Python/기타

[Python] Jupyter notebook 파일읽기 오류(IOPub data rate exceeded)

all_sound 2022. 9. 1. 23:23

 

jupyter notebook에서 csv 파일을 읽어서 출력하려는데 예상치 못한 오류가 발생했다.

 

IOPub data rate exceeded.
The notebook server will temporarily stop sending output
to the client in order to avoid crashing it.
To change this limit, set the config variable
`--NotebookApp.iopub_data_rate_limit`.

Current values:
NotebookApp.iopub_data_rate_limit=1000000.0 (bytes/sec)
NotebookApp.rate_limit_window=3.0 (secs)

 

 

아무리 봐도 코드 문제도 아니고 파일 자체 문제도 아닌 것 같은데, 작동이 안됐다.

 

 

 

 

슬프게도 이는 pc의 사양문제라는 결론을 내렸다....ㅠㅠ

내가 열고자 하는 파일 용량이 내 pc가 처리 가능한 수준을 넘어버린 것이다.

 

 

 

이렇게 10개만 슬라이싱하니 오류없이 잘 출력이 됐다.

일단 이 정도 데이터로 확인해가며 코드를 짜고, 처리할 코드가 완성돼 용량이 줄어들면 그 때 전체 범위로 출력하면 된다.

 

 

이 오류가 뜬 건 학원에서 제공해 준 노트북에서였다. 

우리 강사님의 초고사양 mac북에서는 1초의 지체도 없이 바로 출력이 되던 것을 보고 약간 현타가 왔다;;

 

 

 

집에 와서 학원꺼보다는 사양이 좋은 내 노트북으로 돌려보니....

 

 

오?! 오류가 뜨지 않는다??!

다면 런타임이 계속 돌아가고 있다. 

 

 

기다리면 언젠간 읽어 주겠지... 라는 기대를 조심스레 해 본다...ㅎ