[SPARK] (중요)파이썬과 데이터 - RAM, Disk, CPU, Data type
파이썬이 터졌다일반적으로 컴퓨터 공학에서는 OOM(Out of Memory)이라 하며, 특히 대용량 데이터를 처리할 때는 자주 만나게 될 문제스파크든, 파이썬이든 데이터 관리는 중요한 부분이다. 메모리 : 기억 장치로, 굉장히 세분화가 되어있지만, 크게 RAM과 Disk(SSD)로 나눔RAM : 작업 공간데이터를 갖고 작업 하기 위해 우리는 데이터를 RAM이란 곳에 올림 (read_csv 등)여기에 OS(윈도우 등)와 기본적인 프로그램을 올리면 2~6GB 정도 차지컴퓨터를 끄면 RAM에 올라간 데이터는 삭제됨책상, 도마 Disk : 저장 공간장기적으로 데이터를 보관(저장)하는 공간컴퓨터를 꺼도, Disk의 데이터는 사라지지 않는다윈도우에서는 작업 관리자, 맥에서는 활성 상태 보기, 리눅스에서는 htop ..
2024. 7. 15.
