Pandas dataframe 용량 줄이기
상황 : pandas dataframe의 용량이 커서 그런지, 데이터 가공 코드를 실행할 때마다 시간이 오래 걸림. 실제 문제 해결 방법 pandas dataframe은 default로 64bit의 데이터타입들을 활용함 (예: float64, int64) 데이터 범위에 맞춰서 줄여서 메모리 크기를 대폭 줄임 import numpy as np data['column'] = data['column'].astype(np.int32) 참고 자료 아래 범위에 맞게 적절한 데이터 타입 선정 후 타입 변경 추천 Data type Description bool_ Boolean (True or False) stored as a byte int_ Default integer type (same as C long; norm..
Python
2023. 12. 19. 10:35
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- 데이터프레임메모리
- 곱창
- 사당맛집
- pandas데이터프레임
- 사당역맛집
- 막창
- rust설치방법
- 곱창맛집
- rust설치
- windowrust
- 파이썬
- nosql
- DB
- task실패
- dag실패
- 데이터프레임용량
- python
- rust스터디
- pandas
- rust설치하는방법
- 대창
- rust공부
- 배치실패
- 데이터베이스
- 데이터프레임사이즈
- rustwindow
- task실행
- windows에서rust설치
- 빅데이터
- 맛집
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | |||||
| 3 | 4 | 5 | 6 | 7 | 8 | 9 |
| 10 | 11 | 12 | 13 | 14 | 15 | 16 |
| 17 | 18 | 19 | 20 | 21 | 22 | 23 |
| 24 | 25 | 26 | 27 | 28 | 29 | 30 |
글 보관함