python.django tricks - k821209/pipelines GitHub Wiki

한번에 많은 게시물을 만들기

http://stackoverflow.com/questions/34425607/how-to-write-a-pandas-dataframe-to-django-model

안녕하세요 얼마전에 pandas dataframe 을 django로 바로 쑤셔넣는 것에 대해서 질문했던 강양제 입니다. 이진석님이 힌트를 주셔서 해결했습니다 감사합니다. 내용을 정리해서 올립니다.

class MyModel(Model):
    class Meta:
        db_table = 'mytable' # This tells Django where the SQL table is
        managed = False # Use this if table already exists
                        # and doesn't need to be managed by Django

    field_1 = ...
    field_2 = ...

import pandas as pd
from django.conf import settings
from sqlalchemy import create_engine
database_name = settings.DATABASES['default']['NAME']
# 이부분이 문제였습니다. (장고 기본이 splite3인지도 몰랐네요 ㅠㅠ) 그리고 디비파일 위치 절대경로로주실때 슬레시 네번 눌러주셔야됩니다. 
database_url = 'sqlite:////%s'%database_name
engine = create_engine(database_url, echo=False)
# 판다스 데이터 프레임을 만들고 to_pickle로 저장해놓은 파일을 부릅니다. 
df_django = pd.read_pickle('name.pk')
# 바로 넣으려니까 무슨 보안에러? 이런게 나서 1000줄씩 쪼개서 넣었습니다. 
end = df_django.index[-1]
for i in tqdm( range((end/1000)+1)):
   if (i+1)*1000 > end:
      edf = df_django.loc[range(i*1000,end+1)]
   else:
      edf = df_django.loc[range(i*1000,(i+1)*1000)]
   edf.to_sql('mytable', engine,if_exists='append',index=False)
30분안에 쏙 다 들어갔네요. 한숨덜었습니다. 감사합니다.