python.django.from.data - k821209/pipelines GitHub Wiki

Django DB 준비

1. Django 시작

# django 초기화
$ django-admin startproject mysite .
$ python manage.py startapp dbname
$ cd mysite
$ vi settings.py

# mysite/settings.py
...
INSTALLED_APPS = [
    'django.contrib.admin',
    'django.contrib.auth',
    'django.contrib.contenttypes',
    'django.contrib.sessions',
    'django.contrib.messages',
    'django.contrib.staticfiles',
    'dbname',
]
...

2. 넣고 싶은 Table에 따라 model제작

$ cd ..
$ cd dbname
$ vi models.py

# ./dbname/models.py
from django.db import models

class GO(models.Model):
   class Meta:
      db_table = 'go' # sql에 넣을때 지정해줄 table이름 
   GO     = models.CharField(max_length=20) # 넣고자하는 테이블의 column names 
   Pvalue = models.CharField(max_length=20)
   Odds   = models.CharField(max_length=20)
   name   = models.CharField(max_length=200)
   defin  = models.TextField()

$ vi admin.py

# ./dbname/admin.py
from django.contrib import admin
from .models import GO

admin.site.register(GO)

$ cd ..
$ python3 manage.py makemigrations dbname
$ python3 manage.py migrate
$ python3 manage.py runserver 0.0.0.0:8888

3. table loading

# new way 
import sqlite3
import pandas as pd

v1 = pd.read_csv('PosInFo_v1.csv')
v2 = pd.read_csv('PosInFo_v2.csv')

con = sqlite3.connect('../db.sqlite3')
cur = con.cursor()

cur.executemany("INSERT INTO v1 (Pos_v4, Pos_v1, Pos_v1_Info) VALUES (?,?,?)",v1.values) # INTO 다음의 v1은 model에서 지정해준 class Meta: dbtable = 'v1' 
cur.executemany("INSERT INTO v2 (Pos_v4, Pos_v2, Pos_v2_Info) VALUES (?,?,?)",v2.values)

con.commit()
con.close()

# manage.py 가 있는 directory
$ vi db_create.py

# ./db_create.py
# pandas 0.22.0 only. 
import pandas as pd
from django.conf import settings
from sqlalchemy import create_engine
import os
os.environ['DJANGO_SETTINGS_MODULE'] = 'mysite.settings'

database_name = settings.DATABASES['default']['NAME'] # 데이터 베이스 이름은 setting를 참고해서 넣음. 별도의 sql파일을 만들때 꼭 체크
database_url = 'sqlite:////%s'%database_name
engine = create_engine(database_url, echo=False)
df_django = pd.read_csv('GO_list.txt',sep='\t') # 넣고자하는 테이블. excel형식도 좋다. 테이블의 column 이름이 model에서 지정한것과 일치 해야한다. 
df_django.to_sql('go', engine,if_exists='append',index=False) # 'go' 라는 이름은 model파일을 만들때 지정했음. 

Django view, HTML 제작

$ vi urls.py

from django.contrib import admin
from django.urls import path, include

urlpatterns = [
    path('admin/', admin.site.urls),
    path('dbname/',include('dbname.urls')) # dbname app의 urls.py를 참고하라는 뜻이 된다. 
]

$ cd ..
$ cd dbname
$ vi