EPUB 크롤링 DB

테이블 (3)

aladin (알라딘 크롤링 데이터 저장 테이블)

  • 고유 ID (id) — int — 기본 키 — NOT NULL — 자동으로 증가하는 ID
  • 대분류 (major_category) — varchar(30)
  • 중분류 (middle_category) — varchar(30)
  • 소분류 (small_category) — varchar(30)
  • 상세분류 (detail_category) — varchar(30)
  • 제목 (title) — varchar(200)
  • URL (url) — varchar(500)
  • 부제 (subtitle) — varchar(200)
  • 저자 (author) — varchar(200)
  • 발행연도 (published_year) — varchar(10)
  • 도서 ISBN (isbn) — varchar(20)
  • 원가 (origin_price) — int
  • 판매가 (sales_price) — int
  • 판매량 (sales_point) — int
  • 별점 (rating) — float
  • 리뷰 수 (review) — int
  • 페이지 수 (pages) — int
  • 베스트 (best) — varchar(20)
  • 수상정보 (award_info) — varchar(20)
  • 시리즈정보 (series_info) — varchar(20)
  • 성인 (adult) — bool
  • 자료형태 (book_type) — varchar(20)
  • 책소개 (introduce) — varchar(500)
  • 주제 분류1 (theme_class1) — varchar(100)
  • 주제 분류2 (theme_class2) — varchar(100)
  • 주제 분류3 (theme_class3) — varchar(100)
  • 주제 분류4 (theme_class4) — varchar(100)
  • 주제 분류5 (theme_class5) — varchar(100)
  • 중복검사 (duple_check) — varchar(1) — 기존 중복검사 (O, X, △)
  • 중복검사2 (duple_check2) — varchar(1) — Elasticsearch 기반 중복검사 (O, X)
  • 중복검사 점수 (duple_score) — float
  • 데이터타입 코드 (data_type_code) — varchar(10)
  • 데이터타입 (data_type) — varchar(10)
  • 생성시간 (create_date) — timestamp — 데이터 추가 시 자동 생성
  • 업데이트 시간 (update_date) — timestamp — 업데이트 시 자동 생성

book_url (도서 url)

  • URL (url) — varchar(500) — 기본 키 — NOT NULL
  • 수집 사이트 (site) — varchar(10) — 알라딘 / 교보문고 / yes24
  • 수집 완료 여부 (complete) — bool
  • 생성시간 (create_date) — timestamp — 데이터 추가 시 자동 생성

kyobo (교보문고 크롤링 데이터 저장 테이블)

  • 고유 ID (id) — int — 기본 키 — NOT NULL — 자동으로 증가하는 ID
  • 대분류 (major_category) — varchar(30)
  • 중분류 (middle_category) — varchar(30)
  • 소분류 (small_category) — varchar(30)
  • 상세분류 (detail_category) — varchar(30)
  • URL (url) — varchar(500)
  • 제목 (title) — varchar(200)
  • 부제 (subtitle) — varchar(200)
  • 저자 (author) — varchar(200)
  • 발행연도 (published_year) — varchar(10)
  • 도서 ISBN (isbn) — varchar(20)
  • 원가 (origin_price) — int
  • 판매가 (sales_price) — int
  • 판매량 (sales_point) — int
  • 별점 (rating) — float
  • 리뷰 수 (review) — int
  • 페이지 수 (pages) — int
  • 베스트 (best) — varchar(20)
  • 수상정보 (award_info) — varchar(20)
  • 시리즈정보 (series_info) — varchar(20)
  • 성인 (adult) — bool
  • 자료형태 (book_type) — varchar(20)
  • 책소개 (introduce) — varchar(500)
  • 주제 분류1 (theme_class1) — varchar(100)
  • 주제 분류2 (theme_class2) — varchar(100)
  • 주제 분류3 (theme_class3) — varchar(100)
  • 주제 분류4 (theme_class4) — varchar(100)
  • 주제 분류5 (theme_class5) — varchar(100)
  • 중복검사 (duple_check) — varchar(1) — 기존 중복검사(O, X, △)
  • 중복검사2 (duple_check2) — varchar(1) — Elasticsearch기반 중복검사(O, X)
  • 중복검사 점수 (duple_score) — float
  • 데이터타입 코드 (data_type_code) — varchar(10)
  • 데이터타입 (data_type) — varchar(10)
  • 생성시간 (create_date) — timestamp — 데이터 추가 시 자동 생성
  • 업데이트 시간 (update_date) — timestamp — 업데이트 시 자동 생성