Skip to content

eun-ko/Scrapper

Folders and files

NameName
Last commit message
Last commit date

Latest commit

ย 

History

35 Commits
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 
ย 

Repository files navigation

๋ฌด์‹ ์‚ฌ

product_csv

: get_items๋กœ ๋ฐ›์•„์˜จ ์ƒํ’ˆ์ •๋ณด๋ฅผ ์—‘์…€ํŒŒ์ผ๋กœ ์ €์žฅ (์ƒํ’ˆ๋ช…,๋ธŒ๋žœ๋“œ๋ช…,๊ฐ€๊ฒฉ)
ํ”„๋กœ๋ชจ์…˜์ƒํ’ˆ๋ช… ๋ฐ ํ• ์ธ๊ฐ€ ์ฒ˜๋ฆฌ

  • ํ”„๋กœ๋ชจ์…˜ ์ƒํ’ˆ๋ช… ์ •๋ฆฌ
  • skirt
  • ๋ทฐํ‹ฐ :
    FileNotFoundError: [Errno 2] No such file or directory: '๋”๋งˆ์ฝœ(DERMACOL) ํ‹ฐํŠธ๋ฆฌ ํŒŒ์šด๋ฐ์ด์…˜ (์ปจ์‹ค๋Ÿฌ/ํŒŒ๋ฐ 2in1).jpg'
    ->์ƒํ’ˆ๋ช…์— '/'ํฌํ•จ์‹œ ๊ฒฝ๋กœ๋กœ ์ธ์‹ํ•ด์„œ replace๋กœ ๋ฐ”๊ฟˆ
  • ์–‘๋ง/๋ ˆ๊ทธ์›จ์–ด : FileNotFoundError: [Errno 2] No such file or directory: '์ผ์˜ค๊ณต์น (IL-O-GONG-CHIL) [10PACK] 1507 ๋ชจ๋…ธ ํŠธ๋ผ์šฐ์ ธ ํ•˜ํ”„ ์‚ญ์Šค _ ํ™”์ดํŠธ/๋ธ”๋ž™.jpg'
    ->์ƒํ’ˆ๋ช…์— '/'ํฌํ•จ์‹œ ๊ฒฝ๋กœ๋กœ ์ธ์‹ํ•ด์„œ replace๋กœ ๋ฐ”๊ฟˆ

get_image

  • ์ด๋ฏธ์ง€ ํ•ด์ƒ๋„ ๋†’์ด๊ธฐ - ์ƒ์„ธํŽ˜์ด์ง€๋กœ ํ•œ๋ฒˆ๋” ๋“ค์–ด๊ฐ€๊ฒŒ

get_image_by_brand

  • ๋ธŒ๋žœ๋“œ๋ณ„๋กœ ์ด๋ฏธ์ง€ ํƒ์ƒ‰ํ• ๋•Œ๋Š” ๋‹ค๋ฅธ class์— img๊ฐ์‹ธ์ ธ์žˆ์Œ

size_csv

: ์ƒ์„ธํŽ˜์ด์ง€์—์„œ ์‚ฌ์ด์ฆˆ์ •๋ณด ํฌ๋กค๋งํ•ด์„œ ์—‘์…€ํŒŒ์ผ๋กœ ์ €์žฅ
์‚ฌ์ด์ฆˆ์ •๋ณด ์—†์Œ/๋ถ„๋ฅ˜ ๊ธฐ์ค€ ์ƒ์ดํ•œ ๊ฒƒ๋“ค ์ฒ˜๋ฆฌ

  • ์•„์šฐํ„ฐ (๋ถ„๋ฅ˜๊ธฐ์ค€์ƒ์ด)
  • ์ƒ์˜

bottom_size_csv

: ์นดํ…Œ๊ณ ๋ฆฌ-๋ฐ”์ง€ ์‚ฌ์ด์ฆˆ์ •๋ณด ์—‘์…€ํŒŒ์ผ๋กœ ์ €์žฅ
table๋กœ ์•ˆ๋˜์–ด์žˆ๋Š”๊ฒƒ๋“ค

  • ์ƒ์„ธ์ •๋ณด ๋ฒ„ํŠผ ๋ฐ‘ ๊ธ€์”จ
  • ์ด๋ฏธ์ง€ ํ˜•ํƒœ

  • ์นดํ…Œ๊ณ ๋ฆฌ๋ณ„ url์ž๋™ํ™”
์ƒ์˜ 001
  • ๋ฐ˜ํŒ” : 001001
  • ๊ธดํŒ” : 001010
  • ๋งจํˆฌ๋งจ/์Šค์›จํŠธ : 001005
  • ํ›„๋“œ : 001004
์•„์šฐํ„ฐ 002
  • ํ›„๋“œ์ง‘์—… : 002022
  • ๋ธ”๋ฃจ์ข… : 002001
  • ํ™˜์ ˆ๊ธฐ์ฝ”ํŠธ : 002008
  • ๋ ˆ๋”/๋ผ์ด๋”์žฌํ‚ท : 002002
  • ์ŠˆํŠธ/๋ธ”๋ ˆ์ด์ € ์žฌํ‚ท : 002003
๋ฐ”์ง€ 003
  • ๋ฐ๋‹˜ : 003002
  • ์ฝ”ํŠผ : 003007
  • ํŠธ๋ ˆ์ด๋‹/์กฐ๊ฑฐ : 003004

About

๐Ÿ›Crawling using beautiful soup & studying web automation using selenium๐Ÿ‘–

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published