데이터 분석 82일
오늘도 크롤링
크롤링하다 이슈 발견
- avaliable_quantity(제품 재고)와 sold_quantity(판매된 제품) 둘다 null 값인 경우 다 팔린 경우라고 생각했는데 다시 들어가 보니 다른 경우도 발견
- 아예 avaliable_quantity과 sold_quantity가 나타나지 않는 제품들이 있었다.
- 그런 경우 정말 단 하나의 제품만 파는 경우인것이다. 그러니 판매된 제품이 없는것이 당연하고 제품 재고는 1이 되는것이다.
- 그런데 크롤링으로 데이터를 가져올 때는 이 두 경우 다 available과 sold 컬럼이 다 null 값으로 가져오기 때문에 분석할때 어려움이 있다.
- 그런 이유로 코드를 수정하기로 했다 단일 제품을 판매하고 있을 경우는 available을 1로 가져오는 것이다. 그러면 구분이 가능하다.
| avaliable_quantity | sold_quantity | 해석 |
|---|---|---|
| NULL | 숫자 | Last One 상태 (avaliable이 1개 남음) |
| 숫자 | NULL | No Sold 상태 (하나도 팔리지 않은 상품) |
| NULL | NULL | Sold Out 상태 |
| 1 | NULL | 제품 딱 하나만 파는 경우 |
- 여태 크롤링해서 가져온 데이터는 다 버리고 다 다시 크롤링해야 한다...
인당 13만개씩하면 된다! 할수있다!
