Kaggle api

🎁 Contents

• Kaggle api
  • 🎁 Contents
  • 0. Summary
  • 1. pip
  • 2. Kaggle
  • 3. API Key
  • 4. Check
  • 5. Troubleshooting
  • 6. Download csv

0. Summary

Kaggle에는 다양한 data를 csv파일로 제공한다.
데이터 분석의 샘플데이터로 이용하기 정말 좋다.

다양한 csv파일 다운로드 하는 일은 식은 죽 먹기이다.
더 나아가 linux에서 wget이나 curl로 다운로드를 하고싶은 욕구가 생기기도 한다.
이를 해결하기 위해 Kaggle api를 사용할 것이다.

1. pip

pip가 존재하지 않는다면 설치해준다

$ sudo apt-get install python3-pip

2. Kaggle

pip로 kaggle을 설치한다.

$ pip3 install --user kaggle

3. API Key

1. https://www.kaggle.com/<username>/account에 접속하여 Create API Token을 클릭한다.
2. kaggle.json파일을 ~/.kaggle/kaggle.json에 저장
3. chmod 600 ~/.kaggle/kaggle.json

4. Check

제대로 설치되었는지 확인해본다.

$ kaggle datasets -h

5. Troubleshooting

만일 kaggle: command not found에러가 발생하면 python binary 폴더를 PATH에 추가한다.

$ sudo vim ~/.profile

PATH=$PATH:$HOME/.local/bin/kaggle

6. Download csv

# kaggle datasets download <owner>/<dataset-name>
$ kaggle datasets download mkechinov/ecommerce-behavior-data-from-multi-category-store

Downloading ecommerce-behavior-data-from-multi-category-store.zip to /home/cbecdbadm
100%|███████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████▊| 4.29G/4.29G [01:38<00:00, 57.2MB/s]
100%|████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████████| 4.29G/4.29G [01:38<00:00, 46.7MB/s]