D-62-데이터분석

1. coalesce

• 분산되어 있던 데이터를 n개의 파티션으로 모아줌
• 만약 coalesce를 하지 않고 저장한다면 여러개의 csv 파일로 저장될 것
• n=1 설정으로 하나의 파일로 저장

df1.coalesce(1).write.option("header","true").format("csv").save("city_data_csv")
StoreNumber_meta.coalesce(1).write.option("header","true").format("csv").save("StoreNumber_meta", mode='overwrite')

2. MySQL Workbench
   

3. 쿼리구조
   

4. use
   : 사용할 스키마 설정

use [스키마이름];

5. show
   : DB, table 등의 정보를 알고 싶을때 사용

show DATABASES; -- 데이터베이스 목록 확인
show TABLES from [스키마이름]; -- 특정 DB에 있는 테이블 목록 확인
show COLUMNS from [스키마이름.테이블이름]; -- 특정 테이블의 컬럼 정보

6. SQL 실행순서