[Spark] 데이터프레임 생성

Peter·2021년 7월 20일
0

Spark

목록 보기
3/11

Spark 데이터구조 - 데이터 프레임 생성 방법

  • RDD를 변환해서 생성: RDD의 toDF 함수 사용
  • SQL 쿼리를 기반으로 생성
    - tablename 자리에 SELECT 문도 사용 가능
  • 외부 데이터를 로딩해 생성
    - createDataFrame
  • postgresql 데이터를 가져와서 각 옵션을 통해 데이터 프레임을 로드해서 가져오는것
profile
컴퓨터가 좋아

0개의 댓글