profile
까먹었을 미래의 나를 위해
post-thumbnail

[Kafka] Python Kafka 프로그래밍

consumer.py 실행해 놓고 다른 창에서 producer.py 실행토픽 이름, offset(메세지 온 순서), timestamp, so메세지 받을 때 마다 offset으로 메세지 온 순서 내용 등이 전달된다.

2023년 2월 12일
·
0개의 댓글
·
post-thumbnail

[Kafka] Topic 만들기

0. 실행 환경 > AWS EC2 t2.xlarge OS : Red Hat 9.1 Kafka :3.3.1 Scala : 2.13 1. Topic 만들기 토픽 생성 토픽 리스트 확인 producer 실행 여기 입력한 메세지가 토픽에 post됨 Consumer 실

2023년 2월 12일
·
0개의 댓글
·
post-thumbnail

[ERROR] Kafka Zookeeper 실행 오류 : Classpath is empty. Please build the project first e.g. by running './gradlew jar -PscalaVersion=2.13.8'

Kafka Zookeeper 실행 오류 : Classpath is empty. Please build the project first e.g. by running './gradlew jar -PscalaVersion=2.13.8'

2023년 1월 15일
·
0개의 댓글
·
post-thumbnail

[Snowflake] Badge 1 획득

Snowflake 웨비나, 핸즈온 랩1을 완료하고 뱃지를 받았다.

2023년 1월 8일
·
0개의 댓글
·
post-thumbnail

[AWS] EC2 인스턴스 자동 중지 설정

aws 결제 대시보드에 갔더니 이용 요금이 생각보다 많이 나와있었다.테스트용 인스턴스 종료하는 것을 깜박했나보다.다음 소를 잃지않기 위해 외양간을 고쳐본다.

2023년 1월 8일
·
0개의 댓글
·
post-thumbnail

[Python] Spotify API token 생성

Spotify API Key 생성하기

2023년 1월 1일
·
0개의 댓글
·
post-thumbnail

[Airflow] Airflow 설치하기(pip)

airflow 설치하기

2022년 12월 29일
·
0개의 댓글
·
post-thumbnail

[Spark] Spark Streaming

Spark Docs에 나오는 Spark Streaming 예제 localhost:9999에서 입력 단어 세기

2022년 12월 18일
·
0개의 댓글
·
post-thumbnail

[Spark] SQL 연습하기

Spakr SQL 연습

2022년 12월 18일
·
0개의 댓글
·
post-thumbnail

[Python] EC2에 Jupyter Notebook 실행하기(ssh 포트포워딩)

AWS EC2에 Jupyter Notebook 설치 후 PUBLIC_IP:8888 으로 접속이 안된다..

2022년 12월 10일
·
1개의 댓글
·
post-thumbnail

[Kafka] Docker Compose로 Kafka 멀티 브로커 구성

Docker-Compose로 Kafka 멀티브로커 구성하기

2022년 11월 26일
·
0개의 댓글
·
post-thumbnail

[MongoDB] DB, Data CRUD 명령어 모음

MongoDB 기본 커맨드

2022년 11월 26일
·
0개의 댓글
·
post-thumbnail

[MongoDB] root(admin) 계정 생성하기

Mongdb root계정 생성 방법

2022년 11월 26일
·
0개의 댓글
·
post-thumbnail

[MongoDB] Redhat8에 MongoDB 설치하기

Redhat8에 MongoDB 6 설치하기 + 실행 시 오류

2022년 11월 26일
·
0개의 댓글
·
post-thumbnail

[MongoDB] 설치 후 실행 안됨(status=14 , status=100)

Redhat8에 MongoDB6 설치 후 실행 오류(status=14 / status=100)

2022년 11월 26일
·
0개의 댓글
·
post-thumbnail

[Kafka] Podman compose으로 Kafka 실행

Podman compose로 kafka 실행하기

2022년 11월 20일
·
0개의 댓글
·
post-thumbnail

[Podman] RHEL8에 Podman 설치하기 ( + Podman compose)

RedHat8 에 Docker를 설치하면 아래와 같은 오류가난다.Errors during downloading metadata for repository 'docker-ce-stable'Docker Docs에 RHEL 설치 페이지에 가면 "현재는 s390x(IBM Z)

2022년 11월 20일
·
0개의 댓글
·
post-thumbnail

[OS] AWS EC2 root 비밀번호 생성

mysqld를 실행하는데ststemctl start/stop mysql 하면 root 비밀번호가 필요하다ec2 인스턴스는 키로만 SSH 접속해왔어서 root 비밀번호를 몰랐는데 다른 계정처럼 아래 명령어로 만들면 된다.

2022년 11월 20일
·
0개의 댓글
·
post-thumbnail

[MySQL] Redhat8에 MySQL 설치하기

AWS t2.xlargeOS : Redhat 8.6MySQL Version : 8.0.31MySQL Downloadhttps://dev.mysql.com/downloads/repo/yum/MySQL Docs - Installing MySQL on Linux U

2022년 11월 20일
·
0개의 댓글
·