728x90
SMALL
1. 글을 작성하게 된 계기
기존에 회사에서 Redis를 이용해서
fastapi - redis - celery 구조로 서빙을 구축했었다.
그러나 앞으로는 kafka를 사용하기 위해서 ubuntu 서버에
kafka를 설치하는 방법에 대해서 정리하고자 한다.
2. Apache Kafka 설치 방법
1. 다운로드를 위해 kafka 사이트 접속 - 링크
2. 우클릭 후 링크 주소 복사 클릭
3. 링크를 활용해 필요파일 설치
wget -d https://downloads.apache.org/kafka/3.7.0/kafka_2.13-3.7.0.tgz
4. 다운로드한 파일 압축 풀기
tar -xzf kafka_2.13-3.7.0.tgz
5. 잘 설치되었는지 확인을 위한 zookeeper 실행
설치된 폴더로 이동
cd kafka_2.13-3.7.0/
zookeeper 실행
./bin/zookeeper-server-start.sh -daemon config/zookeeper.properties
6. 실행한 zookeeper 중지
./bin/zookeeper-server-stop.sh
728x90
LIST
'Python > Data Engineering' 카테고리의 다른 글
MLOps 기술들 설명 (데이터, 모델, 서빙 등) (1) | 2023.12.29 |
---|---|
Python asyncio를 활용한 비동기 프로그래밍 (0) | 2023.08.25 |
Ray를 활용한 Python 병렬 처리 하기 (feat. gpt api) (0) | 2023.08.22 |
DataFrame에서 줄 바꿈, 띄어쓰기 중복 제거 (0) | 2023.02.10 |
한국어 문장 분리기 (kss - korean sentence splitter) 사용방법 (0) | 2023.02.10 |