Redis 실시간 모니터링

개요

테스트 진행하는데 redis를 실시간 모니터링 하려고 함

진행

Redis 실시간 로그

Redis의 모든 요청을 실시간으로 확인하는 명령어:

redis-cli monitor

 

→ Redis의 모든 작업을 실시간으로 확인한다. 너무 많은 로그가 출력되고 있어서 가독성이 좋지 않다.

 

Celery 자체 모니터링

Redis의 로그 중에서 내가 등록한 celery app에 대한 로그만 출력하고 싶어서 찾아봤는데, Celery에서 실행되는 작업을 실시간으로 확인할 수 있는 celery 자체 모니터링이 있었다.

✅ celery worker 실행할 때 -E 옵션 추가해서 이벤트 로깅 활성화하기 (아니면 아무것도 안뜸)

pkill -9 -f "celery worker"  # 기존 워커 종료
celery -A celery_tasks.celery_app worker --loglevel=info -E

 

코드 상에서 추가해도 됨

celery_app.conf.update(
    worker_send_task_events=True,  # 이벤트 로깅 기본 활성화
    task_track_started=True  # 태스크가 시작된 상태도 추적
)

 

실시간 모니터링

celery -A celery_tasks.celery_app events

 

모니터링 실행된 상태에서 celery task 실행 요청을 보냈다

# Request
curl -X POST "http://127.0.0.1:8000/crawl/?url=https://example.com"

# Response
{"task_id":"051dd5aa-4a8a-4272-94e1-c6b5f982f4cb","message":"Crawling started for https://example.com"}

 

실시간 모니터링에 Task 생성되고 State가 STARTED로 업데이트됨

 

실행 완료 후 State가 SUCCESS로 업데이트됨

 

여러개 많이 요청할 경우 아래와 같이 잘 쌓이는 것도 확인할 수 있땅

 

★☆ Task를 실시간으로 모니터링 하고 싶을 때 이렇게 사용해보자 !! ☆★