본문 바로가기
반응형

Cloud8

[GCP] Pub/Sub 정의와 Push& Pull 차이 | LIM 🧐 Cloud Pub/Sub 이란 대용량 분산 큐 서비스이며 메시징 시스템이다. 메시지를 Queue에 쌓아두는 토픽을 생성하고 그 토픽을 구독하는 구독자를 만들어 메시지를 소비하는 시스템이다. Pub/Sub을 통해 서비스는 비동기적으로 100밀리 초의 지연 시간으로 통신할 수 있다. 📝 Cloud Pub/Sub 의 핵심 개념 Topic: 게시자가 메시지를 전송하는 리소스 Message: 게시자가 Topic 에 전달해 결과적으로 구독자에게 전달되는 데이터와 속성의 조합 Subscriber: 단일 또는 다중 주제에 대한 구독을 사용하여 메시지를 수신하는 애플리케이션 Acknowledgement(or "Ack"): Subscriber 가 메시지를 정상적으로 수신한 후 구독자가 Pub/Sub 에 보내는 신호. .. 2023. 1. 7.
[GCP Composer] Broken DAG ModuleNotFoundError 발생.. | LIM 이 글이 누군가에게 도움이 되길 바라며... 갑자기 composer에서 잘만 사용하던 모듈이 ModeulNotFoundError 가 떠서 두시간동안 삽질했다.. 간단하게 테스트하려고 cloud storage 업데이트 하는 gcloud 명령어인 gcloud composer environments storage dags import 를 너무 많이 날려서 그런가 composer와 gcs간 sync 가 안맞았었나보다.. 문제 해결은 생성한 개인 모듈 이름을 바꾸는 거였다..기존 만들어놓은 모듈 폴더를 cloud storage에서 삭제하고 새로운 이름으로 변경해서 폴더와 파일 업데이트하니 다시 잘됐다.. 밑에 사이트 참고했다 https://groups.google.com/g/cloud-composer-discus.. 2022. 7. 4.
반응형