Question 1

Google Pub/Subの主要なアーキテクチャ的特徴は何ですか？

Accepted Answer

Google Pub/Subは、メッセージのプロデューサーとコンシューマーを分離するサーバーレスの非同期メッセージングサービスです。Publisherはsubscriberを知らずにtopicにメッセージを送信し、subscriberはpublisherを知らずにsubscriptionを介してメッセージを受信します。このアーキテクチャにより、両側で独立した水平スケーリングが可能になります。

Question 2

Pub/Subにおけるtopicとsubscriptionの根本的な違いは何ですか？

Accepted Answer

topicはpublisherがメッセージを送信する名前付きチャネルであり、subscriptionはtopicからメッセージを受信するsubscriberの関心を表す名前付きエンティティです。1つのtopicに複数のsubscriptionを持つことができ、各subscriptionはtopicに公開された各メッセージのコピーを受信します。

Question 3

どのような場合にpush subscriptionよりpull subscriptionを優先すべきですか？

Accepted Answer

subscriberがメッセージの消費ペース（flow control）を制御する必要がある場合、大量のバッチを処理する場合、または実行環境が公開HTTPSエンドポイントを公開できない場合は、pull subscriptionが好ましいです。Pullでは、取得するメッセージ数を動的に調整することで、負荷のピークを管理しやすくなります。

Google Pub/Sub - データストリーミング

Google Pub/Subの主要なアーキテクチャ的特徴は何ですか？

回答

Pub/Subにおけるtopicとsubscriptionの根本的な違いは何ですか？

回答

どのような場合にpush subscriptionよりpull subscriptionを優先すべきですか？

回答

Pub/Subのacknowledgementメカニズムはどのように機能しますか？

Pub/Subにおけるdead letter topicの役割は何ですか？

その他のData Engineering面接トピック

Linux & Shell - 基礎

Git & GitHub - 基礎

データエンジニアリングのための高度なPython

Docker - 基礎

Google Cloud Platform - 基礎

CI/CDとコード品質

Docker Compose

FastAPI - データAPI

Data Engineering向けの高度なSQL

Data Lake - アーキテクチャと取り込み

データエンジニアリングのためのBigQuery

PostgreSQL - 管理

Data EngineeringのためのData Modeling

Fivetran & Airbyte - データ取り込み

dbt - 基礎

Apache Airflow - 基礎

Kubernetes - 基礎

dbt - 高度な機能

ETL / ELT / ETLT パターン

Apache Airflow - 上級

Airflow + dbt - パイプラインオーケストレーション

PySpark - 大規模処理

Apache Beam & Dataflow

Kubernetes - 本番環境とスケーリング

Terraform - Infrastructure as Code

NoSQLデータベース

モダンなData Architecture

モニタリングとオブザーバビリティ

IAMとデータセキュリティ

次の面接に向けてData Engineeringをマスター