Kong Konnect API 管理

Kong 網(wǎng)關(guān)是 Kong Konnect API 管理平臺(tái)的核心組件，因其高性能和可擴(kuò)展性而廣受歡迎。它提供了代理、路由、負(fù)載均衡、健康檢查、身份驗(yàn)證等功能，成為微服務(wù)和傳統(tǒng) API 流量管理的核心工具。

Kong Gateway 的可擴(kuò)展性

Kong Gateway 的一大優(yōu)勢在于其可擴(kuò)展性。通過插件機(jī)制，網(wǎng)關(guān)能夠卸載后端服務(wù)的復(fù)雜處理任務(wù)，讓后端專注于業(yè)務(wù)邏輯，從而加速開發(fā)流程。以下是一些常用插件：

• 身份驗(yàn)證/授權(quán)：支持 OIDC、基本身份驗(yàn)證、LDAP、Mutual TLS、API 密鑰等多種機(jī)制。
• 速率限制：控制單位時(shí)間內(nèi)的 HTTP 請(qǐng)求數(shù)量。
• 無服務(wù)器支持：與 AWS Lambda 集成。
• 日志處理：將請(qǐng)求日志外部化到第三方系統(tǒng)。
• 分析與監(jiān)控：支持 Datadog 和 Prometheus 等外部監(jiān)控工具。
• 流量控制：實(shí)現(xiàn)金絲雀發(fā)布、模擬端點(diǎn)、基于請(qǐng)求頭的路由等。
• 代理緩存：緩存常用響應(yīng)以提升性能。
• 請(qǐng)求/響應(yīng)轉(zhuǎn)換：支持將 GraphQL 轉(zhuǎn)換為 REST API 等功能。

Kong Gateway 的混合部署

Kong Gateway 原生支持混合部署，能夠在多個(gè)平臺(tái)（如 Linux、Docker、Kubernetes）上運(yùn)行并保護(hù)工作負(fù)載。這種部署方式尤其適用于云遷移和現(xiàn)代化應(yīng)用場景。

下圖展示了典型的 Kong Gateway 混合部署架構(gòu)：

在混合部署中，控制平面（CP）負(fù)責(zé)管理任務(wù)，而數(shù)據(jù)平面（DP）則專注于 API 消費(fèi)者的請(qǐng)求處理。兩者運(yùn)行在完全獨(dú)立的環(huán)境中，這種分離設(shè)計(jì)增強(qiáng)了數(shù)據(jù)平面的彈性和吞吐量支持。

Kong 提供兩種控制平面選項(xiàng)：Kong Konnect SaaS 和自托管控制平面。無論數(shù)據(jù)平面運(yùn)行于何處，都需要與控制平面保持連接。

使用 Amazon MSK 部署事件流平臺(tái)

為了展示 Kong Konnect 的能力，我們將通過 Amazon MSK（托管 Kafka 服務(wù)）創(chuàng)建一個(gè)簡單的事件流平臺(tái)，并結(jié)合 Kong 數(shù)據(jù)平面實(shí)現(xiàn)暴露與保護(hù)。

部署架構(gòu)

以下是部署架構(gòu)示意圖：

• Kong 數(shù)據(jù)平面運(yùn)行在 Amazon EKS（彈性 Kubernetes 服務(wù)）集群上，并通過 Kafka Upstream 插件連接到 Amazon MSK 集群。
• 數(shù)據(jù)平面、MSK 和 Kafka 消費(fèi)者運(yùn)行在同一 VPC 中。
• API 消費(fèi)者通過 REST 請(qǐng)求與數(shù)據(jù)平面交互，數(shù)據(jù)平面將請(qǐng)求轉(zhuǎn)換為事件并發(fā)布到 Kafka 主題。
• Kafka 消費(fèi)者訂閱這些主題以消費(fèi)事件。

配置 Amazon MSK 集群

以下是創(chuàng)建 MSK 集群的主要步驟：

1. 集群配置：定義主題、日志等基本設(shè)置。
2. 集群信息：設(shè)置子網(wǎng)、安全組、Kafka 版本等。
3. 客戶端身份驗(yàn)證：支持多種連接機(jī)制，包括明文、TLS 和 SASL/SCRAM。

配置示例

創(chuàng)建一個(gè)名為 cluster_config.txt 的文件并添加以下內(nèi)容：

auto.create.topics.enable=true
delete.topic.enable=true
log.retention.hours=8

使用以下命令推送配置：

aws kafka create-configuration --region us-east-2 --name "kong-msk" --kafka-versions "3.3.2" --server-properties fileb://cluster_config.txt

測試 MSK 集群連接

完成集群配置后，可以通過 Kafka CLI 工具測試連接。以下是一些常見測試：

• 明文連接：使用 kafka-topics.sh 列出主題。
• TLS 連接：配置 client_ssl.properties 文件后，使用 TLS/SSL 端點(diǎn)測試。
• SASL/SCRAM 連接：創(chuàng)建用戶憑據(jù)并配置 ACL 權(quán)限后測試。

部署 Kong 數(shù)據(jù)平面

在 MSK 集群準(zhǔn)備就緒后，我們將部署 Kong 數(shù)據(jù)平面。以下是主要步驟：

1. 使用 eksctl 創(chuàng)建 Amazon EKS 集群。
2. 在 Kong Konnect 控制平面中生成證書，并將其注入 Kubernetes 集群。
3. 使用 Helm 部署 Kong 數(shù)據(jù)平面。

配置 Kafka Upstream 插件

在 Kong 數(shù)據(jù)平面中，我們通過 Kafka Upstream 插件實(shí)現(xiàn)與 MSK 集群的集成。以下是插件的關(guān)鍵配置：

• 身份驗(yàn)證機(jī)制：SCRAM-SHA-512
• Kafka 主機(jī)和端口：指定 MSK 集群的引導(dǎo)服務(wù)器。
• 主題：定義事件發(fā)布的目標(biāo)主題。

配置完成后，插件將啟用并開始工作。

測試事件流處理

配置完成后，可以通過以下方式驗(yàn)證事件流處理的效果：

1. 使用 REST 請(qǐng)求向 Kong 數(shù)據(jù)平面發(fā)送事件。
2. 驗(yàn)證事件是否成功發(fā)布到 Kafka 主題。
3. 使用 Kafka 消費(fèi)者檢查事件內(nèi)容。

總結(jié)

本文展示了如何利用 Kong Konnect 和 Amazon MSK 實(shí)現(xiàn)事件流平臺(tái)的 API 管理與保護(hù)。通過 Kong Gateway 的強(qiáng)大功能，企業(yè)可以輕松構(gòu)建高效、安全的事件流處理架構(gòu)，從而提升服務(wù)連接平臺(tái)的可用性和智能化水平。

原文鏈接: https://konghq.com/blog/engineering/api-managed-event-streaming