當前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

kafka集群 kubernetes_为什么 Kubernetes 如此受欢迎？

發布時間：2023/12/10 编程问答 29 豆豆

生活随笔收集整理的這篇文章主要介紹了 kafka集群 kubernetes_为什么 Kubernetes 如此受欢迎？小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

點擊上方藍色“火丁筆記”關注我們，設個星標，每天學習全棧知識

在撰寫本文時，Kubernetes 已有 6 年歷史^[1]了，在過去的兩年中，它的流行度不斷提高，一直是最受歡迎的平臺之一^[2]。今年，它成為最受歡迎的第三大平臺^[3]。如果您還沒有聽說過 Kubernetes，告訴你它是一個平臺，可以讓您運行和協調容器工作負載。

容器最初是一個 Linux 內核進程隔離結構，其中包含 2007 年的 cgroups^[4] 和 2002 年的 namespaces^[5](命名空間)。當 LXC^[6] 在 2008 年可用時，容器變得越來越重要，而 Google 開發了自己的內部“在容器中運行所有機制”系統，稱為 Borg^[7]。快進到 2013 年，Docker 正式發布，并完全面向大眾。當時，Mesos^[8] 是編排容器的主要工具，但并未得到廣泛采用。Kubernetes 于 2015 年發布，并迅速成為事實上的容器編排標準。

為了嘗試了解 Kubernetes 的受歡迎程度，請考慮一些問題。開發人員最后一次可以在何時達成部署生產應用程序的方式？您知道有多少開發人員開箱即用地運行工具？如今有多少云運營工程師不了解應用程序如何工作？我們將在本文中探討答案。

以數據(YAML)為基礎的的架構

來自 Puppet^[9] 和 Chef^[10] 的世界，Kubernetes 的重大轉變之一就是從以代碼為基礎的基礎架構過渡到以數據為基礎的基礎架構(特別是 YAML)。Kubernetes 中的所有資源，包括 Pod，配置，部署，卷等，都可以簡單地在 YAML 文件中表示。

apiVersion:?v1
kind:?Pod
metadata:
??name:?site
??labels:
????app:?web
spec:
??containers:
????-?name:?front-end
??????image:?nginx
??????ports:
????????-?containerPort:?80

這種表示形式使 DevOps 或站點可靠性工程師可以更輕松地完全表達其工作負載，而無需使用 Python，Ruby 或 Javascript 等編程語言編寫代碼。

以數據為基礎的架構的其他好處包括：

GitOps 或 Git Operations 版本控制。使用這種方法，您可以將所有 Kubernetes YAML 文件保留在 git 存儲庫下，這使您可以準確地知道何時進行更改，由誰進行更改以及究竟進行了哪些更改。這樣可以避免整個組織需要成員去尋找可能模棱兩可的內容，從而提高了整個組織的透明度并提高了效率。同時，通過合并請求，可以更輕松地自動更改 Kubernetes 資源。
可擴展性。將資源定義為 YAML，使集群運營商可以非常輕松地更改 Kubernetes 資源中的一個或兩個數字來更改縮放行為。Kubernetes 具有水平 Pod 自動縮放器，可幫助您確定特定部署必須能夠處理的最小和最大數量的 Pod，才能處理低流量和高流量時間。例如，如果您運行的部署可能由于流量突然增加而可能需要更多容量，則可以將 maxReplicas 從 10 更改為 20：

apiVersion:?autoscaling/v2beta2
kind:?HorizontalPodAutoscaler
metadata:
??name:?myapp
??namespace:?default
spec:
??scaleTargetRef:
????apiVersion:?apps/v1
????kind:?Deployment
????name:?myapp-deployment
??minReplicas:?1
??maxReplicas:?20
??metrics:
??-?type:?Resource
????resource:
??????name:?cpu
??????target:
????????type:?Utilization
????????averageUtilization:?50

安全和控制。YAML 是驗證在 Kubernetes 中部署什么以及如何部署的好方法。例如，有關安全性的主要問題之一是您的工作負載是否以非 root 用戶身份運行。我們可以使用 conftest^[11](一種 YAML /JSON 驗證器)之類的工具以及Open Policy Agent^[12](一種策略驗證器)來檢查您的工作負載的 SecurityContext^[13] 是否允許容器作為 root 運行。為此，用戶可以使用一個簡單的開放策略代理重新注冊策略，如下所示：

package?main

deny[msg]?{
??input.kind?=?"Deployment"
??not?input.spec.template.spec.securityContext.runAsNonRoot?=?true
??msg?=?"Containers?must?not?run?as?root"
}

云提供商集成。科技行業的主要趨勢之一是在公有云提供商中運行工作負載。借助云提供商組件，Kubernetes 允許每個群集與其運行的云提供商進行集成。例如，如果用戶正在 AWS 的 Kubernetes 中運行某個應用程序，并且希望通過服務訪問該應用程序，則云提供商將幫助自動創建 LoadBalancer 服務，該服務將自動設置 Amazon Elastic Load Balancer 來將流量轉發給應用程序 pods。

可擴展性

Kubernetes 具有很好的可擴展性，開發人員對此非常滿意。內置一些資源，例如 Pod，Deployment，StatefulSet，Secrets，ConfigMap 等。同時用戶和開發人員可以通過“自定義資源定義^[14]”添加更多資源。例如，如果我們想定義 CronTab 資源，則可以使用以下方法來做到這一點：

apiVersion:?apiextensions.k8s.io/v1
kind:?CustomResourceDefinition
metadata:
??name:?crontabs.my.org
spec:
??group:?my.org
??versions:
????-?name:?v1
??????served:?true
??????storage:?true
??????Schema:
????????openAPIV3Schema:
??????????type:?object
??????????properties:
????????????spec:
??????????????type:?object
??????????????properties:
????????????????cronSpec:
??????????????????type:?string
??????????????????pattern:?'^(\d+|\*)(/\d+)?(\s+(\d+|\*)(/\d+)?){4}$'
????????????????replicas:
??????????????????type:?integer
??????????????????minimum:?1
??????????????????maximum:?10
??scope:?Namespaced
??names:
????plural:?crontabs
????singular:?crontab
????kind:?CronTab
????shortNames:
????-?ct

我們可以稍后使用以下內容創建 CronTab 資源：

apiVersion:?"my.org/v1"
kind:?CronTab
metadata:
??name:?my-cron-object
spec:
??cronSpec:?"*?*?*?*?*/5"
??image:?my-cron-image
??replicas:?5

Kubernetes 可擴展性的另一種形式是開發人員編寫自己的 Operators^[15] 的能力，Operator 是在 Kubernetes 集群中運行的，遵循 control loop pattern^[16] 的特定進程。操作員允許用戶通過與 Kubernetes API 進行對話來自動管理 CRD(自定義資源定義)。

該社區有幾種工具，允許開發人員創建自己的 Operators。這些工具之一是 Operator Framework^[17] 及其 Operator SDK^[18]。SDK 為開發人員提供了一個框架，使他們可以快速開始創建 operator。例如，您可以從命令行^[19]輸入以下命令開始：

$?operator-sdk?new?my-operator?--repo?github.com/myuser/my-operator

它將為您的 operator 創建整個樣板，包括 YAML 文件和 Go 代碼：

.
|____cmd
|?|____manager
|?|?|____main.go
|____go.mod
|____deploy
|?|____role.yaml
|?|____role_binding.yaml
|?|____service_account.yaml
|?|____operator.yaml
|____tools.go
|____go.sum
|____.gitignore
|____version
|?|____version.go
|____build
|?|____bin
|?|?|____user_setup
|?|?|____entrypoint
|?|____Dockerfile
|____pkg
|?|____apis
|?|?|____apis.go
|?|____controller
|?|?|____controller.go

然后，您可以添加 API 和類似的控制器：

$?operator-sdk?add?api?--api-version=myapp.com/v1alpha1?--kind=MyAppService
$?operator-sdk?add?controller?--api-version=myapp.com/v1alpha1?--kind=MyAppService

最后構建并將 operator 推送到您的容器注冊表：

$?operator-sdk?build?your.container.registry/youruser/myapp-operator

如果開發人員需要更多控制權，則可以修改 Go 文件中的樣板代碼。例如，要修改控制器的詳細信息，他們可以對 controller.go 文件進行更改。

另一個項目 KUDO^[20] 允許您僅使用聲明性 YAML 文件來創建運算符。例如，Apache Kafka 的運算符將定義為以下內容^[21]，它允許用戶使用以下命令在 Kubernetes 上安裝 Kafka 集群：

$?kubectl?kudo?install?zookeeper
$?kubectl?kudo?install?kafka

然后還使用另一個命令對其進行調整：

$?kubectl?kudo?install?kafka?--instance=my-kafka-name?\
????????????-p?ZOOKEEPER_URI=zk-zookeeper-0.zk-hs:2181?\
????????????-p?ZOOKEEPER_PATH=/my-path?-p?BROKER_CPUS=3000m?\
????????????-p?BROKER_COUNT=5?-p?BROKER_MEM=4096m?\
????????????-p?DISK_SIZE=40Gi?-p?MIN_INSYNC_REPLICAS=3?\
????????????-p?NUM_NETWORK_THREADS=10?-p?NUM_IO_THREADS=20

革新

在過去的幾年中，Kubernetes 每三四個月發布一次主要版本，這意味著每年都有三到四個主要版本。推出的新功能的數量并未減慢，最新版本^[22]的 30 多種新增功能和更改證明了這一點。此外，Kubernetes 項目 GitHub 活動表明^[23]，即使在這些困難時期，貢獻也沒有放緩的跡象。

這些新功能使集群運營商在運行各種不同的工作負載時具有更大的靈活性。軟件工程師還喜歡擁有更多控件，以將其應用程序直接部署到生產環境中。

社區

Kubernetes 受歡迎的另一個重要方面是其強大的社區。首先，Kubernetes 在 2015 年發布 1.0 版本時捐贈給了一個與供應商無關的家庭：Cloud Native Computing Foundation^[24]。

隨著項目的推進，針對 Kubernetes 中的不同區域還有各種各樣的社區 SIG^[25](特殊興趣小組)。他們不斷添加新功能，并使其對用戶更加友好。

Cloud Native Foundation 還組織了 CloudNativeCon/KubeCon，截至撰寫本文時，CloudNativeCon/KubeCon 是世界上最大的開源活動。該活動通常每年舉行三屆，吸引了數千名希望改善 Kubernetes 及其生態系統以及利用每三個月發布的新功能的技術人員和專業人士。

此外，Cloud Native Foundation 擁有一個技術監督委員會^[26]，與 SIGs^[27] 一起，研究基金會在云原生生態系統中的新項目和現有項目^[28]。大多數項目都有助于增強 Kubernetes 的價值主張。

最后，我相信，如果沒有社區的有意識的努力來互相包容并歡迎任何新來者，Kubernetes 就不會取得成功。

未來

開發人員未來面臨的主要挑戰之一是如何將更多的精力放在代碼的細節上，而不是代碼運行所在的基礎結構上。為此，無服務器^[29]正在成為應對這一挑戰的領先架構范例之一。已經有非常高級的框架，例如 Knative^[30] 和 OpenFaas^[31]，它們使用 Kubernetes 從開發人員那里提取基礎架構。

我們在本文中對 Kubernetes 進行了簡要介紹，但這只是冰山一角。用戶可以利用更多資源，功能和配置。我們將持續看到可增強或發展 Kubernetes 的新開源項目和技術，正如我們所提到的，貢獻和社區無處不在。

原文鏈接：https://stackoverflow.blog/2020/05/29/why-kubernetes-getting-so-popular/

作者：Ricardo Aravena^[32]

譯者：Go語言中文網 polaris

參考資料

[1]

已有 6 年歷史: https://en.wikipedia.org/wiki/Kubernetes

[2]

最受歡迎的平臺之一: https://insights.stackoverflow.com/survey/2019#most-loved-dreaded-and-wanted

[3]

第三大平臺: https://dev.insights.stackoverflow.com/survey/2020#technology-most-loved-dreaded-and-wanted-platforms

[4]

cgroups: https://en.wikipedia.org/wiki/Cgroups

[5]

namespaces: https://en.wikipedia.org/wiki/Linux_namespaces

[6]

LXC: https://en.wikipedia.org/wiki/LXC

[7]

Borg: https://kubernetes.io/blog/2015/04/borg-predecessor-to-kubernetes/

[8]

Mesos: http://mesos.apache.org/

[9]

Puppet: https://github.com/puppetlabs/puppet

[10]

Chef: https://github.com/chef/chef

[11]

conftest: https://www.conftest.dev/

[12]

Open Policy Agent: https://www.openpolicyagent.org/

[13]

SecurityContext: https://kubernetes.io/docs/tasks/configure-pod-container/security-context/

[14]

自定義資源定義: https://kubernetes.io/docs/tasks/access-kubernetes-api/custom-resources/custom-resource-definitions/

[15]

Operators: https://kubernetes.io/docs/concepts/extend-kubernetes/operator/

[16]

control loop pattern: https://kubernetes.io/docs/concepts/#kubernetes-control-plane

[17]

Operator Framework: https://github.com/operator-framework

[18]

Operator SDK: https://github.com/operator-framework/operator-sdk

[19]

命令行: https://github.com/operator-framework/operator-sdk#create-and-deploy-an-app-operator

[20]

KUDO: https://kudo.dev/

[21]

以下內容: https://github.com/kudobuilder/operators/blob/master/repository/kafka/operator/operator.yaml

[22]

最新版本: https://kubernetes.io/docs/setup/release/notes/#changes-by-kind

[23]

GitHub 活動表明: https://k8s.devstats.cncf.io/d/12/dashboards?orgId=1&refresh=15m&from=now-1y&to=now-1h

[24]

Cloud Native Computing Foundation: https://www.cncf.io/

[25]

社區 SIG: https://github.com/kubernetes/community/blob/master/sig-list.md

[26]

技術監督委員會: https://github.com/cncf/toc

[27]

SIGs: https://github.com/cncf/toc/blob/master/sigs/README.md

[28]

現有項目: https://www.cncf.io/projects/

[29]

無服務器: https://stackoverflow.blog/2020/05/18/you-want-efficient-application-scaling-go-serverless/

[30]

Knative: https://github.com/knative

[31]

OpenFaas: https://github.com/openfaas/faas

[32]

Ricardo Aravena: https://stackoverflow.blog/author/ricardo-aravena/

總結

以上是生活随笔為你收集整理的kafka集群 kubernetes_为什么 Kubernetes 如此受欢迎？的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。

上一篇：单片机串口波特率 c语言 9600
下一篇：信用卡超限额度是什么？信用卡超限额度怎么