技术博客
首页 所有文章 标签 分类 关于
技术博客

目录

云原生及生态

 收录于 未分类
   约 4328 字   预计阅读 9 分钟 
https://bing.ee123.net/img/rand?artid=140993280

云原生及生态

1.云原生定义

1.1 理解云原生

1.1.1 从字面理解

云原生从字面意思上来看可以分成：

  • 云(Cloud)
  • 原生(Native)
  • 云原生（CloudNative）

1.1.2 由CNCF定义

云原生计算基金会(Cloud Native Computing Foundation,CNCF)成立于2015年12月11日，由谷歌与Linux基金会联合创办，成立这个非盈利组织的目的是为了推广、孵化和标准化云原生相关的技术。

云原生计算基金会(Cloud Native Computing Foundation,CNCF)认为：云原生是一类技术的统称，通过云原生技术，我们可以构建出更易于弹性扩展的应用程序，其包含容器、服务网格、微服务、不可变基础设施和声明式API等相关技术，这些技术能够构建容错性好、易于管理和便于观察的松耦合系统，结合可靠的自动化手段，相关工程师能够轻松对系统作出频繁和可预测的重大变更。

1.2 云与原生之间的关系

  • 云是指云计算技术或云计算平台
  • 原生就是土生土长
  • 云原生表示业务应用原生化，例如:Kubernetes使用声明式部署业务应用，所以众多的产品都在使用声明式方式部署应用
  • 使用云原生的好处：
    • 业务应用被设计为在云上以最佳方式运行
    • 充分发挥云的优势，例如：资源的无限化、扩缩容便利化等特点

1.3 云原生概念由来及最佳实践三个层面

1.3.1 概念由来

  • Pivotal公司的Matt Stine于2013年首次提出云原生(CloudNative)的概念.
  • 2015年云原生计算基金会(CNCF)成立，最初把云原生定义为包括：容器化封装+自动化管理+面向微服务。
  • 到了2018年，CNCF又更新了云原生的定义，把服务网格(Service Mesh)和声明式API给加了进来。
  • 云原生技术有利于各组织在公有云、私有云和混合云等新型动态环境中，构建和运行可弹性扩展的应用。
  • 这些技术能够构建容错性好、易于管理和便于观察的松耦合系统。
  • 结合可靠的自动化手段，云原生技术使工程师能够轻松地对系统作出频繁和可预测的重大变更。

1.3.2 最佳实践三个层面

1）服务编排要实现计算资源弹性化

2） 服务构建和部署要实现高度自动化

3）事件驱动基础设施标准化

1.4 云原生代表技术

https://i-blog.csdnimg.cn/blog_migrate/a9b2ea4d1f002ac32c2b36fb22e60446.png

1.4.1 微服务

微服务的定义：原有单体应用拆分为多个独立自治的组件，每个组件都可以独立设计、开发、测试、部署和运维，这个组件可以单独提供对外服务，我们称之为微服务。

例如：早期的LNMT WEB部署架构，使用微服务后，每一个组件都可以独立自治、运行、扩容、缩容等

各组件之间可通过轻量的Restful风格接口进行交互和协同

1.4.2 容器化

1.4.2.1 Docker容器

Docker容器，容器属于it基础设施层概念，是比虚拟机更轻量化的隔离工具，是微服务最佳载体。

https://i-blog.csdnimg.cn/blog_migrate/e65414e265282c42f808011395280f6b.png

https://i-blog.csdnimg.cn/blog_migrate/bafa65508de0aeb6ba5e761c232996df.png

1.4.2.2 Kubernetes资源调度与容器编排

使用kubernetes的资源调度与容器编排，可以实现Docker容器更优管理，进一步实现其PaaS层能力。

1.4.3 服务网格

服务网格存在的目的，就是去中心化的服务治理框架。

以往需要对微服务或对api接口去做治理和管控，一般会用类似于ESB服务总线或 API网关，将API接口注册和接入到API网关，由于API网关本身是一个中心化的架构，所以所有的请求流量都可以通过API网关，由API网关实现对流量拦截，同时对拦截以后的流量进行安全，日志，限流熔断，链路监控等各种管控治理，去中心化以后就没有这种集中化的流量管控点了，所以对流量的拦截就从ESB服务总线或API网关下沉到各个微服务中去了，这就是为什么我们需要在微服务端增加一个代理包的原因，通过这个代理包来做流量的拦截，同时实现对流量的管控，当前在微服务网格中也是用同样的思路来对服务进行治理的。例如：istio服务治理，它会在微服务应用中添加一个边车容器（Envoy）来实现流量的拦截和管控。这个属于微服务服务网格治理的核心技术。

https://i-blog.csdnimg.cn/blog_migrate/68e5b4028ffa85ed73d17817944a7947.png

去中心化的服务治理依然有一个控制中心，而控制中心依然是中心化的，但实际的控制流和接口数据访问的消息流是实现分离的，控制中心仅处理服务注册发现，实际的接口调用、服务访问是不通过控制中心的，即使控制中心出现问题，例如控制中心服务不可用等，也不会影响实际服务接口调用。

1.4.4 不可变基础设施

https://i-blog.csdnimg.cn/blog_migrate/781ab25afa319f1f8a2446eb81b692c5.png

传统开发过程中，做一个软件程序的部署，当它部署到一个生产环境，如果我们要做变更，不管是程序的变更还是配置的变更，都需要在原来的生产环境上面重新部署或对某一个配置直接进行修改，但是在云原生应用中，任何一个应用当你部署到生产环境中，形成一个容器实例以后，这个容器实例不应该再做任何变化，如果软件程序需要重新部署或修改配置时怎么办呢？可以利用基础容器镜像，重新生成一个新的容器实例，同时把旧的容器实例销毁掉，这个就是云原生技术中要求的不可变技术点。

1.4.5 声明式API

应用部署大体上分为两种执行方式：命令式和声明式。

  • 命令式
    • 在命令行执行命令创建容器，
# kubectl run -it busyboxapp --image=busyboxapp:1.28.4
  • 声明式
    • 使用yaml资源清单文件
    • 在yaml文件中声明要做的操作、需要的配置信息有哪些、用户期望达到的状态
创建yaml资源清单文件
# cat nginx.yaml
---
apiVersion: v1
kind: Service
metadata:
  name: nginx
  labels:
    app: nginx
spec:
  ports:
  - port: 80
    name: web
  clusterIP: None
  selector:
    app: nginx
---
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: web
spec:
  selector:
    matchLabels:
      app: nginx
  serviceName: "nginx"
  replicas: 2
  template:
    metadata:
      labels:
        app: nginx
    spec:
      imagePullSecrets:
      - name: huoban-harbor
      terminationGracePeriodSeconds: 10
      containers:
      - name: nginx
        image: nginx:latest
        ports:
        - containerPort: 80
          name: web
        volumeMounts:
        - name: www
          mountPath: /usr/share/nginx/html
  volumeClaimTemplates:
  - metadata:
      name: www
    spec:
      accessModes: [ "ReadWriteOnce" ]
      storageClassName: "managed-nfs-storage"
      resources:
        requests:
          storage: 1Gi

应用 yaml 资源清单文件
# kubectl apply -f nginx.yaml

IT 基础设施获取声明式文件的后续操作

当 IT 基础设施获取到声明文件后，首先要解析声明式文件中声明的内容，再去后端做出相应的操作，操作完成后，把各个底层技术组件协调到应用需要的一个状态。

使用声明式 API，任何对生产环境、配置都不是操作一条命令来完成的，都需要先写声明，或配置文件，这些操作都可以纳入配置管理中进行集中管理，这样有利于在生产环境出现问题时，能够快速了解前述操作，及对生产环境产生的影响，易于做版本回退、回滚等操作。

1.4.6 DevOps

借助于云原生相关技术，DevOps 时代才真正地到来了。

  • 实现开发、运维、测试协同全作
  • 构建自动化发布管道，实现代码快速部署(测试环境、预发布环境、生产环境等)
  • 频繁发布、快速交付、快速反馈、降低发布风险

2.云原生发展

我们知道计算资源应用技术一直是在不断地往前发展的，从物理机演进为虚拟机，从虚拟机再演进到容器化，由容器化再演变到我们今天所看到云原生技术，其中充满了机会与竞争，就拿容器化技术演进过程来说：

在这个发展历程中, 各家公司都出现了商业竞争：

  • 容器引擎之争: docker 公司的 docker VS CoreOS 公司的 rocket(简称 rkt)
  • 容器编排之争: Docker swarm VS Kubernetes VS Apache Mesos

在竞争合作之间寻找平衡从而导致了标准规范的诞生，而标准规范的诞生是整个云原生生态最重要的基石。

2015 年 6 月，Docker 带头成立 OCI，旨在“制定并维护容器镜像格式和容器运行时的正式规范（OCI Specifications）”，其核心产出是 OCI Runtime Spec（容器运行时规范）、OCI Image Spec（镜像格式规范）、OCI Distribution Spec（镜像分发规范）。所以 OCI 组织解决的是容器的构建、分发和运行问题 。

一个月之后，Google 带头成立了 Cloud Native Computing Foundation（CNCF），旨在“构建云原生计算 :一种围绕着微服务、容器和应用动态调度的、以基础设施为中心的架构，并促进其广泛使用”。所以 CNCF 组织解决的是应用管理及容器编排问题 。

3.CNCF 云原生全景图

3.1 CNCF 官方网址

网址：

https://i-blog.csdnimg.cn/blog_migrate/0fbbac4be579238157f216b95dddeaef.png

3.2 CNCF 已毕业项目及孵化中项目

https://i-blog.csdnimg.cn/blog_migrate/7ca97713f953a3e70cae20aee5e94d22.png

https://i-blog.csdnimg.cn/blog_migrate/14408c3955f0df8318d29101bb4665a7.png

3.3 CNCF 云原生全景图

CNCF 的项目全景图网址链接:

3.4 CNCF 云原生全景图分层

https://i-blog.csdnimg.cn/blog_migrate/2db5e1b69a669af58ba3677a03568517.png

https://i-blog.csdnimg.cn/blog_migrate/048b7f87768a327811e7d88e2fdd5ff9.png

…

3.4.1 云原生应用领域

云原生应用生态已覆盖到:大数据、人工智能、边缘计算、区块链等领域。

https://i-blog.csdnimg.cn/blog_migrate/fb38bee21ecf24ad72250ae8c2f5fe8b.png

https://i-blog.csdnimg.cn/blog_migrate/07c3a377810b73693a442c4a26c04f98.png

3.4.2 云原生应用编排及管理

3.4.2.1 编排与调度

https://i-blog.csdnimg.cn/blog_migrate/162cf418cfaee7887a298a6eaf892b08.png

https://i-blog.csdnimg.cn/blog_migrate/10b92e2456e1727024a9e508f276f397.png

3.4.2.2 远程调用

https://i-blog.csdnimg.cn/blog_migrate/1f2e966206a40cc32124319363945990.png

https://i-blog.csdnimg.cn/blog_migrate/f15c068d6a41c8272ed52db1dd362ff8.png

3.4.2.3 服务代理

https://i-blog.csdnimg.cn/blog_migrate/849794727441f9af51e8c4b41381f0a8.png

https://i-blog.csdnimg.cn/blog_migrate/c2bb50dfa9e850e473ae781a4f3903da.png

3.4.2.4 API 网关

https://i-blog.csdnimg.cn/blog_migrate/d54ca1d98439dbec83c872f0c742c2db.png

https://i-blog.csdnimg.cn/blog_migrate/e41669447b889f10ad95fd633e416f18.png

3.4.2.5 服务网格

https://i-blog.csdnimg.cn/blog_migrate/f42e235e812fb8241ae421cc46592f49.png

https://i-blog.csdnimg.cn/blog_migrate/0c5e0d72136ac37c9a1cfc06349e4d85.png

3.4.2.6 服务发现

https://i-blog.csdnimg.cn/blog_migrate/83d317a93a16192d2dd471f57e50beac.png

https://i-blog.csdnimg.cn/blog_migrate/621589655b9fe8341fe41862a4a37858.png

3.4.2.7 消息和流式处理

https://i-blog.csdnimg.cn/blog_migrate/3a7b6d91b0b528e71b8d3fe4950f4249.png

https://i-blog.csdnimg.cn/blog_migrate/b2d9c38f5f103c7e76747c52ca66c6da.png

3.4.2.8 Serverless

https://i-blog.csdnimg.cn/blog_migrate/ca2f9007371f5be4e77693e826f6b4f8.png

https://i-blog.csdnimg.cn/blog_migrate/66afd9d9652a7cfe2651b29cb2a4b073.png

3.4.2.9 CI/CD

https://i-blog.csdnimg.cn/blog_migrate/f7f2bcaa67763f840d210d6626b08159.png

https://i-blog.csdnimg.cn/blog_migrate/cc5607a85bfde0e2fac4325480743177.png

https://i-blog.csdnimg.cn/blog_migrate/4929eaff35fbdc27abb460ea4d13db02.png

3.4.2.10 自动化配置

https://i-blog.csdnimg.cn/blog_migrate/b7f2b6c729749a34584145e1b13d8da2.png

https://i-blog.csdnimg.cn/blog_migrate/c8a197793724571be074214b9644b063.png

3.4.2.11 数据库

https://i-blog.csdnimg.cn/blog_migrate/92952d9383e1cb62fb0c26a5eba46e8d.png

https://i-blog.csdnimg.cn/blog_migrate/01fb3eec6429f7652015bf9627cc16f4.png

3.4.2.12 容器镜像仓库

https://i-blog.csdnimg.cn/blog_migrate/92754e0b77f00154be15fc8431e73d7f.png

https://i-blog.csdnimg.cn/blog_migrate/a1bc2e3da6a67546fc9711b01e82d678.png

3.4.2.13 应用定义及镜像制作

https://i-blog.csdnimg.cn/blog_migrate/3f0106c2cca481ea28a4eef7f518b3d8.png

https://i-blog.csdnimg.cn/blog_migrate/460c75f7fbad5b76db445bba83faa8f8.png

3.4.2.14 密钥管理

https://i-blog.csdnimg.cn/blog_migrate/22f644c8c67a240f9dc20128959e1965.png

https://i-blog.csdnimg.cn/blog_migrate/84a8b2f3e7743e24365e9965aa735cbe.png

3.4.3 云原生底层技术

3.4.3.1 容器技术

https://i-blog.csdnimg.cn/blog_migrate/c3ef8a5aa5c52d791b3b96717385c90b.png

https://i-blog.csdnimg.cn/blog_migrate/5ebb18960914cdcce3eb6d6d0d3c3dd9.png

3.4.3.2 存储技术

https://i-blog.csdnimg.cn/blog_migrate/148595baa049ee7a5096c61ac913808c.png

https://i-blog.csdnimg.cn/blog_migrate/7293120fc2958539f7f3e4f916c25b58.png

3.4.3.3 网络技术

https://i-blog.csdnimg.cn/blog_migrate/c2eadc8c00169afa04ae3526e8bc9d3b.png

https://i-blog.csdnimg.cn/blog_migrate/4404ce99422a84abb590044618263e6e.png

3.4.4 云原生监测分析

3.4.4.1 主机状态及服务状态监控

https://i-blog.csdnimg.cn/blog_migrate/2b15167b3817910d7ee837922a009c69.png

https://i-blog.csdnimg.cn/blog_migrate/7f670d23ede2f1a4f0939c27bcdce646.png

3.4.4.2 日志收集分析

https://i-blog.csdnimg.cn/blog_migrate/9b51e137ebd9a7bd93d1e03ad0014c27.png

https://i-blog.csdnimg.cn/blog_migrate/4b841b268435291072872cdcdf5f4e65.png

3.4.4.3 全链路状态跟踪

https://i-blog.csdnimg.cn/blog_migrate/9f1739fd03ddd68e04304ddd0bf7e00b.png

https://i-blog.csdnimg.cn/blog_migrate/e537b87ad6908a3d14bf4b7aec30e4ca.png

3.4.5 云原生安全技术

https://i-blog.csdnimg.cn/blog_migrate/b5676085eb84c64de0ea1bfe769a06b1.png

https://i-blog.csdnimg.cn/blog_migrate/01f21070a1287f22d6eeb59e21a5698f.png

https://i-blog.csdnimg.cn/blog_migrate/7bc690dac34fe6bea31c93c8d1fcd871.png

基础设施安全 ：存储安全（加密存储、容灾备份）、网络安全（网络策略管理、访问控制）、计算安全（系统加固、资源隔离）

应用安全 ：应用数据安全、应用配置安全、应用环境安全

云原生研发安全 ：代码托管、代码审计、软件管理、可信测试、可信构建

容器生命周期安全 ：运行时安全、容器构建（镜像扫描、镜像签名）、部署安全（合规部署）、组件安全

安全管理 ：身份认证、访问授权、账号管理、审计日志、密钥管理、监控告警

以上所有云原生相关技术都是围绕着 Kubernetes 展开。

4.serverless 无服务器架构

云原生 2.0 时代，由 On Cloud 变为 In Cloud，生于云，长于云，且立而不破。

4.1 计算资源控制力与抽象化

https://i-blog.csdnimg.cn/blog_migrate/0c99ec0933e616308270b904335ed8d2.png

4.2 计算资源成本发展

https://i-blog.csdnimg.cn/blog_migrate/5e2b2d3d494f0512fc7c8e878e19debf.png

4.3 云原生技术未来发展方向

由于业务的逐利性，我们需要对计算资源和服务进行不断的抽象，在抽象的过程中我们会发现越来越少的能够接触到 IT 基础设施层，仅能够接触到各种技术的服务能力，这种服务能力我们称之 BaaS 后端能力及服务，对于开发人员来说，不要去接触到最底层的资源，这也不是其应该去做的事，开发人员应该专注于代码业务逻辑的实现即可。

其实在从 IT 基础设施层(IaaS)到 PaaS 层，我们一直在强调这种变化，那么 serverless 能够给我们带来了什么呢？

https://i-blog.csdnimg.cn/blog_migrate/b189b2d80fe003483557951e84acc48f.png

在传统的云原生架构开发下面，我们基于 DevOps，基于微服务和容器云，开发应用的时候，你依旧会选择一个开发框架，开发所使用的底层的基础平台，依旧会涉及到开发一个应用的时候的数据层，逻辑层，展现层，例如我们常说的三层架构和五层架构：

https://i-blog.csdnimg.cn/blog_migrate/7bf2ea0be3d896391313822daf336a17.png

进入 serverless 时代后，对于开发人员来说不需要去了解底层的基础设施及多层架构，全部不需要了解，任何一个功能的实现，简单来说，就变成一个个代码片段，通过代码片段去实现功能，通过代码片段的组合组装，来实现复杂一点的流程，这就是 serverless 所要达到的目的，因此 Serverless 有两个部分组成，一个是前面我们提到的 BaaS，另一个是 FaaS（funtion as a Service）层，函数即服务，当我们的 BaaS 能力足够强以后，我们去实现代码的功能非常简单，只要写一个个函数，并让其执行即可,即可达到项目上线的目的。

https://i-blog.csdnimg.cn/blog_migrate/7385e7471cc378c2f9054155e9fd32f7.png

5.结尾与总结

简单来说， 云原生就是在云中构建、运行应用程序的一套完整的技术体系和方法论。 这里的技术体系和方法论就目前来说指的是 微服务+DevOps+持续交付+容器化 。

上云跟云原生确实是不能划等号的。 上云只是简单地把基础设施能够搬到云上，而云原生是上云的更深层面。它需要借助的是云的 弹性伸缩的能力 ，还有 按量付费 的这种模式，去实现云上的开发、运维、测试、部署等生命周期，只有充分享受到云计算红利的这种模式，我觉得才是叫是真正的云原生。

所谓的“云”，现在就指的是 Kubernetes，那么“云原生”的意思就是应用的开发、部署、运维等一系列工作都要向 Kubernetes 看齐，使用容器、微服务、声明式 API 等技术，保证应用的整个生命周期都能够在 Kubernetes 环境里顺利实施，不需要附加额外的条件。

换句话说，“云原生”就是 Kubernetes 里的“原住民”，而不是从其他环境迁过来的“移民”。

更新于 2024-12-30
 运维开发, 容器, 云原生, Kubernetes, Docker
返回 | 主页