Docker-harbor

------ ## 一:harbor ### 1. harbor 概念 ​ Harbor 是一个企业级的云原生容器镜像仓库,由`VMware`主导开发并贡献给`Cloud Native Computing Foundation(CNCF)`。它通过为`Docker`镜像提供安全、高效的管理能力,帮助企业简化容器应用程序的交付流程。相比于传统的`Docker Registry`,`Harbor`提供了更多的企业级特性,如容器镜像仓库之间的镜像复制、用户管理、访问控制、漏洞扫描和镜像签名等功能。 ### 2. 特性 ​ `Harbor`的主要作用是为容器化应用程序提供集中式的镜像存储管理。它允许企业通过集中的仓库存储、分发和保护容器镜像,确保开发、测试和生产环境中使用的镜像都符合安全和合规要求。 `Harbor`有以下特性: - **基于云原生场景:**`Harbor`支持容器镜像和`Helm Chart`,可用作容器`Runtime`和编排平台等云原生环境的镜像仓库。 - **镜像管理:**`Harbor`作为一个企业级的镜像仓库,支持`Docker`和`OCI`格式镜像的存储和管理。 - **细粒度的访问控制:**通过基于角色的访问控制`(RBAC)`,`Harbor`能够确保不同用户在仓库中的操作权限得到精确控制。 - **镜像复制:**支持跨多个`Harbor`实例进行镜像复制,帮助实现多数据中心或混合云环境下的高效镜像分发。 - **漏洞扫描**: 集成了`Clair`或`Trivy`等安全工具,`Harbor`可以自动扫描镜像中的安全漏洞,确保部署的镜像安全。 - **镜像签名和内容信任:**通过`Notary`集成,`Harbor`支持镜像的签名和验证,确保镜像的完整性和可信度。 - **日志与审计:**提供详细的操作日志和审计功能,帮助企业了解镜像的使用和管理情况。 - **多租户支持:**`Harbor`支持项目隔离,帮助企业实现多租户环境下的镜像管理。 - **LDAP/AD 支持:**`Harbor`与现有的企业`LDAP/AD`集成以进行用户身份验证和管理,并支持将`LDAP`组导入`Harbor`,然后可以授予特定项目的权限。 - **镜像删除和垃圾收集:**系统管理员可以运行垃圾回收作业,以便可以删除**镜像**(悬挂的`manifests`和未引用的`blobs`),并且可以定期释放这些空间。 - **审核:**对存储库的所有操作都通过日志进行跟踪。 - **RESTful API:**提供`RESTful API`以方便管理操作,并且易于使用以与外部系统集成。嵌入式`Swagger UI`可用于探索和测试`API`。 ### 3. harbor 的架构 ​ `Harbor`的架构设计遵循微服务原则,由多个松耦合的组件组成,每个组件负责不同的功能模块。在`V2.0`版本,已经完全符合`OCI`标准。 下图是`Harbor`的整体架构。 ![](accents\image-202504040003.png) ### 4. harbor 的组件介绍 如上图所示,Harbor 由放置在 3 层中的以下组件组成: #### 1. 数据访问层(Data Access Layer) ​ 数据访问层主要负责存储和管理容器镜像以及相关的元数据,是整个 Harbor 系统的基础。它包括以下几个核心组件: - **k-v 存储:** 由 Redis 组成,提供数据缓存功能,并支持临时持久化 Job 服务的 Job 元数据。 - **Registry(镜像仓库)**: 基于 Docker Registry 扩展的核心组件,负责存储容器镜像及其标签(tags)。它支持 Docker 和 OCI 格式的镜像,并允许通过 HTTP API 进行镜像的上传、下载和管理。 - **Database(数据库)**: Harbor 使用 PostgreSQL 数据库存储元数据,包括用户信息、项目、镜像标签、访问控制策略等。数据库是 Harbor 中各个功能模块元数据管理的核心。 - **Object Storage**: Harbor 也支持将镜像存储在对象存储中,支持的存储后端包括文件系统、S3、Ceph 等。对象存储用于存储实际的镜像层(layers)和其他大文件数据。 #### 2. 基础服务(Fundamental Services) ​ 基础服务,即是核心层,负责处理业务逻辑,是系统的心脏。这个层次负责管理用户、权限控制、镜像的生命周期、任务调度等操作。 - **Proxy:** 由 Nginx Server 组成的反向代理,提供 API 路由能力。Harbor 的组件,如核心、注册中心、Web 门户和 Token 服务等,都位于这个反向代理的后面。代理将来自浏览器和 Docker 客户端的请求转发到各种后端服务。 **核心:** Harbor 的核心服务,主要提供以下功能: - **API Service:**该组件是`Harbor`的核心服务,处理所有`API`请求。它负责用户身份验证、项目和镜像的管理,以及与其他微服务的交互。它还管理系统中的访问控制`(RBAC)`以及任务调度。 - **Job Service:**负责异步任务的处理,比如镜像的复制、漏洞扫描等。它通过消息队列来调度任务,并监控任务的执行状态。 - **Notary:**该组件用于提供镜像的签名与验证服务,确保镜像的来源可信。`Notary`通过实现`Docker Content Trust (DCT)`来保护镜像的完整性。 - **Clair/Trivy:**这是`Harbor`的漏洞扫描服务,负责对上传的镜像进行安全漏洞扫描。通过定期扫描镜像中的已知漏洞`(CVE)`,帮助管理员发现并修复潜在的安全问题。 - **Replication Controller**(**复制控制器**):管理复制策略和第三方容器仓库的适配器,触发和监控并发复制进程。实现了许多第三方容器仓库适配器,包括不限于`docker registry`、`Docker Hub`、`Huawei SWR`、阿里 `ACR`等。 - **k (通知管理器)**:在`Harbor`中配置的一种机制,以便可以将`Harbor`中的工件状态更改事件触发`Harbor`中配置的`Webhook`端点。而第三方应用可以通过侦听相关的`webhook`事件来触发一些后续操作。现在,支持两种方式: 1. `HTTP Post`请求 2. `Slack channel` - **Log collector(日志收集器):** 日志收集器,负责将其他模块的日志收集到一个地方。 #### 3. 消费者(Consumers) - **外部客户端**:作为标准的云原生容器仓库,自然会支持相关客户端,如`docker CLI`、`notary`客户端、`OCI`兼容客户端`(如 Oras)`和`Helm`。除了这些客户端。 - **Web 门户:** 一个图形用户界面,可帮助用户管理`Registry`上的映像。 ## 二:harbor 部署 环境:安装`docker`、`docker-compose` ### 1. 下载 安装包下载地址:[Tags · goharbor/harbor · GitHub](https://github.com/goharbor/harbor/tags) ```bash [root@harbor ~]# wget https://github.com/goharbor/harbor/releases/download/v2.12.2/harbor-offline-installer-v2.12.2.tgz 解压 [root@harbor ~]# tar xf harbor-offline-installer-v2.12.2.tgz -C /usr/local/ ``` ### 2. 配置 修改配置文件 ```bash [root@harbor ~]# cd /usr/local/harbor/ [root@harbor harbor]# mv harbor.yml.tmpl harbor.yml [root@harbor harbor]# vim harbor.yml 修改主机IP hostname: 192.168.159.132 注释https # https related config # https: # https port for harbor, default is 443 # port: 443 # The path of cert and key files for nginx # certificate: /your/certificate/path # private_key: /your/private/key/path 修改密码 harbor_admin_password: Harbor12345 ``` ### 3. 导入镜像 ```bash [root@harbor harbor]# docker load -i harbor.v2.12.2.tar.gz # 查看镜像 [root@harbor harbor]# docker images REPOSITORY TAG IMAGE ID CREATED SIZE goharbor/harbor-exporter v2.8.2 63341a78f287 22 months ago 98.1MB goharbor/redis-photon v2.8.2 6f4498a430ca 22 months ago 121MB goharbor/trivy-adapter-photon v2.8.2 06de9f1c733d 22 months ago 460MB goharbor/notary-server-photon v2.8.2 ef7c8ea2dc49 22 months ago 114MB goharbor/notary-signer-photon v2.8.2 4e5b1746a124 22 months ago 111MB goharbor/harbor-registryctl v2.8.2 fa61a236a6d6 22 months ago 142MB goharbor/registry-photon v2.8.2 f80e71363231 22 months ago 79.3MB goharbor/nginx-photon v2.8.2 3d009028f260 22 months ago 120MB goharbor/harbor-log v2.8.2 2914d282d9bf 22 months ago 127MB goharbor/harbor-jobservice v2.8.2 40118f1568a8 22 months ago 141MB goharbor/harbor-core v2.8.2 0bbbd1f379fc 22 months ago 165MB goharbor/harbor-portal v2.8.2 3e74e0758aa4 22 months ago 127MB goharbor/harbor-db v2.8.2 5126635ae9f0 22 months ago 174MB goharbor/prepare v2.8.2 eb3cf3cdd17a 22 months ago 163MB ``` ### 4. 初始化与安装 ```bash # 初始化 [root@harbor harbor]# ./prepare # 安装 [root@harbor harbor]# ./install.sh ``` ### 5. 查看 harbor 状态 ```bash [root@harbor harbor]# docker-compose ps NAME COMMAND SERVICE STATUS PORTS harbor-core "/harbor/entrypoint.…" core running (healthy) harbor-db "/docker-entrypoint.…" postgresql running (healthy) harbor-jobservice "/harbor/entrypoint.…" jobservice running (healthy) harbor-log "/bin/sh -c /usr/loc…" log running (healthy) 127.0.0.1:1514->10514/tcp harbor-portal "nginx -g 'daemon of…" portal running (healthy) nginx "nginx -g 'daemon of…" proxy running (healthy) 0.0.0.0:80->8080/tcp, :::80->8080/tcp redis "redis-server /etc/r…" redis running (healthy) registry "/home/harbor/entryp…" registry running (healthy) registryctl "/home/harbor/start.…" registryctl running (healthy) ``` ### 6. 操作 关闭`harbor` ```bash [root@harbor harbor]# docker-compose stop ``` 启动`harbor` ```bash [root@harbor harbor]# docker-compose start ``` 创建`harbor` ```bash [root@harbor harbor]# docker-compose up -d ``` 删除`harbor` ```bash [root@harbor harbor]# docker-compose down ``` ### 7. 推送镜像到 harbor 登录页面:http://ip:80 ![](accents\image-202504040004.png) 密码:配置文件中 docker 添加 harbor 仓库 ```bash [root@docker ~]# vim /etc/docker/daemon.json {"insecure-registries":["http://192.168.159.132"]} ``` 重启 docker ```bash [root@docker ~]# systemctl daemon-reload [root@docker ~]# systemctl restart docker ``` 查看dcoker是否配置成功 ```bash [root@docker ~]# docker info Insecure Registries: 192.168.159.132 127.0.0.0/8 Live Restore Enabled: false ``` docker 客户端登录 harbor ```bash [root@docker ~]# docker login 192.168.159.132 Username: admin Password: WARNING! Your password will be stored unencrypted in /root/.docker/config.json. Configure a credential helper to remove this warning. See https://docs.docker.com/engine/reference/commandline/login/#credentials-store Login Succeeded ``` 修改镜像 tag ```bash [root@docker ~]# docker tag centos:7 192.168.159.132/library/centos:7 ``` 推送镜像 ```bash [root@docker ~]# docker push 192.168.159.132/library/centos:7 The push refers to repository [192.168.159.132/library/centos] 174f56854903: Pushed 7: digest: sha256:dead07b4d8ed7e29e98de0f4504d87e8880d4347859d839686a31da35a3b532f size: 529 ``` 查看页面 ![](accents\image-202504040005.png)