极狐GitLab 私有化部署上的 GitLab Orbit
Tier: 专业版,旗舰版
Offering: 私有化部署
GitLab Orbit 的设计目标是为您的极狐GitLab 实例增加尽可能小的负载。它从数据库的 ClickHouse 副本中读取极狐GitLab 数据,并通过极狐GitLab 内部 API 获取代码,绝不直接从 Gitaly 获取。同一条流水线还会为您提供极狐GitLab 数据的 ClickHouse 数据湖,您可以在此基础上构建,并与极狐GitLab 分开扩展。
GitLab Orbit 部署包含两个部分:
- 数据流水线,通过 PostgreSQL 逻辑复制将极狐GitLab 数据库复制到 ClickHouse 数据湖。
- GitLab Orbit,将数据湖和源代码转换为可查询的图谱。
数据流水线不依赖 GitLab Orbit,因此您可以在安装 GitLab Orbit 之前先验证流水线。
GitLab Orbit 仅以 Kubernetes 的 Helm chart 形式分发,不通过 Linux 软件包分发。 请在运行极狐GitLab 的集群上安装该 chart,或在能够访问极狐GitLab、PostgreSQL、ClickHouse 和 NATS 的独立集群上安装。 GitLab Orbit 不能在极狐GitLab Geo 从站点上运行。
架构
Rendering chart...
| 组件 | 功能 |
|---|---|
| Siphon | 通过 NATS 将 PostgreSQL 中的行复制到 ClickHouse 数据湖。 |
| Dispatcher | 监视同一个 NATS 流,负责图谱 schema,并将索引任务发布回 NATS。 |
| Indexer | 从 NATS 获取索引任务,读取数据湖,通过极狐GitLab 内部 API 获取源代码,并写入属性图谱。 |
| Webserver | 响应来自图谱的查询,并在查询需要时通过内部 API 获取文件内容。 |
极狐GitLab 通过 gRPC 访问 webserver。
本节内容
| 页面 | 描述 |
|---|---|
| 版本要求 | 每个 GitLab Orbit 版本对应的极狐GitLab、Helm chart 和 ClickHouse 版本 |
| 开始使用 | 先决条件、安装顺序、Kubernetes、NATS、对象存储和共享值 |
| 容量规划 | 每种极狐GitLab 参考架构规模对应的 Pod、节点、ClickHouse、NATS 和 Siphon 规模 |
| ClickHouse | 版本、数据库、高可用性、内存、日志保留和用户 |
| 设置数据复制 | PostgreSQL 逻辑复制和 Siphon |
| 设置 GitLab Orbit | 极狐GitLab 连接、密钥、chart、索引、验证和升级 |
| 网络 | TLS、证书以及 GitLab Orbit 使用的连接 |
| 监控 GitLab Orbit | Prometheus 指标、Grafana 仪表板和告警 |
| 故障排除 | 常见错误以及图谱数据库丢失后的恢复 |
加密模块
GitLab Orbit 服务器镜像在 AWS-LC-FIPS 加密模块中运行所有 TLS 连接和 JWT 验证。 当该模块未处于 FIPS 模式时,服务器不会启动。每个已发布的镜像都包含该模块,因此您不需要单独的 FIPS 镜像。用于本地索引的 orbit 命令行工具不包含该模块。