nixkits-check-updates · git:20260809.e88fd98 · 2026-08-09 · sha256 3f638258b194dcfd

nixkits-check-updates git:20260809.e88fd98A

Immutable. This exact content is served forever at /api/v1/blob/3f638258b194dcfd.

---
name: nixkits-check-updates
description: 检查 NixKits 所有软件包的上游版本更新并自动应用;将本次修复记入维护日志。检测新版本、更新构建配置、更新文档、报告本地安装版本、撰写修复记录。
---

# NixKits 软件包更新检查

检查 NixKits 各软件包的上游发布更新,执行版本升级,并更新文档。

## 排除的软件包

以下类别**不检查**(无固定上游发布版本)。通过 `.nix` 文件特征自动分类:

- **自建软件包**:`src` 指向本地路径(`./` 或 `../` 开头),如 `rustPlatform.buildRustPackage { src = ./src; }`
- **动态版本追踪**:`version` 从外部输入动态读取,如 `builtins.readFile`、URL 抓取、`flake` input
- **跟随 nixpkgs 版本**:使用 `overrideAttrs` 仅追加 patch,不定义独立 version
- **补丁内硬编码版本**:`.patch` 文件中直接包含 `${version}` 或 wheel URL 及 hash(见下方「检查补丁内版本」节)

`flake.nix` → `packages` 中的其余包均自动纳入检查。

## 第 1 步:确认本地仓库

```bash
# 通过 flake.nix 自动发现项目名
test -f flake.nix && echo "OK: $(grep -oP 'description\s*=\s*"\K[^"]+' flake.nix | head -1)" || echo "ERROR: not in a flake project"
```

## 第 2 步:发现待检查的软件包

从 `flake.nix` 的 packages 段自动提取,再按排除规则过滤:

```bash
# 自动发现所有被 callPackage 引用的包文件
grep -oP '\./[a-zA-Z0-9_/-]+\.nix' flake.nix | sort -u > /tmp/all_pkgs.txt

# 排除自建包(src 包含 ./ 或 ../)
while read f; do
  grep -q 'src\s*=\s*\./\.\.\|src\s*=\s*\.\/' "$f" 2>/dev/null && echo "SKIP self-hosted: $f"
done < /tmp/all_pkgs.txt

# 剩余包即为外部更新候选
```

## 第 3 步:检查上游版本

对每个发现的外部包,从其 `.nix` 文件确定上游仓库,然后比对:

```bash
check() {
  local pkg="$1" current="$2" repo="$3"
  latest=$(curl -s "https://api.github.com/repos/$repo/releases/latest" | grep -oP '"tag_name":\s*"\K[^"]+')
  if [ "$current" != "$latest" ]; then
    echo "UPDATE: $pkg  $current → $latest"
  else
    echo "OK: $pkg  $current"
  fi
}
```

## 第 4 步:更新构建配置

> **⚠️ hash 计算注意事项**
>
> - SRI hash 格式必须使用标准 base64(`+` `/` `=`),**不能**使用 URL-safe base64(`-` `_`)。
>   用 `nix hash to-sri --type sha256 <hash>` 或 `nix-prefetch-url --type sha256 <url>` 获取正确格式
> - `fetchFromGitHub` 的 source hash **不能**从 GitHub archive tarball(`/archive/refs/tags/`)预计算 —
>   两者可能不同。必须通过 `nix build` 的 hash mismatch 错误获取
> - `npmDepsHash` 不能设为空字符串 `""`。清空时使用 `lib.fakeHash` 占位
> - npm 包需要两次 `nix build`:第一次获取 source hash,第二次获取 npmDepsHash。
>   如果 source hash 已知正确,可只清空 npmDepsHash 一次构建完成

对每个有更新的包:

### npm 包

1. 更新 `.nix` 文件中的 `version` 字符串
2. 将 `fetchFromGitHub` 的 `hash` 置为空占位符
3. 将 `npmDepsHash` 置为空占位符
4. 运行 `nix build .#<pkg>` 两次 — 第一次获取源码 hash,第二次获取 npmDepsHash
5. 用实际值更新两个 hash
6. 运行 `nix build .#<pkg>` 验证构建成功

### cmake 包

1. 更新 `version` 字符串
2. 将 `fetchFromGitHub` 的 `hash` 置空
3. 运行 `nix build .#<pkg>` 获取正确的 hash
4. 更新 hash
5. 运行 `nix build .#<pkg>` 验证构建成功

### Rust 包(buildRustPackage)

`rustPlatform.buildRustPackage` 通过 `cargoLock.lockFile` 声明式锁定依赖,不会自动生成 lock 文件。**版本升级必须同步三处**:

1. 更新 `version` 字符串
2. 将 `fetchFromGitHub` 的 `hash` 置空,`nix build` 获取正确 hash 后更新
3. **同步 Cargo.lock**(最容易遗漏):
   - 上游发布新 tag 时,源码中的 `Cargo.lock` 依赖集可能变化
   - 从上游仓库下载对应 tag 的 lock 文件覆盖本地副本:
     ```bash
     curl -sL "https://raw.githubusercontent.com/<owner>/<repo>/v<version>/Cargo.lock" \
       -o <local-lock-file>
     ```
   - 验证条目数是否变化(`grep -c '^name = '`),变化即说明依赖集更新,必须同步
   - 本地 lock 副本名通常形如 `<pkg>-src-Cargo.lock`,与上游内容不一致时构建报
     `lock file ... needs to be updated` 或 hash 校验失败
4. 运行 `nix build .#<pkg>` 验证构建成功

> **交叉编译注意**:riscv64 等交叉构建 eval 可能超时。获取 `fetchFromGitHub` source hash
> 的正确姿势:
> - **禁止**用 `nix-prefetch-url` 预取 `https://github.com/<owner>/<repo>/archive/v<version>.tar.gz`
>   的 hash —— archive tarball 与 `fetchFromGitHub`(git 协议)hash **不一致**,会导致 CI
>   构建失败(`hash mismatch ... got:` 与本地预取值不同)。曾因该错误建议导致
>   codewhale-riscv64 CI 连续失败。
> - 正确方法:用任意 nixpkgs 的 `fetchFromGitHub` + 占位 hash 构建一次,从报错中获取 got 值:
>   ```bash
>   nix build --impure --expr '
>   let pkgs = import (builtins.getFlake "/path/to/flake").inputs.nixpkgs.legacyPackages.x86_64-linux;
>   in pkgs.fetchFromGitHub { owner = "<owner>"; repo = "<repo>"; rev = "v<version>"; hash = lib.fakeHash; }
>   ' 2>&1 | grep got:
>   ```

### 预编译二进制包(fetchurl)

1. 更新 `version` 字符串及所有下载 URL
2. 将所有 `hash` 值置空
3. 运行 `nix build .#<pkg>` 获取各二进制 hash(可能需要多次,每次获取一个 hash)
4. 逐一更新 hash
5. 运行 `nix build .#<pkg>` 验证构建成功

### flake.lock 同步

#### 前置检测

根据仓库状态决定如何处理 `flake.lock`:

```bash
# 情况 1:flake.lock 已被 .gitignore 排除 → 跳过,无需提交
if grep -qx 'flake.lock' .gitignore 2>/dev/null; then
  echo "SKIP: flake.lock 已在 .gitignore 中,无需提交"
  exit 0
fi

# 情况 2:仓库包含动态版本包 → 必须排除 flake.lock
# 检测特征:builtins.fetchurl 无 hash 参数、flake input 指向 API URL 等
if grep -rq 'builtins.fetchurl.*releases/latest\|\.url\s*=\s*"https\?://api\.' \
   overlays/ flake.nix 2>/dev/null; then
  echo "WARN: 检测到动态版本包,flake.lock 不可复现"
  if ! grep -qx 'flake.lock' .gitignore 2>/dev/null; then
    echo "flake.lock" >> .gitignore
    echo "已添加 flake.lock 到 .gitignore"
  fi
  exit 0
fi
```

> **判断逻辑**:已排除 → 跳过;有动态版本 → 必须排除;其他情况 → 正常提交。

#### 提交要求

在不属于上述两种情况时,每次 `nix build` 后 Nix 会根据实际获取的资源更新 `flake.lock` 中的 input hash。
**必须在提交 hash 变更的同时提交 `flake.lock`**,确保锁文件与包定义一致。

```bash
# 验证 flake.lock 是否有未提交的变更
git diff flake.lock
```

## 第 5 步:更新文档

对每个更新的包,在所有语言文档中更新版本号:

```bash
for lang in zh en ja pcn; do
  sed -i "s/$OLD_VER/$NEW_VER/g" docs/$lang/<pkg>.md
done
```

同时检查并更新 `.nix` 文件中的 `meta.changelog` URL。

## 第 6 步:检查本地安装版本

```bash
nix eval --raw .#<pkg>.version 2>/dev/null
which <binary> 2>/dev/null && <binary> --version 2>/dev/null
```

## 第 7 步:输出汇总报告

以表格呈现:包名、旧版本 → 新版本、构建状态、本地安装版本。

## 第 8 步:调用维护日志技能

软件更新完成后,自动调用 `write-maintenance-log` 技能撰写维护记录。
详细格式规范、撰写流程、多语同步规则均由该技能定义。

```
→ 触发技能: write-maintenance-log
```

## 检查补丁内版本

部分补丁在上游项目的 `.patch` 文件中直接硬编码了依赖的版本号和 hash。
这类补丁的版本更新需要手动处理。

### 识别

在 `patches/` 目录下自动搜索硬编码版本:

```bash
# 搜索 patch 文件中的版本号模式
grep -rln -E '[0-9]+\.[0-9]+\.[0-9]+' patches/*.patch | sort -u

# 对每个匹配的 patch,提取版本上下文
for patch in $(grep -rln -E '[0-9]+\.[0-9]+\.[0-9]+' patches/*.patch); do
  echo "=== $patch ==="
  grep -n -E 'version|hash|url.*http' "$patch" | head -10
done
```

### 通用更新流程

1. 从 patch 中提取上游资源 URL 和当前版本
2. 检查上游是否有新版本:

```bash
# GitHub Release(如适用)
curl -s "https://api.github.com/repos/<owner>/<repo>/releases/latest" | grep -oP '"tag_name":\s*"\K[^"]+'

# PyPI / wheel 目录(如适用)
curl -s "<wheel-index-url>" | grep -oP '<package>-[0-9]+\.[0-9]+\.[0-9]+' | sort -Vu | tail -1
```

3. 下载新资源获取 SRI hash:

```bash
nix hash to-sri sha256:$(curl -sL <new-url> | sha256sum | cut -d' ' -f1)
```

4. 更新 patch 文件中对应的 `version`、`url`、`hash` 字段
5. 重新生成 patch:在上游仓库中修改后执行 `git diff > patches/<name>.patch`
6. 在目标环境测试构建

> **⚠️ 警告**:补丁内版本更新后,旧的 hash 将失效。务必在提交前完成完整的构建测试。
> 涉及 GPU/硬件相关补丁时,需在目标硬件上实测验证。

## 常见陷阱(2026-08-09 comfyui 事故教训)

更新后若用户系统切换(`nixos-rebuild switch`)失败,优先排查以下三个 nixpkgs 漂移陷阱:

### 1. 恢复旧 generation / flake.lock 时必须核对 `inputs.*.follows`

只复制旧 `flake.lock` 而忽略 `flake.nix` 会丢失 `inputs.<x>.follows` 配置,导致子 flake
重新用独立锁定的旧 nixpkgs(如 glibc 2.40)→ 运行时 `GLIBC_ABI_GNU2_TLS` 崩溃。
恢复时需同时核对 `flake.nix` 中子 flake 的 follows/url 定义,并验证 eval 出的实际 nixpkgs rev。

### 2. python 包跳过测试用 `doInstallCheck = false`,不是 `doCheck = false`

`pytestCheckHook` 把 pytest 套件跑在 **installCheckPhase**,`doCheck=false` 无效(测试仍执行)。
跳过测试必须设置 `doInstallCheck = false`。

### 3. nixpkgs ≥ 2026-08-05 的 `pythonRuntimeDepsCheckHook` 破坏 wheel 构建

新版 nixpkgs 引入 `pythonRuntimeDepsCheckHook`:wheel 的 METADATA 声明了运行时依赖
(如 comfyui 场景下 opencv-python/tqdm/setuptools 由运行环境提供)时构建失败。
对策:在 vendored wheel 的 mkWheel 中加 `dontCheckRuntimeDeps = true`。
相关包逐个添加 `doInstallCheck = false`(jupyter-server/scipy/fastapi/einops 等)后,comfyui 恢复。

> 判断方法:报错含 `pythonRuntimeDepsCheckHook` / `not installed` / `GLIBC_ABI_GNU2_TLS`
> 且位于 python 包构建阶段 → 命中陷阱 2 或 3;位于服务启动阶段 → 命中陷阱 1。