人像识别聚合内存吃满导致系统崩溃

ajisna

人像识别聚合内存吃满然后系统崩溃，人像识别完毕之后相册开始聚合，会把内存吃的一点不剩，然后会把系统挤崩溃，系统掉线、UPS掉线、相册和影视也会挤崩溃，希望可以修复这一BUG，重启过也无果，一运行就复现

飞牛技术同学

感谢反馈 目前是人脸是全量聚合，如果照片数量过多会导致该情况，后续我们会考虑优化成分段聚合

Frank_R4Ukw

遇到了类似情况，不过日志里没有显示，只是在相册任务里报错。眼看着内存红了，然后这边进程终止了。

Frank_R4Ukw

Frank_R4Ukw 发表于 2025-6-18 22:18
遇到了类似情况，不过日志里没有显示，只是在相册任务里报错。眼看着内存红了，然后这边进程终止了。

...

照片太多，20w张

XuDaoYan

Frank_R4Ukw 发表于 2025-6-18 22:18
照片太多，20w张

我7万张也是这个问题

Frank_R4Ukw

XuDaoYan 发表于 2025-7-24 10:49
我7万张也是这个问题

我把系统的swap分区加到50g之后，可以识别了。 参考下面步骤：
内存不够创建swap
# 1) 确认根分区还有空间
df -h /

# 2) 创建 8 GiB 的新 swap 文件（换成你要的大小）
sudo fallocate -l 8G /swapfile3
sudo chmod 600 /swapfile3          # 仅 root 可读写

# 3) 格式化成 swap
sudo mkswap /swapfile3

# 4) 启用（马上可用），不用重启电脑，可以盯着资源管理的swap使用情况，如果发现快不够了可以继续加swapfile2,3,4
sudo swapon /swapfile3

# 5) 持久化到 /etc/fstab，开机也会自动挂载
echo '/swapfile3 none swap sw 0 0' | sudo tee -a /etc/fstab

# 6) 验证
free -h            # Swap 总量多了 8 GiB
cat /proc/swaps    # 应该能看到 /swapfile, /swapfile2, /swapfile3

可以连续创建，用完后可以删除。
例子：你先前加了 /swapfile2 12 GiB，现在不用了。
bash


复制编辑
# 1. 让系统停止使用它
sudo swapoff /swapfile2          # 必须先 swapoff，否则 rm 时报“Device or resource busy”

# 2. 从 /etc/fstab 里删掉这一行（持久化）
sudo sed -i '/\/swapfile2/d' /etc/fstab

# 3. 删除文件，磁盘空间瞬间归还
sudo rm /swapfile2

# 4. 核实
free -h          # Swap 总量应该少掉 12 GiB
cat /proc/swaps  # 不再出现 /swapfile2

如果不删掉，系统剩余空间太小（比如我系统空间是60G，减去新增的swapfile50g剩下10g，），重启电脑时，就会挂载不上存储空间，而且相册无法下载照片视频，下载下来就是44b的不知道什么东西。