自动化与运维 ✓ NVIDIA · 官方 brevnemo-rldisk-managementexperiment-trackingrayhugging-faceweights-and-biases

NeMo-RL Brev 运行规范

帮助 NeMo-RL 代理在 Brev 上安全管理实验存储、缓存、日志与认证。

FollowSkills 评估 · FSRS-2.0
不推荐
50/ 100 五分制 2.5 / 5
信任安全17 / 25 · 3.4/5

技能明确要求将大型产物移至/ephemeral、避免打印或提交.env密钥、限制清理范围,并说明缓存和日志路径,体现了一定的最小权限与数据流透明度。扣8分:运行昂贵任务前没有明确的用户确认机制,没有完整回滚方案,也未充分说明W&B/Hugging Face外部传输和认证副作用。

可靠稳定8 / 20 · 2.0/5

路径规划、容量检查、缺失.env提示、缓存变量和日志位置写得较具体,且BENCHMARK报告了静态检查和评测结果。扣12分:依赖、平台前置条件、异常恢复和停止流程不完整,命令包含未替换的占位符,且静态材料无法复现关键路径;按静态上限不超过10分。

适用触发7 / 15 · 2.3/5

触发场景集中于Brev上的NeMo-RL训练、自动研究、缓存和日志管理,正负评测任务也支持基本的触发边界。扣8分:硬编码/home/ubuntu/RL和/ephemeral,未声明非Brev环境的替代方案,缺少中文使用说明,也未评估中国大陆网络对Hugging Face、W&B等服务的可达性。

规范维护8 / 15 · 2.7/5

SKILL.md有前置元数据、许可证和较清晰的章节;skill-card补充了所有者、用途、风险、版本1.5.4和评测信息。扣7分:缺少作者与标签、Instructions和Examples等推荐结构,缺少变更日志、明确维护责任和更新路径,安装及故障排查说明也不足。

有效结果6 / 15 · 2.0/5

对Brev磁盘布局、共享缓存、日志和认证环境变量给出了可直接改写使用的指导,评测报告显示核心任务有一定收益。扣9分:示例使用占位符,未提供代表性完整输出或可验证执行记录,且对不同Brev配置的适配有限;静态评估下不超过7分。

证据核验4 / 10 · 2.0/5

包含固定日期、评测任务、指标、结果以及正负触发案例,提供了有限的审计线索。扣6分:没有原始运行日志、CI测试或独立复现材料,BENCHMARK主要是报告性证据,无法达到多类型交叉验证;静态评估下不超过5分。

证据充分度: 评估于 2026年7月20日 审查版本 55f18499943e
上游仓库在本次评估后已有新提交;当前评分仍对应所示审查版本,可能尚未覆盖最新改动。
使用前请注意
  • 执行前应确认当前确实是Brev实例,并将所有占位符替换为经过检查的实际路径。
  • 在启用HF_TOKEN、WANDB_API_KEY或其他认证前,应确认数据是否会发送到外部服务及其网络可达性。
  • 技能未定义磁盘不足、任务中断或缓存清理失败时的完整恢复步骤;清理操作必须逐项确认目标。
  • 评测结果缺少原始日志和独立复现材料,不应视为已完成运行验证。
查看完整评分方法 →

这个 Skill 能做什么,适合哪些场景?

这是一个面向 Brev 实例的 NeMo-RL 运维指导技能,假定代码位于 `/home/ubuntu/RL`,实验生成数据位于 `/ephemeral`。它覆盖自动研究活动、训练任务、模型与数据集下载、缓存、Ray 临时文件、检查点、日志以及 W&B 和 Hugging Face 认证流程。技能要求在长任务前检查磁盘空间,并将大型产物和共享缓存移出 Git 工作区。它适合需要在 Brev 上运行 NeMo-RL 长任务且希望保持代码仓库小巧、实验可复现的用户。

读取可选的 /home/ubuntu/RL/.env,但不输出其中的密钥;使用 df -h 检查 /home/ubuntu/RL/ephemeral 的容量;创建按用户、活动和实验划分的 /ephemeral 目录;设置 Hugging Face、PyTorch、Triton、uv、pip、W&B、Ray 和临时目录;将日志、检查点、评估结果及其他生成文件写入实验目录;把绝对路径记录到 nemo-rl-auto-research TSV;长任务期间复查磁盘,并仅清理当前活动的目录。

  1. NeMo-RL 研究人员在 Brev 上启动 nemo-rl-auto-research 活动,需要预先规划实验目录、缓存和日志路径。
  2. 训练工程师运行会生成检查点、Ray 临时文件或大量日志的长时间任务,需要避免填满工作区磁盘。
  3. 需要从 Hugging Face 下载模型或数据集的用户,希望复用 `/ephemeral` 共享缓存。
  4. 使用 W&B 或 Hugging Face 认证工作流的用户,需要从 `.env` 加载密钥而不泄露密钥内容。

这个 Skill 有哪些优点和局限?

优点
  • 明确区分 `/home/ubuntu/RL` 代码区与 `/ephemeral` 实验存储。
  • 覆盖模型、数据集、PyTorch、Triton、uv、pip、W&B 和 Ray 等缓存位置。
  • 包含磁盘检查、认证保护、日志记录和清理边界。
  • 强调将绝对产物路径写入实验记录,便于复现。
局限
  • 依赖 Brev 的固定目录约定,迁移到其他环境需要调整路径。
  • 未提供测试套件、自动化脚本或针对不同实例规格的容量阈值。
  • 技能本身不定义具体的 NeMo-RL 训练配方或实验命令。

如何安装这个 Skill?

使用默认 skills CLI 安装:npx skills add nvidia/skills --skill nemo-rl-brev-etiquette --yes。README 未说明该单个技能的其他安装方式。

如何使用这个 Skill?

在 Brev 实例中,在启动 NeMo-RL 活动、实验、训练任务或大型下载前触发该技能,例如:在 Brev 上启动一个 nemo-rl-auto-research 活动,并按 NeMo-RL Brev 规范配置存储、缓存、日志和认证。 技能提供了检查磁盘、创建 /ephemeral 目录、加载 .env、设置环境变量及记录路径的 shell 模式;具体实验命令和配方路径未在该 SKILL.md 中规定。

常见问题

它是否适用于普通本地机器或集群?
核心建议围绕 Brev 的 `/home/ubuntu/RL` 和 `/ephemeral` 路径编写;在其他环境使用时需要相应改写路径。
它会不会暴露 W&B 或 Hugging Face 密钥?
指导要求从 `/home/ubuntu/RL/.env` 加载密钥,并明确禁止打印、记录、提交或总结密钥值。
它会自动删除共享缓存吗?
不会。清理范围限定为当前活动或实验目录,并明确不得删除共享缓存或其他用户的运行目录。

同仓库的其他 Skills

均来自 NVIDIA/skills

开发与工程 ✓ NVIDIA · 官方

NeMo-RL 自动研究助手

将 NeMo-RL 研究目标转化为可复现的迭代实验。

开发与工程 ✓ NVIDIA · 官方

NeMo AutoModel 模型接入指南

指导开发者将新的 LLM、MoE 或 VLM 架构接入 NeMo AutoModel。

写作与内容 ✓ NVIDIA · 官方

NeMo-RL 文档规范

帮助 NeMo-RL 项目按统一规范编写和维护文档。

自动化与运维 ✓ NVIDIA · 官方

Jetson LLM 服务部署技能

为 NVIDIA Jetson 配置并启动 vLLM 或 SGLang 的 LLM/VLM 服务。

自动化与运维 ✓ NVIDIA · 官方

NeMo-RL Kubernetes 启动助手

在 Kubernetes 上启动、监控、迭代和排查 NeMo-RL 训练任务。

开发与工程 ✓ NVIDIA · 官方

NV-Reason-CXR 胸部X光推理测试技能

为胸部X光模型执行可复现的命令形状与在线推理冒烟测试。

自动化与运维 ✓ NVIDIA · 官方

TAO Brev GPU 运行技能

在 Brev GPU 实例上运行和管理 TAO 训练、评估与推理任务。

自动化与运维 ✓ NVIDIA · 官方

RTVI-CV 二维检测跟踪运维技能

部署并运维 RTVI-CV 二维视频检测与跟踪微服务。

开发与工程 ✓ NVIDIA · 官方

TileGym Transformers 内核集成

将 TileGym 高性能内核接入 Hugging Face Transformers 模型。

开发与工程 ✓ NVIDIA · 官方

NeMo Relay 安装助手

为 CLI、语言包和主流框架选择并验证 NeMo Relay 安装路径。

开发与工程 ✓ NVIDIA · 官方

NeMo Relay 快速上手

帮助首次使用 NeMo Relay 的用户通过最小试验验证可观测执行价值。

开发与工程 ✓ NVIDIA · 官方

NeMo Relay 插件构建指南

帮助将可复用的 NeMo Relay 运行时行为封装为可配置插件。

自动化与运维 ✓ NVIDIA · 官方

NeMo Relay 可观测性插件

为 NeMo Relay 选择并配置事件与追踪导出。

自动化与运维 ✓ NVIDIA · 官方

TAO 工作流启动门禁

在执行 TAO 作业前完成平台、凭证、数据与容器预检。

开发与工程 ✓ NVIDIA · 官方

NeMo AutoModel 分布式训练配置

为 NeMo AutoModel 选择并配置多 GPU 与多节点训练策略。

开发与工程 ✓ NVIDIA · 官方

NeMo Evaluator 评估插件技能

帮助代理通过 NeMo CLI 与 Python SDK 执行并管理模型评估。

开发与工程 ✓ NVIDIA · 官方

CODEOWNERS 分组拆分 PR

按 CODEOWNERS 审核组拆分大型 PR,降低审核负担并保持每个 PR 可独立合并。

开发与工程 ✓ NVIDIA · 官方

NeMo Relay 迁移助手

将 NeMo Flow 项目安全地迁移为 NeMo Relay。

开发与工程 ✓ NVIDIA · 官方

NeMo Relay 自适应调优

基于运行时信号,以可测量方式调优 NeMo Relay 插件行为。

开发与工程 ✓ NVIDIA · 官方

DOCA Verbs 原始 RDMA 控制技能

为确需底层 verbs 控制的 DOCA 开发者提供路由、移植与调试指导。

相关 Skills