Daily AI Insight
数据源洞察报告

免责声明

本站内容由 AI 自动聚合、分析与生成,仅供信息参考与学习交流,不构成投资、法律、医疗或其他重大决策建议。请结合原始信源独立判断,作者不对因使用本站内容而产生的任何后果承担责任。

关于本项目

个人开源实验项目,由 @sqliang 构建与维护。

在 GitHub 查看源码

© 2026 Daily AI Insight Engine · Built with AI-assisted pipelines

← 返回 Hugging Face Blog
Analyzed·分析huggingface.co2026-09-03

Article Intelligence

Training a coding model to paint watercolours with TRL and OpenEnv

打开原文 ↗

先看结论

Hugging Face 博客作者用 TRL 与 OpenEnv 端到端开源复现了 Surya Narreddi 让语言模型通过 p5.brush 编写 JavaScript 绘制水彩画的项目,参考数据集、RL 环境、训练脚本与模型全部公开在 Hub 上,训练经 HF Jobs 运行,一条命令即可复现。

核心指标

先判断这篇文章值不值得继续读

评分用于衡量信号强度,判断类指标用于解释方向、热度、后续动作与可信程度。

影响力

衡量事件对技术、产业或生态的外部影响强度。

5.5

评分依据:该事件本质是 HF 工程师对一个浏览量超 150 万次的病毒式创意项目做开源复现,而非全新能力或范式发布,短期内不会撼动大模型竞争格局。但它有四点行业信号:其一,把 GRPO 强化学习的奖励从可验证结果(数学/代码正确性)拓展到主观审美领域,用 AI 评分模型+两两评判作为奖励信号,为创造性/开放性任务训练提供了可复制模板;其二,以 Qwen3.5-35B-A3B + LoRA 的低成本组合实现,具有示范意义;其三,全流程跑在 HF Jobs/Spaces/Inference Providers 上并开源全部工件,实质强化了 HF 的 RL 训练平台生态位;其四,仍属生态级示范与小圈子热门话题,未达到改变局部竞争格局的量级。综合评定为 5.5 分。

复合价值

综合新颖性、可执行性与长期观察价值。

6.5

单看'模型画水彩'这个任务本身,属于病毒式创意 Demo,热度会快速衰减,不具备长期复利。但拆解事件本质,真正沉淀下来的是三层可复用资产:其一,这是 OpenEnv(HF 2025 年中才推出的 RL 环境框架)少数几个端到端跑通的外部验证器 RL 范例——把'模型写代码 → p5.brush 执行 → 视觉结果 → 两两评判打分 → GRPO 反馈'这一条非代码基准域的 agentic reward loop 完整开源,填补了 OpenEnv 生态的标杆案例空白;其二,LoRA+GRPO+多奖励混合对比的'一条命令可复现'配方,把此前只存在于少数实验室内部的高质量 RL 训练 know-how 变成了公共品,未来任何人在新领域(设计、音乐、游戏、机器人策略)都能套用这个模板;其三,HF 借机把 Jobs/Spaces/Inference Providers/Hub 串成训练闭环,形成平台级 lock-in。若 OpenEnv+TRL 成为 agent 训练的事实中间件,复利效应显著;但目前仍是一次博客级复现而非生产级验证,OpenEnv 的长期采用率、HF 的持续投入和社区扩展都未证实,因此给 6.5 分而非更高。

01

提取事实

结构化事实、实体识别与逻辑链

TL;DR

Hugging Face 博客作者用 TRL 与 OpenEnv 端到端开源复现了 Surya Narreddi 让语言模型通过 p5.brush 编写 JavaScript 绘制水彩画的项目,参考数据集、RL 环境、训练脚本与模型全部公开在 Hub 上,训练经 HF Jobs 运行,一条命令即可复现。

框架工具技术博客已核实
客观摘要

Surya Narreddi 于8月23日发布语言模型绘制水彩画的视频,模型通过 p5.brush 库编写 JavaScript 作画,视频浏览量超过150万次。Surya 的博客仅介绍早期特写花朵阶段的训练方法且未开放工件,Hugging Face 作者随后从工程侧用 TRL 与 OpenEnv 复现了完整方案。复现项目以 Qwen/Qwen3.5-35B-A3B 为基座模型,采用 LoRA 微调加 GRPO 强化学习,将参考池数据集、RL 环境、训练脚本与训练好的模型全部开源。整套流程依托 HF Jobs 训练、Spaces 部署环境与评分模型、Inference Providers 执行两两评判,用户复制两个 Space 并设置环境变量后即可用一条命令启动训练。

逻辑链
  1. 1Surya Narreddi 于8月23日发布语言模型绘制水彩画的视频,模型通过 p5.brush 库编写 JavaScript 作画,视频浏览量超过150万次。
  2. 2Surya 的配套博客只介绍了项目早期更窄阶段(特写花朵)的训练方法,暂未开放任何工件,其网站称后续会发布完整技术报告。

情绪

积极

整体偏利好,可优先看它带来的机会、受益方和后续扩散可能。

Hype

低 hype

噪声较低,信息更接近事实或研究贡献;重点看证据是否扎实。

判定依据:通篇未使用'颠覆/革命/重大突破'等 PR 滥用词汇;作者刻意区分原博主的创意与自己新增的工程贡献(开放实现、人工评分数据池、三种奖励混合对比),边界诚实;数据集、RL 环境、训练脚本与模型权重全部公开且可一键复现,附完整超参数命令,属于实打实的工程干货,无概念包装,水分低。

行动建议

持续监测

先保持观察,等后续产品、论文或市场反馈再升级判断。

置信度

分别对应影响力、复合价值与 Hype 判断的可信程度。

影响判断medium· 可参考
价值判断medium· 可参考
热度判断medium· 可参考
  • 3Hugging Face 作者从工程侧用 TRL 和 OpenEnv 复现该想法,把参考池数据集、RL 环境、训练脚本与训练后的模型全部公开。
  • 4整套流水线在 Hugging Face 平台端到端运行:训练使用 Jobs,RL 环境与评分模型部署为 Spaces,两两评判经 Inference Providers 调用,所有工件收录于 Hub 上的一个集合。
  • 5复现配方收敛为一条命令:先复制环境与评分模型两个 Space,设置两个奖励混合相关环境变量,再通过 hf jobs 启动基于 Qwen3.5-35B-A3B 的 LoRA 与 GRPO 训练。
  • 6作者严格按原博客复现、仅在必要时改动,自己的新想法列入文末接下来想尝试的内容清单,本次新增开放实现、人工评分数据池与三种奖励混合的对比训练。
  • 实体识别
    公司
    Hugging Face
    技术
    TRLOpenEnvp5.jsp5.brushGRPOLoRAJavaScriptQwen3.5-35B-A3B
    人物
    Surya Narreddi
    02

    影响与价值

    技术/商业影响、关注焦点与受影响对象

    开发者关注点

    主观审美/创造性任务如何设计 GRPO 奖励信号,以及一条命令端到端复现的完整开源配方

    技术颠覆

    核心突破是把强化学习从'可验证奖励'拓展到'主观美学奖励':以 Qwen3.5-35B-A3B 为基座,用 LoRA + GRPO 训练模型编写 p5.brush 的 JavaScript 作画,奖励信号并非来自确定性规则,而是'渲染画面 → 评分模型打分 + Inference Providers 两两评判'的 AI 主观审美回路,并配以参考池数据集约束输出分布。本质上是'可执行环境反馈 + AI 主观评判'的 RL 训练模板,可迁移到绘画、设计、音乐等结果不可自动验证的创造性任务。

    商业模式

    对 Hugging Face 而言这是一次平台生态整合营销:训练跑 Jobs、环境与评分模型部署为 Spaces、评判调用 Inference Providers、工件收录进 Hub 集合,用户复制两个 Space 设两个环境变量即可一键启动,把'开源 RL 训练全流程'隐性绑定到自家平台,强化了 HF 从模型托管向训练基础设施/平台型 MaaS 的商业叙事延伸;对社区则提供了免费可复用的创造性 RL 参考实现。

    关键受益方

    • Hugging Face
    • OpenEnv
    • Alibaba Qwen
    • TRL
    • p5.brush 生态

    竞争受损方

    • 靠秘方 RL 配方生存的闭源创意 AI 创业公司
    • 专有 RL 环境/训练平台
    • 闭源奖励模型与评测服务商
    03

    风险、机会与行动

    结合机会清单和风险矩阵判断后续关注重点

    可关注的市场机会

    • 开发者或创业者可复用该端到端 RL 配方(TRL + OpenEnv + GRPO + HF Jobs),为'代码生成 + 外部执行环境评分'类任务(程序化艺术、前端/UI 设计、创意编码)搭建垂直微调流水线,把一次性的开箱教程沉淀为可交付的工程服务
    • 面向艺术与设计人群的 AI 创作工具有落地空间:将'自然语言指令 → p5.brush 水彩/插画程序化作品'产品化,结合订阅制或按次付费,并叠加风格画廊、社区分享等增值场景
    • 该案例示范了'人工评分数据池 + 多种奖励混合 + 两两评判'的可复现偏好数据资产,团队可借鉴此模式自建细分领域的 RL 奖励数据集与评测服务,形成数据护城河
    风险信号
    监管
    AI 生成水彩画的训练参考池若包含在世艺术家作品,商用前需审查版权授权与数据来源合规性;欧盟 AI Act 对生成式 AI 的透明度与内容标识要求也需纳入产品设计
    技术
    该路线依赖 LLM 编写 p5.brush 代码间接作画,可能被原生图像生成模型(扩散式 / GPT-image 类)直接生成更高质量水彩而边缘化;且水彩作画任务本身高度小众,技术壁垒有限
    竞争
    OpenAI、Google 等原生图像生成能力持续迭代,通用大模型可一站式产出风格化图像,此细分创意编码赛道易被平台级能力吸收,先发者的窗口期较短
    伦理
    AI 模仿特定艺术家风格可能引发署名权争议与对艺术家生计的冲击,亦存在将生成作品冒充人类创作进行欺骗或投机的风险,需配套清晰的 AI 生成披露机制

    该方案深度绑定 Hugging Face 全家桶(Jobs、Spaces、Inference Providers),迁移至其他训练/推理基础设施需额外适配成本

    阅读导览

    点击跳转到正文区块

    NAV
    01提取事实↘02影响与价值↘03风险、机会与行动↘

    文章属性

    框架工具技术博客已核实

    关键实体

    公司
    Hugging Face
    技术
    TRLOpenEnvp5.jsp5.brushGRPOLoRAJavaScriptQwen3.5-35B-A3B
    人物
    Surya Narreddi

    影响对象

    受益方

    • Hugging Face
    • OpenEnv
    • Alibaba Qwen
    • TRL
    • p5.brush 生态

    受损方

    • 靠秘方 RL 配方生存的闭源创意 AI 创业公司
    • 专有 RL 环境/训练平台
    • 闭源奖励模型与评测服务商

    同源文章

    上一篇Give Your Coding Agents a Memory You Own下一篇Real-Time Intelligence with IBM Time Series Models on Confluent