html
- Anthropic 正在利用大量人类软件工程师的反馈来改进 Claude Code。
- Snorkel AI 的 Project Marlin 对 Claude Code 进行微调,以模仿专业开发人员的技能。
- 接这活的人一小时最多能赚 280 美元。
Anthropic 的一个项目正在利用约 1000 名人类软件工程师的反馈来改进 Claude Code 的性能,这款 AI 编码工具近期的进展已经颠覆了编程界的“随性编码”潮流。
Snorkel AI 内部管这项目叫“Marlin”,专注于调教 Claude Code 的答案,让它能像专业开发者那样干活。
像 Anthropic 这类 AI 公司,常把数据活儿外包给 Snorkel 这种第三方,这些第三方会雇人教 AI 各种专业内容,并干其他杂活来改进模型。
参与 Anthropic 项目的两名承包商告诉 Business Insider,他们每干一单活能拿 280 美元,主要就是写提示词和查代码。他们表示,每单活大约要花一个小时,尽管有些活儿得跟 Snorkel 那边来回磨好几遍才能过审。
Project Marlin(马林项目)的合同工,均具备软件工程背景,被安排去对两个不同模型编写的代码进行 A/B 测试。通过这一过程,他们根据 Business Insider 看过的 Snorkel 项目指南,比较两个模型的输出,并选择他们更喜欢哪个。一位合同工表示,该项目旨在确保模型能够达到提示词里要求的细节程度,本质上就是训练 Claude Code 编写更简化、更易于维护的代码。
该项目正在进行中。合同工们并不知道他们评估的是哪个版本的模型。
随着人工智能变得越来越厉害,数据标注平台已从通用性工作转为越来越专业化的任务,这些任务需要专业领域知识或研究生学位。Snorkel 的网站称,他们与拥有高学历(如哲学博士、医学博士、法学博士)或相当经验的人合作。该公司表示,顶级专家每周收入超过 3000 美元。
行业走向这种专业化,也包括计算机工程师来做软件培训。除了 Snorkel,Scale AI 和 Mercor 等平台也给软件工程师开出的时薪高达 110 美元。
Anthropic 和 Snorkel 都没搭理 Business Insider 的置评请求。
代码干净又靠谱
Project Marlin 让承包商搞出一系列场景,看看软件开发人员可能会咋用 Claude Code。
承包商得从一大堆仓库列表里挑一个 GitHub 仓库。然后他们得搞一个拉取请求——就是开发人员提改动的那一步,比如加新功能或修 bug。承包商还得写个提示——就是一堆问题,说清楚模型该干啥。
有个任务里,承包商让模型重新整理系统咋存咋处理“执行元数据”——就是关于咋运行的那些额外信息。目标就是让代码更清楚、开发人员更好上手,但产品功能咋运作的一点都不带改的。
模型给出了两组代码,承包商挑了他们觉得更高效的那组。项目还要求承包商接着追问,看看模型能不能接住对话的上下文。
还有个任务,是让承包商让模型修一个安全漏洞,跟MLFlow这个开源机器学习平台加载模型时怎么下载Python包有关。
任务说明里写着:“要从正确性、安全性、可靠性和可维护性几个方面来评估代码能不能直接上线。修复得能挡住命令注入,同时还得让所有白名单里的pip选项正常用。”
Snorkel AI是2019年由斯坦福的研究人员搞起来的,专门做数据集来提升AI模型,还给AI公司的聊天机器人做测试。这家硅谷初创公司号称客户里有Google、Mistral和Anthropic这些顶级实验室。2025年5月,它完成了1亿美元的D轮融资,估值13亿美元。Business Insider之前报道过,Snorkel在9月裁了13%的人。Snorkel裁员这事
该公司是不少初创公司中的一员,包括Scale AI、Mercor 和 Handshake,这些公司向全球数十万外包人员支付报酬,为全球最大的科技公司筛选、分级和训练人工智能响应。这项数据工作有助于改进从自动驾驶汽车到 OpenAI 和 Meta 的聊天机器人的方方面面。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.