6月6日，Anthropic公司正在通过一个名为“Marlin”的项目提升其AI编程助手ClaudeCode的性能。该项目涉及约1000名人类软件工程师，旨在微调ClaudeCode的回答，使其更符合开发人员的实际工作环境。AI公司如Anthropic通常会将数据工作外包给第三方公司，如SnorkelAI，后者雇佣外包人员教授AI各种专业领域的知识，并执行任务以改进模型。

在Marlin项目中，具有软件工程背景的外包人员被要求对两种不同模型生成的代码进行A/B测试。他们会比较两组输出，选择更偏好的结果，并评估模型是否达到了提示词要求的细节程度。该项目的目标是确保模型能够达到提示词中所期望的详细程度，训练ClaudeCode生产更简化、更易于维护的代码。目前，该项目仍在进行中，外包人员并不清楚他们所评估的是模型的哪个版本。