支付宝商家中心(b.alipay.com)是支付宝官方的商家服务平台,面向蚂蚁生态内所有商家,聚合产品签约、账户资金管理、营销运营、账单对账等能力,为商家提供一站式综合服务,帮助其更高效地开展日常经营,我们团队负责该平台的 PC 端业务测试。
本文介绍了“高价率运营 AI 工作台”中基于“约定驱动 + AI 编排”架构的自动化评测优化实践。针对 LLM Agent 场景下传统测试失效、反馈周期长等痛点,文章详细阐述了将评测体系作为核心工程产物的设计方案:通过标准化目录结构固化规范,利用 Coding Agent 实现自然语言驱动的全流程自动化;构建包含真实业务数据驱动的评测集生成、14 个通用维度与专项指标结合的 Rubric 体系、以及采用二元评分机制的 LLM Judge 双引擎架构(auto-evaluation 与 pinchbench-eval)。同时,文章深入剖析了金标设计中的信息隔离、粒度匹配等关键陷阱,并探讨了从半自动向全自动演进过程中,在评测入口、指标自动迭代及记忆机制等方面面临的技术挑战与应对策略,最终实现了将 Skill 可用性从主观判断转化为可量化、可复跑的工程闭环。
过去一个月,我们在搭建一个面向本地生活业务的分析类 Skill,让 AI 能像资深分析师一样做经营诊断、归因拆解和趋势预测。业务覆盖几十个行业,每个行业有独立的经营框架和指标体系,复杂度远超一个 prompt 能承载的范围。搭建过程中,我们经历了三次架构重构(V1 → V2 → V3),每次都是被真实问题逼出来的。这篇文章完整复盘了这个演进过程,最终提炼为六条 Skill 架构设计原则。如果你正在搭建领域知识密集型 Skill,或正面临「prompt 越写越长但效果越来越差」的困境,这篇文章或许能够提供一些思路。每章独立成节,可按需跳读。
淘宝闪购爆品团业务排序模型过去很长一段时间更像是在“堆模块”:遇到一个问题,就补一个结构。短期看,这种方式能持续拿收益,但当模型越做越大,结构碎片化、计算不够稠密、调参成本高等问题会越来越明显。这次爆品团排序模型升级,核心不是再增加一个局部模块,而是把主干从传统 DLRM 架构切到 Token-Based 的 RankMixer 架构。围绕这条主线,我们系统做了负采样、多任务学习、序列建模、Tokenization、FFN、MoE 和 Task Tower 等结构消融。多期迭代后,模型规模从 85M 扩展到 107M,再到 243M,并在爆品团频道页取得了稳定线上收益。
本文提出 AI Native 能力成熟度模型(AINMM),为软件工程组织提供AI原生研发能力的评估与提升框架。AINMM 借鉴 CMMI 思想,定义了五个成熟度等级(ML1-ML5):从 ML1 “AI 认识项目”到 ML5 “组织级自进化”,围绕五大过程域(上下文工程、能力封装、验证回路、协作契约、自进化)构建。模型针对存量工程转型痛点,提供可测量、可比较、可指导的渐进式路径,避免“big bang”式重构。配套 AI Native Evolution Kit 工具支持自动化评估与演进。通过挽单系统实践验证,该框架能准确定位团队 AI 能力短板,指导从“AI 辅助”向“全链路 AI 驱动”的系统性转型,助力实现十倍级效率跃迁。AINMM 不是银弹,而是随实践持续进化的工程指南。
我们在做数据研发领域的 AI coding,在建设项目能力的过程中和集团很多的 BU 都有深入的交流,今年发现大家除了端到端的交付外,大家都在探索"超级组织",我们通过「 Loop Engineering」和「知识工程」解决复杂工作流的稳定性与自动化问题,搭建了“数研超级组织”的雏形 ~
本文介绍了淘宝直播数字人互动从传统静态 Workflow 架构向动态 Agentic 架构的升级实践。通过融合 LLM 与 Agent 自主规划能力,利用 AgentTuning 蒸馏降低延迟、RLVR 减少幻觉,并针对业务挑战研发 Multi-Agent RL 算法,将工具调用与回复模型分离进行协同强化学习优化。最终实现了低延迟(1.79秒)、高拟真度的深度互动,显著提升了事实正确性、帮助性及多轮对话用户比例,打造了下一代数字直播范式。
2026 年,AI 不再是一个 buzzword——它已经切切实实地渗透进了每一行代码、每一次技术决策。说来惭愧,作为一个校招入职不到两年的程序员,我的 IDEA 已经吃灰半年多了。那些曾经引以为傲的快捷键肌肉记忆,如今被同事们调侃为"古法编程"。大模型这波浪潮,不是未来已来,是过去已去。6 月,支付宝 CY26-618 电商大促如期而至。今年的技术命题只有一个:让 AI 能力真正触达 C 端用户,真正走进 C 端用户的购物体验。