跳到内容

    模型速度:加速模型驱动业务的关键

    2022年1月26日 3分钟读取

    大多数数据科学家会告诉您,成功在于迭代地开发模型,但仅靠迭代开发是不够的。如果您的模型只部署一次就不再使用(或者,就像经常发生的那样,根本不部署),那么再多的迭代开发也不会驱动持续的业务结果。不仅您的模型在投入生产的那一刻就会退化,而且通常情况下,只有当人们使用生产版本时,您才会发现模型的真正业务需求,例如,您的模型已经部署。当你迟早面临数据的系统性变化时——例如,由于一场大流行——你将需要抛弃你的模型,无论它的开发过程中经历了多少次迭代。

    模型速度是模型值和体积的必要条件

    相反,推动变革影响的关键在于你在整个过程中迭代的能力整个生命周期你的模特。你能多快、多有效地做到这一点,是衡量你的能力的一个标准模型速度,以及它如何随着时间的推移而变化,可以帮助您跟踪成为模型驱动业务的进展。模型速度捕获您遍历端到端模型开发的能力而且快速、重复和一致地进行部署过程——从数据工程、特征工程、算法选择、超参数调优、验证、部署到监控。它衡量你实现新模型的能力,就像Feature Velocity帮助开发团队衡量他们交付新特性的能力一样。

    生命周期您需要维护并加速您的模型速度,以利用新模型来处理每一个驱动业务价值的机会,但同样重要的是,保持您的模型是最新的,以便它们反映当前的市场条件、客户偏好等等。你需要不断地调整你的模型,用额外的训练数据来改进它们,并根据漂移调整它们。您的模型速度跟踪您在数据科学生命周期中连续迭代的速度。188金宝慱亚洲体育网址结合起来,您的模型速度决定了您可以多快地处理新的模型驱动项目,您可以同时维持多少项目,以及您如何有效地使用它们来维持成功的结果。

    测量你的模型和模型速度

    每个数据科学188金宝慱亚洲体育网址团队都在努力衡量他们的效率,跟踪进展,并对自己进行基准测试。测量模型性能——例如精度、召回率或F1分数——或由此产生的业务结果,虽然非常重要,但对您的能力的了解有限。模型性能的下降很容易掩盖强大的功能,因为如果团队没有部署更新的模型,下降会更大。

    velocity2度量已完成的项目或部署的模型的数量也是有问题的。人们通常认为越多越好,但是如果您不维护这些模型,那么更多的模型就意味着更多的风险,它也可能表明您的团队过于紧张,无法支持当前的投资组合,更不用说承担新的计划了。

    度量模型速度可以让您更全面地了解数据科学能力、成熟度和性能,因为它度量了进入这些模型的活动的成功程度。188金宝慱亚洲体育网址因此,它较少受到外部因素(例如业务条件或It系统的更改)的影响,并为您提供了更好的视图,不仅是已部署项目的健康状况,而且还提供了您需要为未来计划的容量、能力、时间和摩擦的展望。

    加速您的模型驱动业务

    如今有哪家公司不想更多地采用模型驱动的模式呢?挑战在于如何将特别项目和孤立的成功扩展到可靠的、可重复的能力,以在整个组织中增长、维护和管理模型驱动的项目。前进的道路上布满了减速带和坑洼,它们限制了您的模型速度,并可能完全阻碍您的模型驱动的雄心壮志。通常情况下,数据科学家最终无法充分访问数据、使用过时的工具、计算能力不足以及缓慢的人工流程,无法将模型投入生产并随着时间的推移进行维护。加速您的模型速度需要企业级机器来驱动协作和自动化,使用支持端到端生命周期的最新工具和基础设施。

    模型速度为我们提供了一种全面度量模型生命周期的新方法——捕获决定成功的人员(角色和技能)、过程(协作)和技术(集成平台)因素。188体育官网app下载模型速度是一个新概念——您需要根据自己的需要调整精确的公式,它不能取代我们今天使用的大多数指标,但是有了它,我们现在就有了一个模型驱动旅程的加速计。

    免费工具模型速度评估您的数据科学团队如何改进其流程?188金宝慱亚洲体育网址通过回顾您的数据科学生命周期,在几分钟内找到答案。188金宝慱亚洲体育网址获得分数

    谢尔••

    Kjell Carlsson在Forrester Research担任188金宝慱亚洲体育网址首席分析师,多年来一直关注AI、ML和数据科学。他撰写了数十份关于人工智能主题的报告,从计算机视觉、MLOps、AutoML和会话智能到增强智能、下一代人工智能技术和数据科学最佳实践。188金宝慱亚洲体育网址他在无数的主题演讲、小组讨论和网络研讨会上发言,并经常被媒体引用。最近,他在专注于nlu的初创公司Stratifyd担任产品与战略执行副总裁,领导产品团队并重新设计公司战略。他获得了哈佛商学院商业经济学博士学位。

    你可能会感兴趣的其他职位

    Baidu
    map