云端构建机器学习平台的几个优秀实践
从现在开始,我们要努力学习啦!今天我给大家带来《云端构建机器学习平台的几个优秀实践》,感兴趣的朋友请继续看下去吧!下文中的内容我们主要会涉及到等等知识点,如果在阅读本文过程中有遇到不清楚的地方,欢迎留言呀!我们一起讨论,一起学习!
译者 | 布加迪
审校 | 孙淑娟
大多数人都熟悉iOS、Windows和AWS等主要的技术平台。平台本质上是一组技术,以充当构建、贡献、试验和扩展其他应用程序的基础。它们带来了当今许多先进的技术能力和尖端的客户体验。
为了跟上大数据、人工智能和机器学习带来的技术能力具有的规模和复杂性,许多公司在自行开发复杂的内部平台。事实上Gartner预测,到2025年,云原生平台将成为超过95%的新数字化计划的基础,高于2021年的不到40%。
根据我的经验,企业技术平台具有变革性:它们使跨职能部门的团队能够快速测试、启动和学习,减少重复、规范能力,并提供一致集成的体验。简而言之,它们有助于将技术转化为竞争优势。
1.企业平台的演进
许多组织利用Kubernetes等可以运行人工智能和机器学习繁重任务的云原生平台,越来越善于提供一流的客户体验。第一资本(Capital One)成为美国第一家全力投入到云的金融机构,能够重新设计数据环境的架构,对于夯实其基于云的平台能力不可或缺。有了这个坚实的基础,第一资本更能够利用大数据在其企业平台上打造新的机器学习能力,以加速、增强和提供新的、更有意义的客户体验。
第一资本在这方面的大部分工作已经为公司和客户带来了显著成效。比如说,其欺诈决策平台是从头开始构建的,以便做出复杂的实时决策。通过利用大量数据,并实现在几天(而不是几个月)内更新模型,该平台有助于保护数百万客户免受信用卡欺诈,并可供该公司的各个利益相关者使用。
根据我在领导团队交付企业技术平台方面的经验,一路上汲取的重要的经验教训和优秀实践如下:
- 一切都从团队开始:建立由最优秀的人组成的跨部门团队,即使一开始这会减慢你的工作。更大的团队并不总是更好!团队起码要有产品经理、工程师和设计师。为这些职能部门配备真正了解平台用户的人。比如说,如果您正构建一个主要由数据科学家使用的平台,应聘请曾经是数据科学家的产品经理,或者为领导团队添加数据科学家。如果团队由来自多个部门的人员组成,应确保你们有共同的目标。
- 先明确定义最终状态:在开始构建之前,花时间明确最终状态的架构和计划,以迭代方式实现目标。确保架构一开始就是为自助服务和贡献设计的。更好的是,设计平台时假设您将把平台扩展到本组织或业务部门之外的用户。还要假设一段时间后,随着技术的变化,您希望可以更换组件。
- 估计认为需要多长时间,然后加倍:重要的是花时间集思广益,想好一开始就需要打造的所有能力,然后为每部分投入相应的精力。一旦技术团队将此与速度相结合,估计构建每个功能需要多长时间,就增加50%的缓冲量。根据我的经验,这个估计最终非常准确。
- 关注业务成果:构建出色的平台可能需要很长时间。确定工作的次序很重要,这样才能不断实现业务价值。这可以激励团队,树立信誉,并形成良性循环。
- 力求透明,加强沟通:与利益相关者自由地交流决策、进展和路线图。除了阐明手头的工作外,还要阐明目前没有优先考虑的事情。编写好文档,以便鼓励他人贡献、轻松加入平台。
- 从小处着手:就连最好的测试和质量保证(QA)环境也可能遗漏一些部署到生产环境后才显露的问题。对于对客户会有明显影响的重大变化而言,总是从一个小群体入手,看到小规模生产环境中切实有效后,再扩大应用范围。
- 彻底透明并过度沟通:与利益相关者自由分享决策、进展和路线图。除了阐明您正在做的事情之外,还要阐明您目前没有优先考虑的事情。投资于有助于贡献和轻松加入平台的文档。
- 从小处着手:即使是最好的测试和QA 环境也可能会遗漏一些直到投入生产时才发现的问题。对于将产生有意义的客户影响的重大变化,总是从一小部分人开始,然后在你看到小规模生产中的事情发生后逐渐增加。如果可能,当变更影响外部客户时,仅将员工用于初始人群。
- 重视妥善管理:平台所有者应关注平台性能。所有问题都应通过控制机制和自动警报显露出来。应迅速处理异常情况。应优先考虑问题的根本原因分析和变化,防止问题一再发生。如果没有问题,应适当地庆祝,好让团队知道它受到赞赏。
- 如果看起来好得难以置信……异常监控是确保执行符合意图的好方法。目标常常是零异常。比如说,延迟不应超过200毫秒。如果异常报告从不显示任何异常,监控很可能有问题。始终强制执行异常,以确保它正确触发。这一点我可是深有体会。
- 开心的团队是富有成效的团队。庆贺取得的成绩,在团队成员表现出色时给予表扬,并创造内心充盈的环境。定期衡量团队的幸福感,让团队有机会来讨论什么会让他们更快乐,并自行尝试,以解决不满意的地方。
当一个团队拥有合适平台技术大力支持的强大文化时,机会无限。通过将云原生平台与大规模数据相结合,公司可以更好地推进,并尝试更新颖、更具创新的产品和体验。当这些体验使最终用户和客户能够在需要时获得所需的产品或服务,这无疑具有重大意义。
原文链接:https://venturebeat.com/ai/best-practices-for-building-machine-learning-platforms-on-the-cloud/
今天关于《云端构建机器学习平台的几个优秀实践》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!

- 上一篇
- 学校封杀,大厂禁用,ChatGPT引发大面积恐慌!

- 下一篇
- 多无人机协同3D打印盖房子,研究登上Nature封面
-
- 疯狂的百褶裙
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢师傅分享文章!
- 2023-05-17 16:18:59
-
- 寂寞的热狗
- 这篇文章真是及时雨啊,太全面了,感谢大佬分享,码起来,关注楼主了!希望楼主能多写科技周边相关的文章。
- 2023-05-14 08:19:16
-
- 激情的芒果
- 很详细,已收藏,感谢师傅的这篇博文,我会继续支持!
- 2023-05-09 17:49:55
-
- 合适的书本
- 这篇文章真及时,博主加油!
- 2023-05-09 05:24:00
-
- 科技周边 · 人工智能 | 21分钟前 |
- AIOverviews权限分级设置详解
- 169浏览 收藏
-
- 科技周边 · 人工智能 | 32分钟前 |
- PerplexityAI扩展方法与插件使用教程
- 326浏览 收藏
-
- 科技周边 · 人工智能 | 37分钟前 |
- Deepseek满血版联手Prepostseo,优化更高效
- 114浏览 收藏
-
- 科技周边 · 人工智能 | 40分钟前 |
- 用豆包AI写Rust代码,3步防内存错误
- 371浏览 收藏
-
- 科技周边 · 人工智能 | 44分钟前 |
- 豆包AI功能详解与实用场景分享
- 241浏览 收藏
-
- 科技周边 · 人工智能 | 46分钟前 |
- 豆包AI支持图片识别吗?多模态使用方法
- 365浏览 收藏
-
- 科技周边 · 人工智能 | 47分钟前 |
- AI工具变现的5种实用方式
- 159浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 511次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 498次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
-
- 扣子-Space(扣子空间)
- 深入了解字节跳动推出的通用型AI Agent平台——扣子空间(Coze Space)。探索其双模式协作、强大的任务自动化、丰富的插件集成及豆包1.5模型技术支撑,覆盖办公、学习、生活等多元应用场景,提升您的AI协作效率。
- 8次使用
-
- 蛙蛙写作
- 蛙蛙写作是一款国内领先的AI写作助手,专为内容创作者设计,提供续写、润色、扩写、改写等服务,覆盖小说创作、学术教育、自媒体营销、办公文档等多种场景。
- 11次使用
-
- CodeWhisperer
- Amazon CodeWhisperer,一款AI代码生成工具,助您高效编写代码。支持多种语言和IDE,提供智能代码建议、安全扫描,加速开发流程。
- 25次使用
-
- 畅图AI
- 探索畅图AI:领先的AI原生图表工具,告别绘图门槛。AI智能生成思维导图、流程图等多种图表,支持多模态解析、智能转换与高效团队协作。免费试用,提升效率!
- 52次使用
-
- TextIn智能文字识别平台
- TextIn智能文字识别平台,提供OCR、文档解析及NLP技术,实现文档采集、分类、信息抽取及智能审核全流程自动化。降低90%人工审核成本,提升企业效率。
- 61次使用
-
- GPT-4王者加冕!读图做题性能炸天,凭自己就能考上斯坦福
- 2023-04-25 501浏览
-
- 单块V100训练模型提速72倍!尤洋团队新成果获AAAI 2023杰出论文奖
- 2023-04-24 501浏览
-
- ChatGPT 真的会接管世界吗?
- 2023-04-13 501浏览
-
- VR的终极形态是「假眼」?Neuralink前联合创始人掏出新产品:科学之眼!
- 2023-04-30 501浏览
-
- 实现实时制造可视性优势有哪些?
- 2023-04-15 501浏览