十个用于 AutoML 的 GitHub 存储库
小伙伴们对科技周边编程感兴趣吗?是否正在学习相关知识点?如果是,那么本文《十个用于 AutoML 的 GitHub 存储库》,就很适合你,本篇文章讲解的知识点主要包括。在之后的文章中也会多多分享相关知识点,希望对大家的知识积累有所帮助!
人工智能和机器学习的突破是过去二十年中最激动人心的两个话题。机器学习和数据科学工程师需要广泛的研究和努力工作才能有效地理解和运行他们的模型。
虽然它们可能因人而异,但传统的机器学习步骤包括:
- 数据采集
- 数据探索
- 数据准备
- 特征工程
- 选型
- 模型训练
- 超参数调整
- 预测
虽然 8 个步骤在构建机器学习模型时可能看起来并不多,但从上面的步骤开始需要相当长的时间才能完善!
当非专业的机器学习从业者第一次经历这些步骤时,问题会更加严重;该过程通常需要更多时间和资源才能完成,即使如此,最终结果也可能与预期不符。
AutoML 通过为专家和非专家等人自动执行大部分模型创建过程而派上用场。
什么是自动机器学习 (AutoML)?
自动化机器学习,通常称为 AutoML,使机器学习变得更容易。AutoML 使用由给定框架完成的自动处理,使非机器学习专家更容易使用机器学习。
它专注于加速人工智能的研究和提高机器学习模型的效率。
传统的机器学习过程侧重于前面提到的所有 8 个步骤,而 AutoML 涵盖两个步骤:
- 数据采集是在将数据存储到数据仓库之前收集、过滤和清理所用数据的过程。
- 预测是指给定模型返回的实际输出,训练有素的模型很可能会返回准确的最终预测。
数据探索、 数据准备、特征工程、模型选择、模型训练和 最终模型调整的框架将涵盖其他 6 个步骤。
AutoML 的优势
- 提高工作效率
- 更好的最终结果
- 最小化错误
- 扩展机器学习
AutoML 流行框架
既然我们已经讨论了什么是 AutoML 并了解了它的一些优势,我们将介绍 10 大 AutoML 框架、在哪里可以找到它们以及它们提供的功能。
1. 谷歌自动机器学习
Google AutoML是最著名的可用框架之一,在我们的列表中排名第一。谷歌已经推出了许多 AutoML 框架,例如 Google AutoML vision、Google AutoML Natural Language 等。
2. 自动 SKLearn
之前接触过机器学习的用户可能对 SKlearn 这个名字并不陌生。作为流行的sci-kit-learn 库的附加组件,Auto SKLearn 是一个开源机器学习框架,可处理机器学习任务的自动化。
Auto Sklearn 框架能够执行其模型选择、超参数调整和表征,这是 Auto SKlearn 框架的一个独特功能。
通过执行模型选择,Auto SKlearn 将自动搜索能够处理用户给定问题的最佳算法。
转到 Auto SKlearn 的第二个功能,我们有超参数调整。作为任何机器或深度学习模型的最后步骤之一,用户应该找到最佳模型参数来优化结果。此任务需要大量时间,并且可以通过此类框架轻松实现自动化。
使用 Auto SKlearn 的独特和最终好处是它能够执行自动表征。表征是将原始数据转换为可用信息的过程。
3.TPot
TPOT,也称为 Tree Pipeline Optimization Tool,是最早的 python 开源 autoML 软件包之一。它专注于使用遗传编程优化机器学习管道。
TPOT 的主要目标是通过将管道的灵活表达式树表示与遗传编程等随机搜索算法相结合来自动构建 ML 管道。
请注意,TPOT 在sci-kit-learn library之上工作,必须先安装它。
4.AutoKeras
AutoKeras是一个为 AutoML 和深度学习模型构建的开源库,最初由 DATA 实验室开发。
Auto Keras 帮助非专家机器和深度学习爱好者以最小的努力运行和训练他们的模型。Auto Keras 的目标是让每个人都可以学习机器学习,它是初学者的绝佳工具
5.路德维希
Ludwig是一个开源 autoML 框架,主要侧重于使用简单的配置文件系统组装和训练深度学习模型。
通过让用户提供一个配置文件来定义给定模型的输入和输出及其各自的数据类型,Ludwig 框架将利用这些数据基于前面提到的属性构建其深度学习模型。
6. MLBOX
MLBOX正在崛起,并迅速成为顶级自动化机器学习框架工具之一。
根据MLBOX 官方文档,它提供了以下好处:
- 快速读取和分布式数据预处理/清理/格式化。
- 高度稳健的特征选择和泄漏检测。
- 高维空间中的精确超参数优化。
- 最先进的分类和回归预测模型(深度学习、堆叠、LightGBM 等)。
- 使用模型解释进行预测。
7. 自动关机
AutoGloun面向专家和非专家机器学习从业者,专注于自动化堆栈集成、深度学习和跨越图像、文本和表格数据的真实世界应用程序。
根据AutoGloun 在线文档,AutoGLoun 使用户能够:
- 仅需几行代码即可为原始数据快速构建深度学习和经典 ML 解决方案的原型。
- 在没有专业知识的情况下自动利用最先进的技术(在适当的情况下)。
- 利用自动超参数调整、模型选择/集成、架构搜索和数据处理。
- 轻松改进/调整定制模型和数据管道,或为特定用例定制 AutoGluon。
8.微软神经网络智能(NNI)
Microsoft Neural Network Intelligence,也称为 NNI,是一个工具包,旨在为深度学习自动化特征工程、神经架构搜索、超参数调整和模型压缩。
NNI 工具支持 PyTorch、TensorFlow、Scikit-learn、XGBoost、LightGBM 等框架。使用 Microsoft Neural Network 的主要好处是神经架构搜索,NNI 工具支持 Multi-trail(网格搜索、正则化进化、基于策略的 IRL 等)和 One-shot(DARTS、ENAS FBNet 等)神经架构搜索。
该工具提供了多种超参数调整算法,例如贝叶斯优化、穷举搜索和启发式搜索。查看 Github 上 NNI 的自述文件,了解有关此工具提供的其他内容的更多信息。
9. 变形怪
TransmogrifAI旨在帮助开发人员提高机器学习生产力。TransmogrifAI 在 Apache Spark 之上运行。
正如 Transmogrif 上的 Github 自述文件中简要提到的那样,“通过自动化,它可以达到接近手动调整模型的精度,并且时间减少了近 100 倍。”
与提到的其他 autoML 框架一样,TransmogrifAI 工具能够为用户选择的数据集选择最佳算法。
10. H2O 自动机器学习
H2O autoML是 H2O 创建的开源框架工具,同时支持 R 和 Python 编程。
它还支持最广泛使用的统计和机器学习算法,包括梯度提升机器、广义线性模型和深度学习。
H2O autoML 接口通过要求尽可能少的参数来适应新的机器学习用户。用户在使用 H2O 工具时的主要任务是提供数据集。
其他有用的 AutoML 工具
1.过度紧张
Hypertunity是一种轻量级工具,旨在使用轻量级包优化模型的给定超参数。它们模块化简单,可扩展以允许无缝调度实现。
Hypertunity 支持使用 GPyOpt、Slurm 兼容调度程序的贝叶斯优化,以及使用 Tensorboard 的实时可视化(通过 HParams 插件)。
2. 蜻蜓
Dragonfly是一种开源 autoML 工具,专为可扩展的贝叶斯优化而设计。
贝叶斯优化用于评估超出普通优化的非常昂贵的黑盒函数。
Dragonfly 允许新用户用最少的知识解决可扩展的贝叶斯优化错误。
3.雷音
作为我们的第二个超参数优化工具,Ray Tune是一个用于扩展 AI 和 Python 应用程序的统一框架。
它通过分布式数据处理、分布式训练、可扩展的超参数调整、可扩展的强化学习和可扩展的可编程服务来实现简单的 AI 工作负载扩展。
4.自动图学习
Auto Graph Learning是一个独特的 autoML 框架,它专注于图形数据集的机器学习,非常容易和简单。
他们使用数据集来维护基于 Pytorch Geometric 或 Deep Graph Library 中的 Datasets 的基于图的机器学习的数据集。
用于自动机器学习的 GitHub 存储库
随着机器和深度学习领域的进步,对机器学习专家的需求大幅增加却没有得到解决。
这就是机器学习工具和技术的自动化派上用场的地方,它允许新用户比以往任何时候都更轻松地构建功能齐全且高度优化的模型。
简而言之,在寻找完美的自动化机器学习工具时,您应该关注您尝试使用给定模型实现的目标以及您希望自动化的机器学习过程中的确切部分。我们建议您自己尝试上述几个 autoML 工具,然后只使用您认为高效且易于使用的几个。
理论要掌握,实操不能落!以上关于《十个用于 AutoML 的 GitHub 存储库》的详细介绍,大家都掌握了吧!如果想要继续提升自己的能力,那么就来关注golang学习网公众号吧!

- 上一篇
- 用AI让数亿失明者重新「看见世界」!

- 下一篇
- 机器人可以帮助我们重新认识美术
-
- 知性的酸奶
- 这篇博文真及时,细节满满,真优秀,码住,关注楼主了!希望楼主能多写科技周边相关的文章。
- 2023-05-31 22:00:40
-
- 花痴的小蜜蜂
- 很好,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢作者大大分享技术文章!
- 2023-05-28 13:51:47
-
- 诚心的火龙果
- 太详细了,码住,感谢作者的这篇技术文章,我会继续支持!
- 2023-04-29 02:28:28
-
- 现代的金毛
- 太全面了,收藏了,感谢楼主的这篇文章内容,我会继续支持!
- 2023-04-24 18:15:08
-
- 香蕉红酒
- 这篇文章内容出现的刚刚好,好细啊,很好,mark,关注up主了!希望up主能多写科技周边相关的文章。
- 2023-04-23 07:26:04
-
- 能干的苗条
- 写的不错,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者分享文章内容!
- 2023-04-17 15:09:39
-
- 科技周边 · 人工智能 | 10小时前 | 预防措施
- 豆包AI导出失败?常见错误代码解析及解决方案
- 285浏览 收藏
-
- 科技周边 · 人工智能 | 13小时前 |
- 东风猛士M817亮相上海车展最“华”越野车
- 292浏览 收藏
-
- 科技周边 · 人工智能 | 13小时前 |
- 岚图FREE+上海车展亮相,搭载华为ADS4.0,6月预售
- 501浏览 收藏
-
- 科技周边 · 人工智能 | 15小时前 |
- 用豆包A/表情包变现攻略及方法
- 196浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
-
- 毕业宝AIGC检测
- 毕业宝AIGC检测是“毕业宝”平台的AI生成内容检测工具,专为学术场景设计,帮助用户初步判断文本的原创性和AI参与度。通过与知网、维普数据库联动,提供全面检测结果,适用于学生、研究者、教育工作者及内容创作者。
- 18次使用
-
- AI Make Song
- AI Make Song是一款革命性的AI音乐生成平台,提供文本和歌词转音乐的双模式输入,支持多语言及商业友好版权体系。无论你是音乐爱好者、内容创作者还是广告从业者,都能在这里实现“用文字创造音乐”的梦想。平台已生成超百万首原创音乐,覆盖全球20个国家,用户满意度高达95%。
- 29次使用
-
- SongGenerator
- 探索SongGenerator.io,零门槛、全免费的AI音乐生成器。无需注册,通过简单文本输入即可生成多风格音乐,适用于内容创作者、音乐爱好者和教育工作者。日均生成量超10万次,全球50国家用户信赖。
- 27次使用
-
- BeArt AI换脸
- 探索BeArt AI换脸工具,免费在线使用,无需下载软件,即可对照片、视频和GIF进行高质量换脸。体验快速、流畅、无水印的换脸效果,适用于娱乐创作、影视制作、广告营销等多种场景。
- 29次使用
-
- 协启动
- SEO摘要协启动(XieQiDong Chatbot)是由深圳协启动传媒有限公司运营的AI智能服务平台,提供多模型支持的对话服务、文档处理和图像生成工具,旨在提升用户内容创作与信息处理效率。平台支持订阅制付费,适合个人及企业用户,满足日常聊天、文案生成、学习辅助等需求。
- 31次使用
-
- GPT-4王者加冕!读图做题性能炸天,凭自己就能考上斯坦福
- 2023-04-25 501浏览
-
- 单块V100训练模型提速72倍!尤洋团队新成果获AAAI 2023杰出论文奖
- 2023-04-24 501浏览
-
- ChatGPT 真的会接管世界吗?
- 2023-04-13 501浏览
-
- VR的终极形态是「假眼」?Neuralink前联合创始人掏出新产品:科学之眼!
- 2023-04-30 501浏览
-
- 实现实时制造可视性优势有哪些?
- 2023-04-15 501浏览