当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > IT运维管理进阶:注重基础设施与数据的双重管理

IT运维管理进阶:注重基础设施与数据的双重管理

来源:51CTO.COM 2024-02-05 21:21:22 0浏览 收藏

小伙伴们有没有觉得学习科技周边很有意思?有意思就对了!今天就给大家带来《IT运维管理进阶:注重基础设施与数据的双重管理》,以下内容将会涉及到,若是在学习中对其中部分知识点有疑问,或许看了本文就能帮到你!

AI大模型时代,数据赋予IT人“新使命”

当下IT人在企业中扮演着运营支撑的角色。说到运维管理,相信每人都是一把辛酸泪,每天承担着繁琐、高负荷且又高风险的运维工作,但在业务规划和职业发展时又成为了“透明人”。业内有句调侃的话:“只花钱的人,不配拥有发言权

随着AI大模型应用的普及,数据成为了企业的关键资产和核心竞争力。近年来,企业的数据规模快速增长,从PB级向百PB级成倍数增加。数据类型也从以数据库为主的结构化数据,逐渐演变为以文件、日志、视频等为主的半结构化、非结构化数据。为了满足业务部门的需求,数据存储需要像图书馆一样进行分类和随用随取,同时还需要更加安全可靠的存储方式。

IT人,已不再只是负责建设和管理IT资源、保障设备稳定的被动角色。

IT人的新使命,演变为提供优质数据服务,让数据好用,帮助业务部门用好数据!

新型IT运维管理,基础设施和数据两手都要硬

“基础设施”和“数据”很近,但两者的“管理”却很远

针对基础设施的管理,业界普遍的做法是通过AIOps技术,将繁琐的人工日常运维改变为利用工具自动化执行,通过专家系统、知识图谱等智能化能力,主动发现系统隐患、自动修复故障等。生成式AI技术普及后,近期出现了智能客服、交互式运维等新型应用。

针对数据的管理,业界有以Informatica、IBM等为代表的专业DataOps软件供应商,支持数据集成、数据标记、数据分析、数据优化、数据市场等能力,为数据分析师、BI分析师、数据科学家等业务团队提供服务。

笔者调研发现,目前大部分企业中的基础设施运维管理和数据管理是割裂的,由不同的团队负责,工具平台间也没有有效协同。业务上数据保存在存储等IT基础设施中,应该融为一体,但实际两者的管理却相隔甚远,甚至两个团队之间语言都不对齐,这样通常会带来几个弊端:

1)数据不同源:因为归属不同团队和采用不同工具,业务团队通常采用将原始数据通过ETL等方式复制一份至数据管理平台做分析处理。这样不仅造成存储空间浪费,还存在数据不一致、数据更新不及时等问题,影响数据分析的准确性。

2)跨地域协同难:如今企业数据中心在多个城市布局,数据在跨地域传输时,当前主要通过DataOps软件在主机层进行复制,这种数据传输方式不仅效率低,传输过程中也存在安全、合规、隐私等严重隐患。

3)系统优化不充分:当前通常基于基础设施资源的利用情况进行优化,因为无法感知数据布局而实现全局最优,数据的保存成本居高不下,有限增长的预算与成倍的数据规模增长之间的矛盾成为制约企业数据资产积累的关键矛盾。

IT人,打通“基础设施”和“数据”任督二脉,开启数智化飞轮

笔者认为,IT团队应该把“基础设施”和“数据”作为一个有机整体进行管理和优化,实现数据同源、全局最优、安全流通,扮演着数据资产管理者的重要角色。

首先,实现全局文件的统一视图。利用全局文件系统、统一元数据管理等技术,把不同地域、不同数据中心、不同类型设备中的数据形成统一的全局视图。在此基础上,能够按照热温冷、重复、过期等维度进行全局优化策略的制定,下发至存储设备执行,这种方式可以实现全局最优。基于存储层复制的压缩、加密等技术,通常可以实现数十倍的数据移动速度,效率和安全性都可以得到保证。

其次,将海量非结构化数据自动生成数据目录。通过元数据、增强型元数据等自动生成数据目录服务,把数据分门别类高效管理起来。业务团队基于目录可以自动提取满足条件的数据进行分析处理,而不用人工像大海捞针一样去找数据。笔者调研发现通过AI识别算法实现数据标注的技术已经较为成熟,因此可以利用开放框架将不同场景化的AI算法进行集成,自动分析文件内容形成多元化标签,作为增强型元数据提升数据管理的能力。

同时,数据在跨设备流动时,需要特别考虑数据主权、合规隐私等问题。存储设备中的数据应该自动分类、隐私分级、分权分域等,管理软件对数据的访问、使用、流动等策略进行统一管理,避免敏感信息和隐私数据泄露,未来数据要素交易场景这些将成为基本要求。比如,数据在流出存储设备时,首先需要对合规性、个人隐私等进行判定是否满足策略要求,否则企业将面临严重的法律法规风险。

参考架构如下:

新型IT运维管理,基础设施和数据两手都要硬

根据笔者调研以及请教同行专家后,发现业界诸如华为存储、NetApp这样的领先存储厂商已经发布存储和数据一体化管理的产品解决方案,相信未来会有更多厂商支持。

设备和数据两手都要抓、两手都要硬。IT人在AI时代可以扮演更重要的作用。

以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于科技周边的相关知识,也可关注golang学习网公众号。

版本声明
本文转载于:51CTO.COM 如有侵犯,请联系study_golang@163.com删除
奈飞再度出海,推出另一部古装悬疑剧《大唐狄公案》和《长安十二时辰》奈飞再度出海,推出另一部古装悬疑剧《大唐狄公案》和《长安十二时辰》
上一篇
奈飞再度出海,推出另一部古装悬疑剧《大唐狄公案》和《长安十二时辰》
深入了解自然语言处理技术
下一篇
深入了解自然语言处理技术
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ljg-skills -
    ljg-skills
    ljg-skills 是李继刚开源的 AI 技能与提示词集合,面向大模型使用者整理了一批可复用的 prompt、角色设定和任务技能模板,适合用于学习提示词设计、搭建个人 AI 工作流和沉淀团队常用智能体能力。
    1239次使用
  • MELO音乐 - AI 音乐生成平台,支持多模态创作能力
    MELO音乐
    MELO音乐是一站式AI视频与音乐制作助手,对标suno, udio的高品质体验。提供伴奏生成、原创写词、无损导出、哼唱识曲、混音变声等全套音频与短视频编辑工具。无论是流行Kpop、电音说唱、民谣古风、摇滚儿歌还是商用轻音乐,MELO为你免费谱曲,轻松做同款!
    1184次使用
  • UniScribe - AI 免费在线音视频转文字平台
    UniScribe
    UniScribe 是一款 AI 音视频转文字与内容整理工具,支持上传音频、视频文件或粘贴 YouTube 链接,自动生成转写文本、摘要、思维导图和关键问题,并支持多格式导出,适合会议记录、课程学习、访谈整理和内容创作复盘。
    1121次使用
  • 剧云 - 免费 AI 智能中文剧本创作平台
    剧云
    剧云是专业中文剧本创作平台,安全稳定运行十余年,集成AI编剧、剧本医生审核、人物小传、剧情关系图、大纲编写、多人协作、Word导入导出、版权管控功能,数据安全防护,轻松高效创作剧本。
    1303次使用
  • 万象有声 - AI 一站式有声内容创作平台
    万象有声
    万象有声,一个专为有声创作者打造的新一代智能有声内容创作平台。平台提供专业的智能拆章、智能画本编辑、AI配音、AI生成音效、后期制作、智能对轨、智能审听等有声创作全流程工具,可以帮助创作者高效、低成本创作出引人入胜的有声作品。立即体验,让有声书制作更简单!
    1306次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码