很多制造企业这两年喊着数字化,搞到最后发现最头疼的不是买设备上系统,是存了一堆数据用不了。
冲压机的振动日志存在机床本地,质检的X光片存在检测系统的硬盘,供应链的来料数据存在采购部的Excel,销售的售后数据存在CRM里。
要调一组数据做故障预测,各个部门跑一遍,数据格式不统一,还缺东少西。
原来的玩法无非两种:要么建传统数据仓库,只能存规整的结构化数据,什么传感器日志、检测图片这些非结构化数据根本塞不进去,就算塞进去了查一次要等大半天。要么直接搞个裸数据湖,什么都往里面丢,最后没人整理,变成烂在那里的
说实话我上个月跑珠三角的一家中型汽配厂,老板说投了两百万建数据平台,现在要调过去三年某台冲压机的振动数据做故障模型,三个工程师找了三天还没理清楚数据存在哪、格式对不对。
这不浪费钱吗。
问:中小制造企业规模不大,十几台机床的规模,也需要上数据湖仓一体吗?
答:真不是头部大厂的专属玩具。你想啊,哪怕你只有十几台设备,现在新设备每台每天都能出好几个G的高频传感器数据,原来存在本地硬盘,硬盘坏了数据就没了,你要做预测性维护降停机损失,就得把这些设备数据和来料的批次数据、售后的故障反馈数据串起来分析,原来分开存各个系统,根本拉不动完整的数据集。数据湖仓一体的核心就是把结构化、非结构化数据统一存储,同时支持计算,不用把数据搬来搬去折腾,中小厂反而能省不少存储和开发成本。不过话说回来,也不是所有工厂都要急着上,你要是还没实现设备联网,数据都没产生几张,那确实没必要凑这个热闹。
第一个坑❗ 为了概念而概念,上来就要全量接入,什么数据都往湖仓里丢。
你连自己要解决什么问题都没搞清楚,先把生产、质量、供应链三个核心域的数据弄好不行吗?我见过最离谱的项目,连工厂门卫的打卡数据、食堂的消费数据都要往里塞,最后维护成本翻了三倍,能落地的业务场景一个都没有。
第二个坑❗ 非要把原来的数据仓库推倒重来。
很多厂商销售为了签单,天天忽悠你旧架构不能用,必须全部换一套,扯什么呢?数据湖仓一体本来就是兼容现有架构,把原来的数据仓库和新的数据湖打通就行,原来跑的好好的结构化数据分析业务,根本不用动,光迁移这一块就能给你省几十万甚至上百万的成本。
第三个坑❗ 忽略工业场景的低延迟需求。
对吧?ToC的互联网业务,延迟个几秒没人说你,但是制造行业,产线实时质量异常检测、设备的动态调度,都是要秒级出结果的,你总不能让产线等十分钟出分析结果再停线吧?选架构的时候一定要盯着能不能支持实时计算,别光听销售吹存储容量多大。
是给业务人员用的,做故障预测、质量优化、排产这些具体的事,而数据湖仓一体是底层的存储计算架构,把原来散在各个业务系统、各个设备的脏数据、乱数据整理成统一的、随时可用的数据集,上层应用要什么数据直接调,不用每次开发新应用都重新清洗一遍数据,省了大把的重复工作。
现在很多厂商都在吹公有云原生湖仓多么牛,我给的建议是,根据自己的行业属性选部署方式,别盲目跟风。要是你做的是汽车核心零部件、军工配套这种对数据安全要求高的,私有部署的
架构肯定更稳妥。要是你是快消品制造,数据敏感度没那么高,公有云能省不少运维成本。
💡 给所有想落地的企业一个最实用的建议:先做小场景验证,再逐步扩围。
不要上来就搞全工厂全链路的数据接入,先找1-2个痛点最明确的业务场景,比如质量异常分析,或者设备预测性维护,把这个场景用到的所有数据全部接入湖仓,跑通业务,拿到实际收益——比如把不良率降了2个点,或者把停机时间降了10%,拿这个成果给老板看,后续申请预算也好,推广到其他场景也好,都顺理成章。
我最近接触长三角几个做新能源动力电池的工厂,现在已经跑通了全流程的湖仓架构,从正极材料的来料检测数据,到生产过程的温度、压力实时数据,到成品的X光检测图像,再到下游车企的售后反馈数据,全部存在统一的湖仓里,原来开发一个新的缺陷检测模型,光整理数据就要一个月,现在三天就能拿到干净完整的数据集,研发速度提了不止一倍。
说白了,数据湖仓一体不是什么飘在天上的概念,就是帮制造企业解决数据多了之后“存不下、查不到、算得慢”的老问题,别被厂商的包装忽悠,能解决你自己的痛点,就是好架构。
免责声明:文章内容来自互联网,本站仅作为分享,不对其真实性负责,如有侵权等情况,请与本站联系删除。
转载请注明出处:制造企业落地数据湖仓一体:别踩那些华而不实的坑 https://www.dachanpin.com/a/tg/70985.html