- · 《数字化用户》投稿方式[06/28]
- · 《数字化用户》征稿要求[06/28]
- · 《数字化用户》刊物宗旨[06/28]
一、本刊要求作者有严谨的学风和朴实的文风，提倡互相尊重和自由讨论。凡采用他人学说，必须加注说明。 二、不要超过10000字为宜，精粹的短篇，尤为欢迎。 三、请作者将稿件（用WORD格式）发送到下面给出的征文信箱中。 四、凡来稿请作者自留底稿，恕不退稿。 五、为规范排版，请作者在上传修改稿时严格按以下要求： 1．论文要求有题名、摘要、关键词、作者姓名、作者工作单位（名称，省市邮编）等内容一份。 2．基金项目和作者简介按下列格式： 基金项目：项目名称（编号） 作者简介：姓名（出生年－），性别，民族（汉族可省略），籍贯，职称，学位，研究方向。 3．文章一般有引言部分和正文部分，正文部分用阿拉伯数字分级编号法，一般用两级。插图下方应注明图序和图名。表格应采用三线表，表格上方应注明表序和表名。 4．参考文献列出的一般应限于作者直接阅读过的、最主要的、发表在正式出版物上的文献。其他相关注释可用脚注在当页标注。参考文献的著录应执行国家标准GB7714-87的规定，采用顺序编码制。
OceanStor大数据存算分离方案助力联通集团加速
作者:网站采编关键词:
摘要：经济日报-中国经济网8月3日讯??近日，中国联通基于华为OceanStor存储Pacific系列的大数据平台正式上线，标志着中国联通和华为技术有限公司在大数据计算存储分离架构的规模化技术创新
经济日报-中国经济网8月3日讯??近日，中国联通基于华为OceanStor存储Pacific系列的大数据平台正式上线，标志着中国联通和华为技术有限公司在大数据计算存储分离架构的规模化技术创新方面取得了全面突破。?
数据中台建设对数据基础设施提出了新挑战?
据悉，中国联通已经构建了全球电信行业技术和规模双领先的集中一体化大数据平台，当前正在推进数据中台战略，实现全域数据共享，跨源跨域融合分析，快速释放数据价值。而这也意味着，数据中台建设对于数据基础设施提出了新的挑战。?
首次，需要能够灵活调度的数据基础设施，计算、存储资源分别池化，统一的存储底座，和多样的计算引擎，能够基于业务需求快速调度，支持业务快速创新；?
其次，更低的存储成本，5G时代，运营商数据量预计将增长5倍以上，在当前提速降费的大环境下，需要更高效的利用存储资源，节省CAPEX和OPEX投资；?
另外，数据共享，数据内容越来越多样化，为了避免数据孤岛，支撑BOME四域数据融合分析，非结构化和结构化数据统一存储已成为数据基础设施的新标准；?
最后，数据可靠性，数据分析能够支撑企业提升用户体验，找到新的商业机会，正在从边缘业务走向核心系统，作为其基础设施，需能够容忍多节点同时故障，支持亚健康检测、故障快速修复，有效拉长维护周期。保证系统高可用的前提下，降低海量数据的维护复杂度。?
华为大数据存算分离方案五大创新点?
2019年3月，中国联通集团信息化部数据中心与华为公司成立联合工作组，共同推进大数据系统集约化建设和国产化技术创新。
基于大数据存算分离技术的运营支撑平台整体架构?
华为大数据存算分离方案创新性的在存储层实现了原生的HDFS的语义，打破了传统大数据平台计算存储紧耦合的部署架构，不仅实现大数据平台建设成本的大幅降低，而且通过存储层全分布式架构和协议融合互通的能力，提升数据分析效率，完全满足中国联通对于大数据平台的期望和要求。据介绍，华为大数据存算分离方案拥有五大创新点。?
其一，计算存储分离，按需扩展?
在存储层构建了原生HDFS能力，将存储从服务器本地盘剥离，形成计算和存储完全分离的方案，既满足业务弹性扩展需求，又避免资源浪费，为统一的大数据分析平台打下技术基础。?
其二，大比例EC算法，提高存储资源利用率?
在大数据存算分离方案中，采用存储层成熟的EC技术，替代Hadoop的多副本，存储资源利用率提升到91.6%，同样的数据量，机柜数下降45%，大幅节省了运维成本。?
其三，全分布式NameNode，海量数据统一管理?
采用存储层提供的全分布式的NameNode架构，每个节点既是数据存储节点，也是元数据管理节点，单个NameSpace能够支撑百亿文件的存储，为大数据平台提供坚实的数据存储底座，很好的支撑了集团的数据中台战略。?
其四，原生HDFS，新老共存，保护投资?
在大数据存储层构建了HDFS的纳管功能——元数据网关，通过纳管现网已经部署的HDFS，实现了应用层数据访问的统一入口，且支持优先写入存储层HDFS、基于配置选择写入HDFS、负载均衡写入HDFS等多种写入策略，真正做到了业务无感知的平滑演进。?
其五，企业级存储数据保护技术，提升可靠性?
在存储层，采用多故障域技术，每个故障域都允许4个节点同时故障，上百个存储节点集群，即能够容忍12个节点同时故障，极大的延长了维护周期。当出现硬盘或节点故障时，存储层提供远高于传统Hadoop的数据重构速度，将故障修复时间从天级缩减至小时级，进一步加强数据层的可靠性。?
由于是新技术，中国联通联合华为制定了非常全面的测试计划，同时搭建了存算一体和存算分离两套测试环境，采用现网脱敏的真实业务数据，通过镜像对比，从功能、性能、可靠性、可扩展性等多个维度，论证方案的可行性和价值。经过数个月的联合测试，测试结果得到中国联通集团信息化部数据中心的认可，最终促成中国联通对于华为OceanStor存储Pacific系列的规模化采购。?
目前，基于存算分离技术建设的运营支撑平台已正式上线，已经承载了互联网分析、IoT、日志等系统15PB的数据量，实现了联通各省公司2/3/4/5G?xDR、网络信令、互联网日志、IoT等数据的接入分析，日导入数据量超过70TB。?
文章来源：《数字化用户》 网址: http://www.szhyhbjb.cn/zonghexinwen/2020/0804/482.html