1 / 21

大数据时代下的智慧与融合

大数据时代下的智慧与融合. 华为存储产品线 经宁. Agenda. 智慧数据： IT 的新机遇 强化融合： IT 架构的变化 华为存储的大数据实践. 1. 大数据是国家重要的战略资源. 中国. 2013 年 6 月 21 日 中科院发表战略报告 大数据作为国家 7 大研究领域之一 200 多专家耗时 1 年研究得出. 奥巴马政府. 英国政府. 2012 年 3 月 29 日 发布 《 大数据研究和发展计划 》 六大联邦部门年投资 2 亿美金. 2013 年 1 月 英国投资 1.89 亿英镑发展大数据

gail-martin
Download Presentation

大数据时代下的智慧与融合

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. 大数据时代下的智慧与融合 华为存储产品线 经宁

  2. Agenda 智慧数据：IT的新机遇 强化融合：IT架构的变化 华为存储的大数据实践 1

  3. 大数据是国家重要的战略资源 中国 • 2013年6月21日 • 中科院发表战略报告 • 大数据作为国家7大研究领域之一 • 200多专家耗时1年研究得出 奥巴马政府 英国政府 • 2012年3月29日 • 发布《大数据研究和发展计划》 • 六大联邦部门年投资2亿美金 • 2013年1月 • 英国投资1.89亿英镑发展大数据 • 占国家新技术发展资金的31.5% 联合国 日本总务省 • 2012年7月 • “活力ICT日本”综合战略 • 应用大数据解决社会公共问题 • 2012年7月10日 • 发布《大数据促发展：挑战和机遇》 • 对失业率增加、区域开支、疾病暴发进行预测

  4. 大数据广泛应用于各大行业，需求特征明显 卫星测绘 金融证券 油气勘探 海量数据存储 盘活归档数据 潜力分析 • 卫星拍摄图片，每天产生1TB数据，系统要求具有PB级的容量扩展 • 大小文件混合存储的解决方案，1个长条带文件可达10GB，索引数据和缩略图几十KB。 • 需要对长达15年的历史数据进行在线查询，对总行交易明细和分行电子凭证进行联动查询。 • 传统的磁带库或光盘的离线保存方式无法满足业务响应要求 • 页岩气引发清洁能源革命，但页岩气的开采非常困难，每口井成本在800万美金 • 通过大数据分析方法，单井的成本降到300万美金左右

  5. 电信行业大数据发展现状与趋势 将大数据分析与商业应用结合，分析企业数据与数字经济业务数据，助力业务创新 集中于BI等传统数据分析方法，对内部经营数据进行分析 主要为话单、详单、探针数据、分析汇总数据等结构化数据 非结构化的数字经济的海量交易内容，生活习惯，消费数据等 转变管道流量为业务关联的内容流量 海量难以分析的管道流量经过运营商 数据的实时性主要围绕呼叫与连接的实时性的需求 数据的实时性主要围绕交易的实时性的需求

  6. 大数据给电信行业带来的机遇 数据驱动运营，价值提升 数据价值开放，构建生态系统 • TLF，定位为一个“海量数据并具有深入全面客户洞察的”商店，向企业出售各种有价值的分析信息 • 2012年10月，TLF在英国成立了Dynamic Insight子公司；发布第一款产品Smart Step为合作伙伴提供消费者的流动信息 • Verizon发布Precision Market Insights；为媒体、广告商、零售等提供消费者的流动、消费习惯等信息 • 国内中国移动业务基地、江苏移动提供位置广告 • 中国移动精细化运营、流量经营 • 中国联通WO+开放及智慧营销 • Mobily提升客户体验、提升用户ARPU、提升用户生命周期价值 • 中国移动电商、业务门户通过用户点击流等分析，提升运营流程及客户体验 大数据 基于大数据的IT架构，统一运营 • 中国移动集团集中化经分项目，降低数据仓库成本，企业级的融合决策 • 中国联通集团数据共享中心，统一决策支持，各业务数据共享支撑统一运营 • 马来DIGI，统一决策中心

  7. 大数据时代下的IT角色转变 成本中心 利润中心

  8. Agenda 智慧数据：IT的新机遇 强化融合：IT架构的变化 华为存储的大数据实践 2

  9. 大数据应用强化了IT架构的新变化 传统IT技术架构 新的IT技术架构变化 分布式架构 集中式架构 以计算为中心 以数据为中心 层次架构 整合架构

  10. 集中式架构转向分布式架构 • 性能、容量、扩展性等受限 • 数据孤岛、管理复杂 • 分布式实现性能与容量按需扩展 • 数据高效使用、简化管理 Title Title Title 集中式 分布式 Title Title Title Title

  11. output input 以计算为中心转向以数据为中心建设IT • 数据在存储与计算之间搬迁 • PB级数据时代数据搬迁代价巨大 • 以搬迁计算代替搬迁数据 • 实现PB级数据快速存储与分析 以计算为中心 以数据为中心

  12. 层次架构走向整合架构 • 专用的存储硬件 • 专用的存储OS • 面向企业的传统应用 • 通用硬件 • 分布式存储OS • 面向Hadoop的大数据应用 层次架构 整合架构

  13. 大数据时代下的架构变化 分布式融合架构

  14. Agenda 智慧数据：IT的新机遇 强化融合：IT架构的变化 华为存储的大数据实践 3

  15. 华为智能融合存储理念和核心技术 • 分布式技术 • 三位一体 S3/NFS/CIFS DHT 存以智用，融以致远 P1 P8 P1 P8 Self Organized Disks P1 P1 P1 P1 P8 P8 P8 P8 P15 P22 P15 P22 面向全球云数据中心 高效的全球数据共享模式 面向海量数据存储 融合架构简化生命周期管理 P15 P15 P15 P15 P22 P22 P22 P22

  16. 存储、分析、归档三位一体 传统 华为 价值呈现 数据全生命周期管理 数据装载 数据迁移 分析 归档 存储 存储 分析 归档 管理复杂度降低，效率提升5倍 • 具备存储、分析、归档能力，免除跨设备数据装载、迁移 • 全局视图，实现数据在线、近线、离线的全生命周期管理 • 系统内数据动态分级 存储 分析 归档

  17. 助力欧洲核子研究中心（CERN）应对EB级挑战 客户需求 • 超过7000名全球顶尖工程师的劳动结晶 • 珍贵的近1600万亿次碰撞数据 • 2009年数据约15PB，2012年约25PB持续扩展需求 • 大型强子对撞机（LHC）每年超过20PB的数据增长 华为解决方案 • 创新的海量数据资源池解决方案 • EB级高扩展性 • 数据持久性达到11个9 “CERN在执行数据密集型模拟和分析方面正在面临极限，与华为的合作为我们展现了一个令人激动的新途径。华为云存储优良的架构设计，使得CERN能够轻松应对未来EB级数据量存储和处理的挑战。” 鲍勃·琼斯，CERN OpenLAB主任 客户价值 • 卓越架构满足EB级别扩展 • 降低了45%的OPEX • 运行1年未出现任何宕机事故，100%可靠性 华为成为CERN开放实验室 在存储领域的唯一合作伙伴

  18. 保障深圳大运会移动通信精细化运营 客户需求 • 实现对海量数据的实时处理 • 系统端到端的业务可视性和管理性 • 高标准、严要求的通信服务质量 华为解决方案 • 所有2G/3G网络设备的海量实时数据存储与管理，包括32个MSC、12个Gateway Server及52个MGW • 整合端到端的业务数据来重现完整的呼叫流程 • 根据呼叫失败的数据提供创新的鱼骨图分析服务 华为获得中国移动通信保障奖 客户价值 华为卓越的大数据技术方案带来的精细化运营保障了深圳大学生运动会移动通信高效的运行！ -- 深圳移动运维部主任 • 海量数据轻松管理：1600万用户 • 实时的业务数据监控：告警时延<1秒，生成报告<30秒 • 可靠的海量数据存储：30天的CDR，180天的SDR • 提升故障的可追溯性：业务重现，网络可视化 • 端到端的业务质量保障

  19. 助力IMG直播伦敦奥运盛况 IMG 集团是全球顶级的体育媒体制作公司，其主要客户有 EVS System iNews-01 iNews-02 Ardom System 客户需求 • 现网设备多，网络复杂，需简化网络 • 更高性能，支撑生产扩容 • 需要共享存储，作为在线和近线存储 Sky-Sports， ESPN, BBC等。 覆盖30多个国家，超过3000多名员工。 “给我们留下深刻印象的一方面是华为高质量的解决方案，另一方面是华为工程师的创新精神。我们找其它供应商时，回答是我们的需求不可能满足。但华为截然不同，他们努力去理解媒体行业、找到并交付了满足我们需求的方案。” ---- IMG Media总经理，Shane Warden 华为解决方案 E6000 server 10GE 交换机 • 华为媒资存储解决方案 • 方案组件： • 高性能、高密度E6000刀片集群 • 高性能NAS存储作为客户生产空间；使用大容量廉价SATA空间作为AVID用户近线存储存储空间。（基于文件的迁移，定位更精准，粒度更灵活） E6000 server E6000 server E6000 server 客户价值 • 高可靠性E6000刀片方案简化了客户组网。通过集群虚拟化，服务器数量缩减一半，节省空间60%以上。 • 集群NAS方案同时提供在线和近线共享存储方案，大大节约客户存储扩容成本。 • 以Tier1厂商的性能和良好的性价比给客户带来价值。 10GE 华为 集群ＮＡＳ

  20. 大数据时代下的双引擎：智慧与融合 政府 电信 大企业 媒资 金融 能源电力 中小企业 巴西政府 电信, 英国 卢森保 中国央视 工商银行 泰国城市电力 波兰政府 VODAFONE 中国百度 瑞士保险 100+国家的中小企业在使用华为企业产品 英国IMG 中国国家电网 核物理研究所 西班牙电信 俄罗斯政府 Copel 凤凰卫视 土耳其央行 西班牙政府 中国电信 Yandex，俄罗斯 俄罗斯国家电视台 捷克PPF银行 中国石油 融合架构是技术发展的趋势 智慧数据是IT增值的核心

More Related