360 likes | 622 Views
HPC 高性能计算. —— 保险行业解决方案. 议题. 精算业务 需求 及 现状 描述. HPC 介绍. 人保高性能平台案例分享. 客户工作模式. 客户工作模式 ——SAS. 源数据. 目标数据. 导入. 生成. 临时文件. SAS. 客户工作模式. 客户工作模式 ——Excel. 结果. 大 Excel 文件. 生成. 运行. VBA 脚本. 业务 需求及现状描述. SAS 和 Excel 的运算效率 现状 (参考人保): — 笔记本电脑,内存支持不到 4G 。
E N D
HPC 高性能计算 ——保险行业解决方案
议题 精算业务需求及现状描述 HPC 介绍 人保高性能平台案例分享
客户工作模式 客户工作模式——SAS 源数据 目标数据 导入 生成 临时文件 SAS
客户工作模式 客户工作模式——Excel 结果 大Excel文件 生成 运行 VBA脚本
业务需求及现状描述 • SAS和Excel的运算效率 现状(参考人保): —笔记本电脑,内存支持不到4G。 —系统Windows XP 32bit,运算常出现假死现象 • SAS的存储要求 现状(参考人保): —本机硬盘,容量小,易损坏。 —移动硬盘速度慢、易损坏、容量有限。 —历史信息及数据,没有统一集中管理,已经清理过的数据需要重复处理
业务需求及现状描述 • 执行结果的准确性 现状(参考人保): —源数据、中间数据、结果数据版本不一致,计算结果不准确。 • 机密文档的安全性 现状(参考人保): —公司业务数据信息机密随笔记本、移动硬盘被带出公司。 —相对隔离的数据,没有很好的权限控制。
痛苦的结果 • 模型计算:等了几个小时,岿然不动 • 统计结果:经常重新再来 • 磁盘空间:最痛恨被告知空间已满,无法计算 • 数据备份:伤不起的PC机 • 安全问题:问题依旧
议题 精算业务需求及现状描述 高性能计算介绍 人保高性能平台案例分享
高性能计算概述 • 高性能计算(HPC) 指通常使用很多处理器(作为单个机器的一部分)或者某一集群中组织的几台计算机(作为单个计 算资源操作)的计算系统和环境。 • 领域专家或者工程师可以用来解决一些程序规模庞大、运算时间长以及数据量大的模型。 • 对计算任务进行分解,并把分解的任务块通过一定方式交给不同的处理器计算。
HPC工作原理 初始化并分发任务 将作业传给控制 节点 整合结果展现 传递后台计算结果
HPC应用及发展趋势 • 高性能计算机能够广泛应用于生物、信息、电子商务、金融、保险等产业,它同时也是传统产业(包括制造业)实现技术改造、提高生产率和竞争力的重要工具。高性能计算已从技术计算(即科学计算和工程计算)扩展到商业应用和网络信息服务领域。 • 高性能计算开始走出原来的科研计算向更为广阔的商业计算和信息化服务领域扩展。更多的典型应用在电子政务、石油物探、分子材料研究、金融服务、教育信息化和企业信息化中得以展现。
HPC国际成功案例 • 美国能源部的加速战略计算计划,目标是构造100万亿次的超级计算机系统、软件和算法,在2004年真实地模拟核爆炸。 • 福特用高性能计算机构造了一个网上集市,通过网络连到它的3万多个供货商。这种网上采购不仅能降低价格,减少采购费用,还能缩短采购时间。福特估计这样做大约能节省80亿美元的采购成本。 • 好利威尔公司和通用电气公司用网络将全球各地设计中心的服务器和贵重设备连于一体,以便于工程师和客户共同设计产品,设计时间可缩短100倍 • 壳牌石油公司通过全球内部网和高性能服务器收集员工的创新建议,加以集中处理。其中产生了一种激光探测地下油床的新技术,为该公司发现了3亿桶原油。
议题 精算业务需求及现状描述 高性能计算介绍 人保高性能平台案例分享
人保需求分析 性能 大量的数据在单台PC上运行。一个常规的计算,就要消耗大量时间,而且结果不定。 存储问题 因为SAS计算,在中间产生大量的中间临时文件。比如10G的数据,可能产生几个50G的临时文件,而最终所需的数据有可能只有2-3G。 数据管理 如果数据管理比较分散,或者数据源引用不一致,都可能造成几天的努力白费。 由于缺乏一个合规、流程化的工作环境,效率比较低。 协同办公
Windows HPC Server • 端到端的完整解决方案 • 可扩展的性能 • 快速、可扩展的部署 • 可扩展的管理、监控、故障排除和报表工具 • 具有业务关键性的基于面向服务的架构(SOA)应用程序 • 增强的Excel 2010 的性能
为什么要用SharePoint SharePoint 有完整的文档生命周期管理 模板 修订/审批 创建 发布 存储 日志记录 权限保护
HPC + SharePoint • 模型计算:多节点服务器并行运行,节省大部分空间 • 统计结果:数据源唯一,版本控制 • 磁盘空间:服务器加存储 • 数据备份:版本管理;服务器备份 • 安全问题:灵活的权限管理
POC验证 • 拟合计算并行测试结果 拟合次数规模
案例分享—延伸需求 • 客户在数据审计过程中,利用Excel、SAS进行已决、未决数据的审计,计算速度和人工效率低下。 • SAS主要做数据钻取和统计,而关系型数据的管理却是SQL Server的强项。 • 客户希望在SAS和Excel中的数据管理和筛选任务转移到SQL Server中。
案例分享—方案沉淀 内容管理 源数据 整合数据 搜索 项目管理 。。。 商业智能 SQL 报表服务 数据展现 SAS统计 SAS 功能驱动 HPC管理 HPC
高性能价值 对IT管理人员 对业务员 • 提高工作效率 • 节省时间 • 提升效率 • 优化协作 • 简单易控的系统 • 简化流程 • 降低风险 • 服务满意度提升 对管理层 • 管理工作的便利 • 成本降低 • 有效利用