210 likes | 391 Views
报告人:袁小燕 实习部门:数据平台部 报告时间: 2011-10-14. Tencent 实习之点点滴滴. Welcome to tencent. 大纲. 组织框架 工作 TIPS 工作介绍 知识分享 组织建设. 1. 组织框架. 2. 工作 TIPS-(1). 万能的 OA 系统 万能的 OA 系统,腾讯企业门户网站,为我们的办公、生活、学习提供了各种便利,报销、 HR 资源、会议室申请、内部号码申诉、班车查询、机票订购、 IT 支持等等 。 腾讯学院
E N D
报告人:袁小燕 实习部门:数据平台部 报告时间:2011-10-14 Tencent实习之点点滴滴
大纲 • 组织框架 • 工作TIPS • 工作介绍 • 知识分享 • 组织建设
2.工作TIPS-(1) • 万能的OA系统 • 万能的OA系统,腾讯企业门户网站,为我们的办公、生活、学习提供了各种便利,报销、HR资源、会议室申请、内部号码申诉、班车查询、机票订购、IT支持等等。 • 腾讯学院 • 腾讯学院,在里面可以学到你想学的知识,人生哲学、时间管理、编程技巧、IT发展等等,都可以找到。 • TAPD • TAPD3.0平台是基于Scrum敏捷管理方法,以反馈-需求-迭代-发布为主线形成闭环,帮助团队全面管理用户反馈、定义产品目标、规划需求、制定迭代计划、跟踪迭代进展、跟踪产品缺陷、管理产品发布
2.工作TIPS-(2) • TFS • TFS是腾讯文件系统(Tencent File System)的简称,是企业IT部统一对公司内部提供的文件共享服务,所有公司员工在加入tencent域的计算机都可以通过访问相应目录进行文件共享和中转。 • KM平台 • KM平台是一个知识分享平台,很多知识达人在上面发帖,论坛性质。
TDW的功能特性 • TDW V0.1的主要功能特性有: • 对用户提供SQL查询接口,方便数据访问操作; • 实现计算任务的分解,实现大型计算任务在集群中并行执行; • 高效、安全的分布式文件存储管理; • 支持两级分区,支持RANGE和LIST分区类型,支持分区的增加、删除、清空等操作 • 对GROUP BY和HASH JOIN操作的负载均衡优化,从而保证计算能力的线性扩展;
3.工作介绍-TDW的功能特性 • TDW V0.2在V0.1的基础上增加了大量的高级特性: • 支持Hash 分区和Hash Map Join:通过将Join操作从Reduce端改进到Map端,避免无谓的网络数据传送; • Co-Location:通过将一个计算节点需要的数据尽量安排在本地,避免计算过程中频繁从网络上拉取数据; • 列存储:不同于传统数据的按行存储,TDW中将用户表数据按列存储,实现任务执行过程减少本地磁盘IO、节省网络IO、节省计算资源,从而提升集群的总体效率。