某科技研发云计算心酸史之工作总结

《某科技研发云计算心酸史之工作总结》由会员分享，可在线阅读，更多相关《某科技研发云计算心酸史之工作总结（33页珍藏版）》请在装配图网上搜索。

1、工 作 总 结（20111年111月220122年9月月）虚拟化基础础架构业业务部王 毅2012-9-224目录1.概述42.项目52.1云计计算服务务底层核核心52.2云计计算服务务管理系系统132.3云计计算服务务监控系系统162.4弹性性计算应应用172.5云计计算服务务计费系系统182.6云计计算服务务用户中中心系统统192.7云服服务网站站192.8云服服务网站站内容管管理系统统202.9企业业私有云云实体机机柜操作作系统202.10企企业私有有云实体体机柜监监控系统统203.团队建建设203.1初期期203.2中期期203.3后期期204.总结201.概述从20111年111月份至

2、至20112年九九月份，我我主动要要求接受受公司分分派的云云计算开开源软件件OpeenSttackk的研发发任务，到到至今已已经完成成云计算算产品服服务的大大部分功功能，并并基于已已经研发发出来的的功能生产产出一系系列的软软件产品品共花了了11个个月的时时间。在这11个个月的时时间里，无论是对于产品项目的开发、云计算底层服务研发，还是团队建设等方面都遇到了不同程度的问题和困难。虚拟化基础架构业务部从刚刚开始的“IaaS组”到现在成为部门，人员也由最初的四个人发展到现在的13个人。以下是我从从项目和和团队建建设两个个方面着着手，将将问题融融入到项项目和团团队建设设当中来来进行虚虚拟化基基础架构构

3、业务部部的工作作总结。2.项目目前虚拟化化基础架架构业务务部围绕绕着云计计算底层层服务的的研发所所完成的的项目比比较多，主要包括云计算服务管理系统-PUBECM、云计算服务监控系统-PUBECC、弹性计算应用-ECA、云计算服务计费系统-CSBS、云计算服务用户中心系统-CSUC、云服务网站-CSNT、云服务网站内容管理系统-CSMS、企业私有云实体机柜操作系统-PRVECM、企业私有云实体机柜监控系统-PRVECC等。其实，作为为云计算算服务底底层的研研发工作作，也可可以算是是一个主主要的项项目，毕毕竟它是是我们云云计算服服务底层层的核心心。2.1云计计算服务务底层核核心2011年年11月月

4、，由于于当时我我还在杨杨颖部门门下作为为一个组组的组长长，我们们所接受受的任务务是ESSDP的的开源和和ESDDP的开开源网站站的开发发。我们们组准确确的来讲讲一共只只有四个个人，在在接触了了云计算算服务开开源软件件OpeenSttackk以后，由由于我跟跟同组的的凌志对对OpeenSttackk的云存存储部分分“swiift”从安装装到使用用都已经经进行完完成，所所以也不不得不对对OpeenSttackk的虚拟拟机部分分对晓明明进行辅辅助性工工作。当当时云计计算开源源软件OOpennStaack给给我的感感觉是必必须集中中精力，才才能够顺顺利的进进行，因因此我主主动要求求承接云云计算服服务开

5、源源软件OOpennStaack的的研发工工作。在研发初期期，我们们主要的的精力还还是对于于OpeenSttackk的集群群式安装装部署，因因为OppenSStacck是一一个开源源性的软软件，除除了它自自己的开开源项目目，包括括云存储储（swwiftt）、云云虚拟机机（noova）、镜镜像服务务（gllancce）、统一身身份认证证系统（kkeysstonne）、管理系统（当时被叫做“dashboard”，后来改称为“horizon”）之外，还包括其他的一些开源的软件项目服务。如：数据库服务（mysql）、时钟服务（ntp）、消息队列服务（rabbitmq）、虚拟服务器远程服务（noVNC）

6、、网络服务（network）、访问工具（ecua）、卷组服务（volume）等等。各个服务之间首先必须安装正确，在安装正确的基础之上通过配置文件的相互配置才能够达到想要的功能效果，除此之外各个服务之间的安装还存在一个顺序的问题，所以要顺利的安装集群部署就需要反复的实验，为了保证实验的正确性和准确性，我们有的时候不得不要求将服务器进行重新格式化；之所以格式化的主要原因是卸载往往有的时候是无法卸载干净的，同样的安装过程，对于卸载的服务器有的时候能成功；而有的时候却成功不了，这大大干扰了我们的安装思路。后来公司不不允许进进行服务务器的重重新格式式化，原原因是服服务器所所在集装装箱的机机柜不能能够经常

7、常反复的的开启，对对服务器器机柜内内的温度度有很大大的影响响，容易易造成服服务器的的损坏；由于服服务器当当时在八八角楼CC4机房房，我们们只有使使用的权权限，对对于有的的时候所所发生的的服务器器死机需需要重启启等工作作，我们们只能间间接的通通过网络络部来配配合进行行完成，而而网络部部负责这这项工作作的王烨烨辉的工工作也很很忙，我我们很多多时候不不得不进进行等待待，这也给给我们的的工作带带来了一一定的困困难和麻麻烦。当时我们服服务器在在机房中中一共拥拥有200台服务务器，为为了能够够在沟通通和管理理上方便便，我针针对于服服务器进进行了从从1#20#的编号号，其中中15#199#五台台服务器器是D

8、EELL的的R4110服务务器，其其他服务务器是22GB的的内存配配置。为为了保证证安装脚脚本在我我们自己己掌控下下顺利进进行，我我决定将将八角楼楼的服务务器中的的1#机机和2#机搬到到了办公公地点作作为云存存储的脚脚本安装装及功能能测试；后来张张亚丽组组的张志志楠和张张贺军的的加入所所带来的的两台惠惠普服务务器成为为了办公公地点虚虚拟机的的脚本安安装及功功能研发发和测试试的环境境，通过过这四台台服务器器组成了了我们的的办公地地点的实实验环境境。但是是为了能能够彻底底解决OOpennStaack底底层各项项服务之之间的搭搭配工作作，能够够准确的的找到问题题的出现现位置，锁锁定服务务目标；我采取

9、取了将服服务器各各个服务务单独存存放至一一台物理理服务器器当中，来来进行功功能性验验证和观观察。准准确的来来讲在CC4八角角楼机房房里有118台服服务器供供我们使使用，但但是由于于不能够够经常性性的重新新格式化化服务器器和经常常性的进进入服务务器机房房，所以以我们对对于C44机房中中的188台服务务器的使使用非常常慎重，当当然也大大大影响响了我们们的工作作效率。OpenSStacck的官官方网站站，只是是介绍了了表面层层次上的的大体原原理，以以及各个个服务之之间的相相互作用用服务，但但是像nntp、rrabbbitmmq这样样的其他他开源服服务是没没有介绍绍的，我我们所找找到的线线索完全全得益

10、于从网网上下载载某些志志同道合合的网友友所提供供的安装装部署文文档；但但是想要要达到和和解决各各个服务务以单独独物理服服务器提提供服务务的目的的，这项项工作仍仍然非常常的艰难难。为了避免机机房服务务器的重重新安装装，我下下令让研研发人员员在自己己的台式式机上通通过viirtuual boxx安装虚虚拟服务务器，我我们自己己的台式机机箱只有有2GBB的内存存，最多多也就可可以跑三三台虚拟拟机，所所以只能能在这三三台虚拟拟机上跑跑安装脚脚本，另另外由于于我们的的台式机机CPUU等配置置不支持持虚拟化化，所以以我们只只能够通通过返回回的命令令行提示示来确定定是否安安装成功功，但创创建虚拟拟机是得得不

11、到任任何验证证的；同同时我们们只能关关掉一部部分已经经安装了了虚拟服服务器后后再跑其其他的虚虚拟服务务器，花花在查看看上的时时间非常常多，更更不要说说再遇到到问题和和解决问问题了。在这个工作作过程的的进行当当中，我我们实验验环境服服务器所所在机柜柜的PDDU坏了了，对于于PDUU的采购购花了很很长一部部分时间间，大概概有一个个月左右右，这也也导致了了我们的的工作无无法在实实验环境境的188台服务务器中进进行。我我们只能能在自己己的台式式服务器器里的虚虚拟机中中跑我们们的脚本本。在初期的过过程中，我我们并不不敢跑大大的虚拟拟机镜像像，而是是采用了了OpeenSttackk官方没没有操作作系统界界

12、面，只只有命令令行的小小型ubbunttu镜像像。在整整理和跑跑通安装装脚本并并等到实实验环境境的PDDU修复复后，我我们才得得以反复复进行我们们的安装装脚本的的实验，这这个时候候我们的的卸载脚脚本也已已基本成成熟。可可以说安安装部署署方面的的问题已已经基本本上得到到了解决决。公司还要求求可以自自动进行行安装部部署，为为了实现现这个目目标，我我们将实实验环境境的122#服务务器当作作我们安安装部署署的资源源机环境境，安装装部署资资源大概概占到了440GBB左右。之所以需要一个资源机，是因为在我们的安装过程中，经常遇到了版本不统一和不一致所导致的无法安装成功，究其根源在于采用apt-get的方式

13、安装都是采用网上资源进行下载后的安装，地址是一样的，版本却改变了。OpenStack当时还相当的不成熟，源代码更新比较快，同样的安装地址，昨天还可以正确安装并安装成功，转过天来就会出现有些命令都执行不通的情况出现，Keystone（身份认证）和glance（镜像服务）的安装版本不一致就导致了我们很长一段时间对于Glance的命令执行不得不采用EC2工具绕过了Keystone。最终的解决是将版本统一后，将glance的安装步骤和Keystone的结合安装过程顺序进行倒置才成功的。在以上工作作完成的的基础上上，由我完成成了OppenSStacck的手手动安装装文档的的初版编写写，和一一个版本本的脚

14、本本自动安安装部署署由张贺贺军来完完成的，但但是对于于公司的的要求我我们还是是有很大大一段距距离的。比比如说，对对于不同同的开源源服务对对服务器器都有不不同的要要求，mmysqql数据据库服务务要求内内存和CCPU；Vollumee卷组存存储服务务要求硬硬盘多一一些，gglannce镜镜像服务务要求内内存更大大一些；控制节节点的要要求比较较一般，计计算节点点则对内内存要求求非常高高；raabbiitmqq消息队队列服务务要求网网络；nnetwworkk也需要要网络和和服务器器内存给给予很好好的支持持；还有有目前对对于neetwoork和和quaantuum服务务最好是是能够进进行服务务器的单单

15、独支持持；存储储服务方方面，代代理节点点的要求求一般，但但是存储储节点需需要有内内存和硬硬盘的支支持等等等。需要要考虑的的是服务务器成本本的降低低以及整整体服务务的优化化等方面面的原因因，将服服务安排排在指定定的服务务器，并并自动进进行修改改配置；其实，在在有了资资源服务务器的支支持以后后，脚本本安装和和人为的手手动安装装方面的的速度是是相差不不大的。从安装的正确性和准确性以及成功率上来讲，手动安装更加保质保量。我号召团队队成员多多关注QQQ群中中全国的的竞争对对手的情情况，竞竞争对手手的情况况要比我我们好很很多，无无论从实实验环境境方面还还是人员员构成方方面都令令我们羡羡慕不已已，为了了不落

16、后后于竞争争对手，我我要求在进进行以后后工作的的同时着着手将云云计算服服务底层层的一些些功能接接口进行行了梳理理，包括括统一身身份验证证服务（kkeysstonne）、镜像服务（glance）、云主机服务（nova）和存储服务（swift）等接口功能。这些接口功能也为后来的各项云计算服务产品项目的开发打下了良好的基础。OpenSStacck是用用pytthonn语言开开发的，在在官方上上有很好好的接口口服务文文档，通通过官方方接口文文档的描描述，我我们知道道OpeenSttackk是采用用的htttp协协议的RResttfull接口技技术实现现的，类类似于通通常所说说的WeebSeerviic

17、e接接口服务务技术。对对于接口口的调用用，研发发人员从从网上下下载了针针对于存存储服务务的两种种接口调调用源代代码，一一个是jjavaa的；另另一个CC#语言言的。通通过接口口对于现现有的功功能的理理解后，我我对云计计算服务务有了更更加深刻刻的理解解，主要要是云存存储和虚虚拟机两两个方面面；我认认为可以以建设一一个云服服务的网网站，可可以提供供类似于于网盘服服务以及及虚拟主主机的同同时，还还可以将将企业的的应用服服务做在在创建虚虚拟机的的镜像当当中，这这样就实实现了网网上的SSaaSS平台，并并通过邮邮件的方方式向陈陈岩光副副总提交交了我的的想法。由由于当时时公司想想要一个个比较绚绚丽的，所所

18、以.nnet的的sillverrligght可可以达到到要求。张张亚丽部部门就负负责了云云服务网网站的开开发工作作，我们们作为底底层对他他们提供供接口服服务，他他们最先先的工作作主要是是云存储储。我让开发人人员将接接口源码码进行了了梳理，为为了能够够更好的的给张亚亚丽部门门的于彪彪组提供供更好的的服务支支持，我我让王琳琳将C#接口的的源代码码进行有有效的整整理和分分割，我我让凌志志将swwiftt做了安安装部署署后，为为于彪组组提供关关于云存存储的技技术服务务支持。虽然沟通通方面我我们也经经常在见见面打招招呼的时时候询问问是否有有什么问问题，但但是接口口方面的的技术支支持也总总是断断断续续。为

19、了验证在在镜像中中放入大大的应用用服务，在在启动虚虚拟服务务器时可可以将作作在镜像像当中的的应用服服务进行行正常的的使用，我我们制作作了包含含国外SSAP应应用的服服务镜像像，该镜镜像的制制作过程程中也遇遇到了很很多的问问题和麻麻烦，首首先需要要将多个个光盘的的安装文文件进行行合并，这这个SAAP服务务的安装装文件一一共有2200多多个GBB，其中中安装文文件有四四个，主主要的安安装文件件就有2200多多个GBB，当时时在这个个地方就就存在着着一个问问题，就就是将四四个安装装文件进进行合并并，合并并成功以以后再上上传至服服务器中中。但是是我们的的合并没没有成功功，主要要原因是是安装文文件太大大

20、了，普普通的服服务器或或者台式式机在进进行合并并的过程程中需要要花费很很长的时时间，并并且经常常是等待待很长的的时间，不不知道计计算机是是否还在在进行着着合并过过程。在在我的直直觉和猜猜测的引引导下，我我决定不不进行安安装文件件的合并并，以2200多多GB的的主安装装文件来来进行应应用的服服务器安安装和镜镜像的制制作。镜镜像制作作成功后后，另外外一个问问题就是是由于实实验环境境服务器器性能的的影响，通通过镜像像服务gglannce上上传镜像像需要花花费很长长的时间间，而且且上传至至glaancee所在的的物理服服务器以以后，再再上传至至计算节节点物理理服务器器，又需需要镜像像的长时时间拷贝贝；

21、这个个在当时时OpeenSttackk的Diiabllo版本本中是无无法进行行镜像上上传进度度的提示示的，直直到我们们后来升升级为OOpennStaack的的Esssex版版本以后后才得以以解决。最最终我们们成功实实现了将将大的应应用服务务SAPP放置在在已经制制作完成成的镜像像文件中中，并成成功启动动该镜像像的虚拟拟机，由由于实验验环境服服务器的的影响，速速度非常常慢。在进行了目目前现有有功能和和参考网网上其他他云服务务产品功功能以后后，我筛筛选出了了我们还还没能够够实现的的功能，其其中包括括增开虚虚拟机外外网代理理、虚拟拟机实例例快照、虚虚拟机负负载均衡衡、虚拟拟机双机机热备、虚虚拟机实实

22、例迁移移、外部部接口调调用修改改虚拟机机主机名名称、虚虚拟机时时区不同同步、GGlannce于于Swiift服服务的整整合、虚虚拟机计计算节点点运行状状况监控控、虚拟拟机配额额限制服服务、多多控制节节点集群群、接口口控制虚虚拟机网网络带宽宽流量、提提高OppenSStacck数据据库的稳稳定性等等等功能能。这些些功能有有些成功功的实现现了，但但是也有有受制于于实验环环境、网网络环境境的限制制以及研研发团队队技术能能力方面面的影响响，我们们没有成成功。对于功能的的实现我我决定必必须本着着几个原原则入手手：1.在进行行功能性性实验前前必须写写好实现现方案，以以功能为为单位进进行方案案文档的的编写，

23、计计划好步步骤，并并按照步步骤一步步一步进进行实验验；2.不管成成功与否否，对于于出现的的问题以以及针对对问题进进行的解解释性记记录必须须落实在在实现方方案的文文档上；3.如果实实现方案案最终成成功，对对成功的的实验功功能进行行总结；如果不不成功，说说明不成成功并注注明不成成功的理理由或者者是怀疑疑理由；以备将将来进行行针对性性解决。为了能够从从根本上上解决底底层中出出现的大大量Buug和帮帮助我们们将来的的研发工工作，我我认为研研发团队队中的每每个人必必须对OOpennStaack大大体结构构框架有有非常准准确和清清晰的把把握，在在此基础础之上才才更加有有把握进进行源代代码的修修改和二二次开

24、发发整合。我我带着团团队中的的部分人人员进行行了文档档的翻译译性工作作，在翻翻译工作作的过程程中也是是我能够够确定的的了解到到官方文文档只是是表面上上的介绍绍或者接接口功能能的介绍绍，对底底层功能能的研发发意义虽虽然有但但是却并并不大，这这也是我我错误的的认识了了开源软软件这个个概念。正正在这个个关节上上，OppenSStacck的EEsseex版本本发布了了，官方方网站上很很多文档档进行了了更新，我我们有部部分的文文档的原原有依据据丢失了了，只能能凭借我我们版本本库中所所存储的的原有文文档进行行翻译性性的查看看。我们们通过对对官方网网站上的的资料查查看以及及网上搜搜索到的的信息资资料，发发现

25、新版版本的EEsseex改变变了原来来的Diiabllo版本本中的很很多不足足，也包包括我们们目前所所无法解解决的BBug，比比如镜像像服务gglannce上上传镜像像时的上上传百分分比的现现实；最最让人感感到抑郁郁的底层层的数据据库表结结构的改改变非常常的大，这这让我们们花费了了很多功功夫在DDiabblo版版本上的的功夫很很有可能能是白做做了。可可是，也也就是在在这个时时候，公公司的SSaaSS平台需需要上线线，我们们要负责责底层的的虚拟化化环境的的搭建，我我们需要要为SaaaS平平台网站站提供集集群式部部署的服服务器，统统计下来来SaaaS平台台需要330到440台不不同配置置的高性性能

26、虚拟拟服务器器来进行行支持。我我们也从从网络运运维部门门获得了了8台RR7100和1台台R8110，另另外我们们给了网网络部几几台R3310并并给了所所有的RR4100作为正正式生产产环境的的服务器器，提供供其他服服务的支支持。有几个问题题明显的的摆在我我的面前前，正式式生产环环境就要要上线了了，底层层服务的的Diaabloo版本还还有很多多Bugg和不稳稳定的因因素，在在此基础础上搭建建正式生生产环境境，很多多问题是是无法应应付的；将来在在此基础础上升级级风险性性是可想想而知的的，耽误误了服务务怎么办办？因为为一旦SSaaSS平台一一旦给公公司带来来盈利，赚赚钱的话话，每一一分钟、每每一秒钟

27、钟都是耽耽误不起起的；OOpennStaack的的Esssex新新版本已已经解决决了原有有的很多多Bugg问题，数数据库底底层也与与原来的的版本发发生了很很大的变变化；最最重要的特特点是EEsseex在网网络方面面提出了了新的服服务quuanttum；究竟采采用Diiabllo版本本还是EEsseex版本本，前者者对于将将来研发发的风险险性很大大，同时我们们很可能能会出现现研发方方向的迷迷失，而而对于后者者如果我我们成功功搭建完完成的话话不但可可以解决决老版本本残留的的问题，对对于将来来的工作作可以开开辟出大大片的空空间；最最终的结结论是DDiabblo版版本的风风险会发发生在将将来，而而Es

28、ssex版版本的风风险性就就在当时时，因为为我们还还没有成成功集群群式安装装。可是是，就当当时的情情况而言言，基于于低配置置实验环环境的安安装，不不可能；但是有有了正式式的生产产环境，明明摆着的的更好的的实验环环境，不不如拼一一把。我我把我的的想法告告诉了我我的团队队，在跟跟陈岩光光副总进进行沟通通以后，我我们在正正式生产产环境上上基于新新的Esssexx版本搭搭建了云云计算服服务平台台。后来来的事实实也证明明，我的的这个决决定是正正确的。云计算服务务底层核核心服务务的研发发方面，目目前具备备了大部部分的虚虚拟机的的功能，在在整个团团队的这这11个个月以来来，基本本上是两两个方面面的工作作内容

29、，一一个是对对基于云云计算服服务核心心底层的的上层产产品的接接口和技技术支持持、环境境的维护护；另一一个就是是云计算算服务的的核心研研发这两两个方面面的工作作；对于于基于研研发的文文档知识识积累，我我认为这这一点非非常的重重要，研研发工作作必须落落实在文文档上面面，尽管管绝大部部分研发发人员对对于文档档不够重重视，但但是当遇遇到问题题的时候候，原始始的文档档就提供供了必要要的帮助助。2.2云计计算服务务管理系系统云计算服务务管理系系统是最最早完成成的一个个系统项项目，当当时OppenSStacck对于于云计算算服务底底层拥有有一个软软件界面面可以操操控的系系统，名名称叫做做“dasshbooa

30、rdd”，后来来官方将将其改名名为“horrizoon”，“horrizoon”这个软软件系统统是用ppythhon语语言进行行开发的的，在安安装过程程中也是是需要进进行配置置文件的的配置修修改，基基于myysqll数据库库来进行行存储业业务数据据，其他他就是调调用OppenSStacck的相相应接口口，来实实现给用用户进行行云计算算服务的的界面操操作。对于“hoorizzon”这个被被OpeenSttackk囊括在在其内的的云计算算服务操操作系统统来说，它它有几个个不好的的地方：1.完完全基于于OpeenSttackk云计算算服务的的底层功功能接口口和进行行模块的的划分，如如果不了了解Opp

31、enSStacck的原原理的话话，是无无法理解解并使用用和操作作的；22.缺乏乏人性话话，也就就是在客客户体验验性方面面做的还还差一些些，页面面显示也也不是很很美观，比比如：它它没有分分页的操操作，更更不要说说对于模模糊的查查询操作作了。基基于这些些特点，我我编写了了适合我我们进行行操作的的云计算算服务操操作系统统的需求求并进行行了业务务方面的的设计。为什么要提提出这个个系统项项目，我我主要是是基于以以下几个个方面的的原因：1.对于云云计算服服务底层层，我们们需要有有自己的的操作系系统软件件，这个个毫无疑疑问是必必须的；2.对于我我们已经经实现的的接口服服务，没没完没了了的通过过命令行行进行加

32、加以验证证相当麻麻烦。另另外，该该系统也也是我们们接口功功能逐渐渐实现和和确认的的一个终终点，可可以完全全体现我我们的工工作，我我们实现现的功能能，还有有我们的的价值；3.这个操操作系统统目前可可以给我我们自己己进行使使用，随随着逐渐渐的优化化和改良良，将来来早晚会会成为公公司的产产品，我我们的工工作是有有用功，将将来不会会白做；4.该操作作系统服服务当中中包含着着我们已已经实现现的接口口调用，可可以把它它比作一一个活字字典，对对于接口口源代码码的调用用可以准准确的找找到位置置并进行行复制和和粘贴，为为将来其其他产品品项目的的开发打下下良好的的基础。从从后来的的各个系系统项目目服务来来说已经经

33、印证了了这一点点；这也也是我们们为什么么后来系系统项目目得以快快速开发发的主要要原因。当然，在该该系统项项目的开开发过程程中，也也遇到了了很多的的问题，比比如对于于一些业业务数据据，我们们采取的的是没有有调用OOpennStaack所所提供的的接口服服务，而而是通过过对OppenSStacck底层层中各个个服务所所涉及到到的数据据库及数数据库表表结构之之间的逻逻辑关系系进行关关联性方方面的数数据检索索，当然然这必须须建立在在我们对对OpeenSttackk数据库库表结构构相当了了解的基基础上。另另外，有有很多接接口在OOpennStaack服服务当中中并没有有提供，必必须通过过调用命命令行执执

34、行才能能够做到到，这个个对于系系统项目目的响应应速度来来讲的确确是慢了了很多，但但是能够够达到我我们现阶阶段的目目的。在在云服务务器资源源和云存存储资源源的监控控显示方方面，我我们也有有很大的的问题，比比如云存存储，我我们没有有办法通通过接口口获得剩剩余的存存储资源源、已使使用的资资源，我我们就不不得不通通过人为为设定系系统总的的存储资资源，通通过命令令行调用用获得存存储已经经占用的的资源，剩剩余的则则就是未未使用的的存储资资源等等等。对于统一身身份验证证（Keeysttonee）来讲讲，在DDiabblo版版本中它它是有超超级管理理员用户户的，它它可以管管理所有有的租户户和租户户下的用用户，

35、但但是对于于后来的的Esssex版版本来讲讲是没有有超级管管理员用用户的。对对于这一一点，OOpennStaack的的“horrizoon”服务当当中也是是以一个个租户为为单位进进行登录录并进行行服务的的。从这这一个角角度来讲讲，我认认为OppenSStacck服务务还是面面向于大大批量集集群式公公有云服服务的，因因为“公有云云”往往给给我在概概念上的的理解就就是“资源无无上限”。目前该系统统项目的的项目名名称我给给他取名名字叫做做“pubbecmm”。这个个系统项项目目前前的缺陷陷是浏览览器兼容容方面还还有一些些问题，功功能上很很多还没没有来得得及增加加；由于于当时最最初的目目的是给给我们自

36、自己使用用的，所所以页面面风格沿沿用了220111年公司司联查时时的系统统项目的的玻璃质质感风格格。但是是，在随随后的企企业私有有云实体体机柜的的操作系系统诞生生后，企企业私有有云实体体机柜的的操作系系统囊扩扩了puubeccm的所所有功能能，而且且在页面面风格和和美化以以及客户户体验等等方面都都完全超超过了ppubeecm，我我现在一一直考虑虑以企业业私有云云操作系系统取代代该系统统项目。因因为企业业私有云云实体机机柜的操操作系统统是从ppubeecm中中升级出出来的，它它青出于于蓝而胜胜于蓝一一点都不不为过。2.3云计计算服务务监控系系统云计算服务务监控系系统是在在后期为为了能够够更好的的

37、监控公公司SaaaS平平台正式式生产环环境而做做的一个个系统监监控项目目。这个个项目的的需求和和业务设设计都是是由我一一个人来来完成的的。它主主要包括括这么几几个方面面的内容容：整体体概况、CCPU使使用情况况、内存存使用情情况、磁磁盘使用用情况和和存储资资源使用用情况这这五个方方面对服服务器资资源进行行监控。在这个系统统项目开开发的过过程中，遇遇到的最最大的问问题就是是资源的的上限一一直都没没有一个个统一和和准确的的数据，在在报警线线数据方方面我们们也仍然然没有一一个准确确的数字字。关于于资源上上限也就就是指整整个服务务的计算算节点一一共有多多少核CCPU，而而这些CCPU能能够虚拟拟出多少

38、少核的CCPU，这这些虚拟拟出的CCPU最最大数量量就是它它的上限限数量，而而真正使使用了多多少以后后，它的的服务性性能会降降低或者者说有很很大的影影响；这这一点上上我们一一直没有有得到很很好的解解决。我我对研发发人员提提出的要要求是把把OpeenSttackk底层的的算法搞搞清楚，通通过它的的算法和和我们实实际的参参数我们们得到它它的上限限数据；这个算算法虽然然是被研研发人员员掏出来来了，但但是对于于具体的的数据一一直没有有一个准准确的答答案。最最后没办办法，我我们通过过正式生生产环境境实际的的数据库库中的数数据得到到准确的的答案。在在正式生生产环境境中，有有其中一一个生产产虚拟机机服务器器

39、的计算算节点，它它内部所所生产的的虚拟机机的CPPU总和和是它实实际CPPU核数数的3倍倍，运行行状况没没有任何何的问题题。3倍倍的这个个数据对对于我来来讲，已已经相当当的奢侈侈了，所所以我就就将3倍倍这个数数据定为为CPUU的最大大上限数数量；对对于内存存来讲，OOpennStaack的的官方给给的参数一一直都是是1.55倍，也也就是说说生产虚虚拟机服服务器的的计算节节点物理理机内存存的1.5倍是是它能够够虚拟出出的内存存的最大大数量，因因此我保保守的将将1.55倍作为为了内存存最大上上限的倍倍数参数数。对于于磁盘空空间而言言，它是是不需要要虚拟化化的，剩剩余多少少就是多多少。这这样我们们解

40、决了了监控系系统对于于数据的的监控问问题。2.4弹性性计算应应用弹性计算应应用系统统是为了了能够给给SaaaS平台台添加应应用而做做的一个个小型的的创建虚虚拟机服服务器、给给企业用用户分配配虚拟机机服务器器和销毁毁虚拟机机服务器器的一个个小型的的应用。该该应用的的需求设设计和业业务设计计也是由由我来完完成的。该弹性计算算应用，就就功能上上来讲该该项目并并不大，但但是说到到它当时时的风险险性也是是与SaaaS平平台底层层的ESSSEXX版本搭搭建是绑绑定在一一起的，这这个应用用于SaaaS平平台上的的其他应应用相比比，它很很特殊，它它的特殊殊性就在在于它完完全调用用底层的的接口创创建虚拟拟机，而

41、而这些虚虚拟机是是与支持持SaaaS平台台的虚拟拟机以及及各个应应用所占占用的虚虚拟机服服务器是是平级的的。因此此首先为为了能够够把握和和控制住住底层资资源的限限制使用用而不影影响SaaaS平平台的其其他应用用，我们们必须开开发一个个弹性计计算应用用的后台台管理系系统，这这个系统统的目的的是将底底层的虚虚拟机服服务器规规格（CCPU核核数、内内存大小小、磁盘盘空间）同同步到弹弹性计算算应用的的业务数数据库中中，通过过管理员员的筛选选过滤掉掉大的规规格，使使注册和和登录SSaaSS平台的的用户只只能够创创建和使使用低配配置的虚虚拟机服服务器。在进行该应应用的开开发时，首首先必须须开发除除了底层层

42、调用的的其他部部分，因因为底层层环境还还处在搭搭建过程程当中。最最大的问问题是当当时我们们还是IIaaSS组，组组内没有有专门的的美工，美美工需要要从于彪彪组进行行借用，当当时于彪彪组负责责美工的的是郜帅帅；但是是郜帅还还负责于于彪组的的美工以以及手机机云存储储的页面面设计工工作，对对于弹性性计算应应用的页页面美化化方面肯肯定是精精力投入入的不会会很多，但但是开发发任务也也非常急急。为了了能够达达到页面面美化方方面的要要求，我我组织组组内的开开发人员员周六都都干起了了美化的的工作，他他们都很很尽力，但但是他们们毕竟不不是美工工专业人人员，所所以页面面没有能能够达到到我的要要求，作作为管理理人员

43、来来讲我是是说不出出什么来来的。最终是由张张云俪所所管理的的美工组组后来又又重新给给改良的的。2.5云计计算服务务计费系系统云计算服务务计费系系统是公公司陈岩岩光副总总提出的的一个项项目，该该项目的的主要目目的是支支持云服服务网站站的，对对云服务务网站上上的产品品进行定定价服务务的。由由于我之之前有过过关于计计费系统统项目方方面的经经验，我我针对于于该系统统项目进进行了针针对于客客户和业业务统计计方面的的扩展，因因为产品品的价格格是与供供求关系系以及产产品的成成本密不不可分的的。对于于客户对对产品的的购买服服务，我我们需要要对于客客户有所所了解和和理解。比比如，客客户的不不同年龄龄段、不不同的

44、地地域、企企业还是是个人等等等对于于产品的的需求是是不同的的，云服服务网站站作为公公司云计计算服务务对外的的窗口而而言，对对客户的的分析以以及对产产品购买买情况的的分析还还有客户户所关注注的产品品等等都都需要进进行统计计，从统统计分析析中获得得我们想想要的结结论。随后在与陈陈岩光副副总的坚坚持下，将将该计费费系统进进行了拆拆分，原原计费系系统被修修改为只只是对云云服务产产品的类类型和价价格进行行制订；而对于于用户的的统计和和分析以以及用户户注册参参数的制制订等被被拆分并并独立成成为用户户中心系系统。这个系统的的开发不不涉及底底层云计计算的核核心支持持服务，唯唯一需要要关联的的就是需需要将云云计

45、算服服务底层层的镜像像（操作作系统,winndowws XXP、uubunntu等等）和虚虚拟机规规格（CCPU核核数、内内存大小小和硬盘盘空间）同同步到计计费系统统的业务务数据库库当中来来，并进进行定价价，以供供云服务务网站获获取这些些价格数数据后，通通过接口口调用创创建相应应的虚拟拟机。在页面美化化风格方方面，由由于是公公司内部部自己使使用，所所以对于于页面风风格仍然然沿用了了20111年公公司联查查时统一一的玻璃璃质感风风格。2.6云计计算服务务用户中中心系统统云计算服务务用户中中心系统统是从计计费系统统当中拆拆分出来来的一个个系统项项目，该该项目的的主要功功能是面面向于云云服务网网站的

46、用用户。该该项目的的需求分分析和设设计也是是由我来来完成的的。该系统首先先是通过过参数管管理模块块对云服服务网站站注册用用户所需需要注册册的参数数进行管管理，比比如所属属国家、所所属省市市、所在在行业、所所从事职职业以及及用户需需要反馈馈的问题题类型及及问题等等等。再有就是对对于客户户的充值值、使用用和剩余余金额以以及用户户对于不不同产品品的购买买清单等等等，系系统中还还包括用用户的统统计功能能，比如如年龄、性性别、针针对于不不同产品品的不同同购买人人群的统统计等。该系统项目目并不涉涉及云计计算服务务底层的的接口调调用，是是普通的的Webb项目。由于是给公司自己内部使用的，所以在页面风格上仍然

47、沿用的2011年公司联查时的玻璃质感风格。2.7云服服务网站站云服务网站站是在SSaaSS平台结结束以后后，由于于彪组转转接给我我们的。这这个项目目最初于于彪组采采用的是是.neet技术术进行的的研发。由由于我们们在外围围产品方方面主要要采用的的是以jjavaa语言进进行的开开发，所所以无论论从需求求分析设设计、页页面设计计还有底底层代码码实现上上，我们们可以说说是推倒倒重来的的。该网站的主主要起的的作用是是对公司司云计算算服务的的技术力力量以及及公司现现有的云云计算服服务产品品对外进进行展示示的窗口口。网站在云计计算服务务的技术术力量方方面展示示上提供供云主机机、云存存储和云云硬盘三三个云计

48、计算服务务技术力力量的展展示；在在产品方方面有企业私私有云实实体机柜柜实体产产品和企企业私有有云方案案两种供网网上用户户下订单单的方式式进行推推广销售售。网站内为用用户提供供了用户户中心和和控制台台这两个个模块对对注册登登录用户户提供云云计算的的应用服服务。由云计算服服务计费费系统、用用户中心心系统和和网站内内容管理理系统对对该网站站提供信信息数据据支持服服务。2.8云服服务网站站内容管管理系统统 云云服务网网站的内内容管理理系统是是对云服服务网站站的内容容展示信信息的后后台管理理系统，该该系统的的主要内内容包括括产品服服务动态态管理、市市场活动动管理、客客户案例例管理以以及合作作伙伴管管理等

49、功功能模块块。该系系统的业业务需求求前期是是由我来来完成，后期由李李立召完完成对需需求文档档的编写写，并完完成开发发工作。2.9企业业私有云云实体机机柜操作作系统企业私有云云实体机机柜是企企业私有有云实体体机柜内内的云计计算服务务软件产产品之一一，该系系统主要要面向于于购买企企业私有有云实体体机柜产产品的企企业网络络管理人人员，由由管理人人员登入入系统，进进行虚拟拟服务器器的创建建、快照照备份、分分配/释释放IPP、升级级、暂停停、运行行、销毁毁等操作作。该系统项目目的需求求分析和和业务设设计是由由我来完完成的。该系统项目目是一个个产品软软件，从从页面风风格、客客户体验验还有功功能的使使用等方

50、方面都做做到了全全面的细细化。 在在该产品品的开发发过程当当中，也也是由于于云计算算服务底底层核心心的影响响造成了了功能不不稳定的的情况，比比如有的的时候迁迁移成功功，有的的时候迁迁移不成成功，有有的时候候升级成成功而有有的时候候升级不不成功。由由于采用用的是33台R3310的的2GBB内存的的低配置置，创建建的虚拟拟机只可可以是5512MMB内存存的小型型镜像；所以有有些buug不得得不怀疑疑是由于于底层服服务器性性能方面面的影响响，造成成功能的的不稳定定。后来来从网络络部借用用了2台台R7110高配配置的服服务器一一周多的的时间，问问题才加加以解决决。2.10企企业私有有云实体体机柜监监控

51、系统统企业私有云云实体机机柜监控控系统，也是企业私有云实体机柜内的软件产品之一。该系统的主要功能是对企业私有云实体机柜的物理资源机以及生产虚拟机的物理服务器资源的监控。该系统的需求分析、业务逻辑设计是由我来完成的。该系统产品品项目的的主要功功能包括括整体使使用情况况、服务务器情况况、CPPU使用用情况、内内存使用用情况、磁磁盘空间间情况、外外网IPP数量监监控、虚虚拟机报报警和资资源及报报警等几几个数据据监控模模块。面向于企业业的数据据中心管管理人员员，能够够直观的的查看企企业私有有云实体体机柜的的使用情情况。3.团队建建设在团队建设设方面，我我将虚拟拟化基础础架构业业务部从从最初的的“Iaa

52、aS”组到现现在一共共分为初初期、中中期和后后期三个个阶段，初期阶段是从2011年11月份到年后在C6办公到搬到B8楼的202之前；中期阶段是我们在B8楼的202室的工作期间；后期阶段是我们从B8楼的202室再次搬回到C6。在这三个阶段过程中，对于团队的建设也曾经遇到了很多的困难和问题，毕竟从管理角度来讲，团队中的人员变动，哪怕只增加一个成员都会经过形成期、震荡期、表现期和正规期四个阶段。在团队建设设方面我我可以说说投入了了大量的的精力，虚虚拟化基基础架构构业务部部的团队队成员大大多数的的能力都都非常强强，同时时个性也也非常强强，尤其其对于一一直高新新技术的的团队，管管理的难难度和强强度是非非

53、常大的的。从了了解他们们到理解解他们，平平稳他们们的工作作情绪，改改善他们们的工作作心态，提提高他们们的工作作效率和和工作质质量是非非常费神神的一项项工作。3.1初期期团队人员统统计表序号现有人员加入离开1王毅2王凌志3王琳4张瑞祥5张志楠6张贺军7张志涛8李健总计8人在团队建设设的初期期，我的的团队中中包括我我在内一一共只有有四个成成员，他他们是我我、王凌凌志、王王琳和张张瑞祥。从从每个人人的性格格特点来来讲，王王凌志是是一个非非常有灵灵气的人人，聪明明、能干干有想法法、胆子子大，认认准的事事情即使使是错误误的也敢敢作，如如果做的的事情方方向正确确，是非非常得力力的一个个好帮手手；但是是缺点

54、是是，对待待事情缺缺乏成熟熟的思考考，这往往往也是是我为什什么需要要重点关关注他的的原因；王琳是是一个JJavaa开发人人员，只只对开发发感兴趣趣，对云云计算可可以说兴兴趣不大大，他的的技术能能力我非非常认可可，开发发速度非非常快，对对于有疑疑问和不不同的见见解敢于于大胆提提出来，但但是缺点点和不足足是，往往往在某某些开发发过程当当中采用用了我个个人认为为不合理理的设计计模式；文档的的编写能能力上差差一些，有有待培养养。张瑞瑞祥的优优点是测测试方面面的技术术、只是是经验丰丰富，缺缺点是非非常爱玩玩游戏，但但是对于于我的提提醒和忠忠告他还还是能够够听进去去的，在在给分配配安排工工作后，还还是可以

55、以做到扔扔下游戏戏主动工工作的，但但是工作作完成的的质量方方面也许许个人能能力的影影响不是是非常的的好。由于工作的的需要，从从张亚丽丽组调配配来了张张志楠和和张贺军军，张志志楠是一一个非常常钻研技技术的人人，工作作起来有有一股轴轴劲，认认准的事事情八匹匹马都拉拉不回来来，但是是在我后后来的教教导和指指引下，已已经改变变了很多多，在做做事情的的正确逻逻辑思维维方向上上有很大大的进步步。张贺贺军为人人性格胆小小，但是做事事情非常常踏实和和实在，在在某些技技术关键键点上能能够提出出合理的的建议，并并有让我我出乎意意料的正正确的想想法；但但是他们们两个人人都有一一个最大大的缺点点就是不不善于表表达，从

56、从这一点点来说，这这个缺点点是非常常致命的的，肯定定会影响响到他们们将来的的职业发发展。我我往往在在开会或或者指定定工作方方案的时时候尽量量给他们们说话的的机会，让让他们可可以尽情情的表达达出他们们的想法法，锻炼炼他们的的表达思思维；虽虽然进展展缓慢，但但是效果果比之前前已经好好很多了了。之后李健和和张志涛涛加入了了我们的的团队，李李健是陈陈岩光副副总从其其他的云云计算服服务公司司挖过来来的，在在虚拟化化云计算算方面有有过一到到两年的的工作经经验，对对于虚拟拟化方面面以及虚虚拟化的的底层比比我们熟熟悉很多多，他的的学习能能力非常常强，从从工作状状态中可可以看的的出对云云计算技技术还是是非常有有

57、热情的的，缺点点也是在在沟通上上，他的的沟通不不像是贺贺军那样样的先天天的缺陷陷，而是是过于保保守。张张志涛是是我们部部门当时时急于需需要的一一个网络络、服务务器硬件件方面的的工程师师，他往往往给人人的感觉觉是让人人放心，喜喜欢微笑笑，乐乐乐呵呵的的，就是是这样一一个表现现让我对对他的人人和工作作方面的的管理大大意了。这这个人在在工作态态度上还还是很认认真的，但但是缺乏乏社会工工作经验验以及人人际关系系间的应应对，对对于公司司的管理理制度难难以适应应，以及及在团队队当中的的自傲性性格使得得他后来来离开了了公司，从从对他的的了解和和关注方方面来讲讲，我需需要负有有一定的的责任。随着初期团团队的雏

58、雏形逐渐渐成形，慢慢慢的团团队会进进入到形形成期，为为了能够够加深彼彼此的了了解，我我请了团团队所有有成员去去“万家灯灯火”的一个个餐馆吃吃了一顿顿饭，大大家在一一起欢声声笑语，大大吃大喝喝。我心心里也非非常高兴兴，但是是心里的的压力也也大，将将来他们们就是公公司云计计算的中中坚力量量和核心心成员，他他们能做做到吗。在在饭桌上上大家畅畅所欲言言，我也也说了我我对将来来的一些些想法，希希望大家家能够团团结；工工作方面面多沟通通多互相相帮助。我也试图跟他们每个人进行聊天和对话，了解他们的个人想法。3.2中期期团队人员统统计表序号现有人员加入离开1王毅2王凌志3王琳4张瑞祥5张志楠6张贺军7张志涛8

59、李健9蓝文静10张磊11李立召12霍世彬13程乐总计10人中期主要是是指我们们由C66搬到BB8的这这段时间间，也就就是在BB8的2202工工作的这这段时间间，在搬搬过去以以后，我我的团队队增加了了蓝文静静、张磊磊、李立立召、霍霍世斌以以及实习习生程乐乐这些人人员。蓝文静这个个女孩就就像她的的名字所所描述的的那样，是是一个文文静的女女孩，是是做测试试的，为为了弥补补张瑞祥祥在测试试过程当当中的疏疏漏，有有文静来来进行弥弥补我也也是非常常放心的的。文静静为人踏踏实，在在文档的的整理以以及翻译译的工作作过程中中是非常常稳重的的；张磊磊是新招招的开发发人员，比比较偏爱爱于UII。基本本的工作作技能偏

60、偏向于页页面表现现层方面面，但是是不好的的是业务务逻辑方方面差一一些，反反应上稍稍显迟钝钝。这个个需要慢慢慢的进进行培养养。李立立召的技技术扎实实全面，工工作态度度认真，踏踏实稳重重，唯一一不好的的地方是是思维视视野方面面还不够够开阔，这这方面需需要我给给他机会会来进行行足够的的锻炼。霍霍世彬性性格上来来讲是一一个可爱爱的小伙伙子，更更刚来时时从杨颖颖那反馈馈来的“二”来形容容根本就就是冤枉枉了他。网络方面的技术比较全面，不足之处在于书本上的东西了解比较多，但是实践上还是少了些。程乐是一个在校的大学生，没有工作经验，是来公司进行实习的。性格比较孤僻，技术上基本的理论知识都是具备的，但是不足的是

61、社会经验少，他给人的感觉是依赖性比较强但是又不想去依赖别人，后来的事实也证明了这一点。在团队建设设的中期期发展阶阶段里，我我大部分分的精力力都花在在了工作作进展和和项目的的管理与与设计过过程当中中，但是是越是这这样，往往往团队队当中发发生的事事情就越越多，当当然也有有我所察察觉到的的和没有有察觉到到的。首先，蓝文文静提出出了辞职职，并离离开了公公司。最最初对于于蓝文静静的定位位还只是是一个测测试人员员，但是是由于部部分的测测试工作作已经完完成的时时候，为为了避免免人力资资源的浪浪费，我我开始让让她更多多的接触触一些云云计算服服务官方方文档的的资料整整理，在在这方面面的工作作我是这这样理解解的，

62、虽虽然我们们是以OOpennStaack为为切入点点，以它它为切入入点向外外进一步步展开对对云计算算的研发发，但是是从根上上来讲还还是要从从OpeenSttackk的官方方文档入入口，并并整理和和梳理出出我们自自己对它它的理解解和认识识，目前前的人员员状况还还不能够够完全有有把握查查看OppenSStacck的源源代码并并基于源源代码进进行修改改以达到到我的要要求，再再者随着着人员的的不断加加入和扩扩大，我我们也需需要拥有有自己的的培训资资料，也也就是说说不管是是谁、应应聘的什什么职位位，只要要进入IIaaSS组，就就必须对对我们的的云计算算工作范范围和工工作内容容有所了了解，以以达到工工作上

63、的的沟通顺顺畅，工工作能够够保证拥拥有统一一的步伐伐和步调调。公司司不允许许进行组组内的知知识性培培训，按按照公司司的理解解，上班班来不是是上学来来的这一一原则，我我让文静静在整理理文档并并进行翻翻译的同同时，整整理了一一套pyythoon语言言的培训训教程，通通过定期期的将文文静整理理的资料料跟大家家共同探探讨的同同时，顺顺便将ppythhon语语言进行行了短暂暂的培训训。这也也为后来来组内的的研发团团队进一一步深入入OpeenSttackk的研究究和修改改功能代代码打下下了一个个良好的的开端。最最终，文文静还是是由于个个人原因因，因为为她要结结婚，所所以必须须到塘沽沽去追随随他的丈丈夫，而

64、而离开了了公司。张瑞祥是由由于公司司部门内内部调整整，因为为公司的的部门内内部成立立了测试试组，所所以他离离开我们们的团队队，但是是他所工工作的测测试范围围仍然是是以我们们组的软软件产品品项目为为主，所所以我们们还是有有工作交交集的。对对于他爱爱玩游戏戏这一缺缺点，我我私下里里也跟他他单独谈谈论过多多次，我我站在他他个人的的角度出出发，提提出要为为自己的的将来着着想，游游戏给他他带来不不了什么么，对他他起不到到任何作作用和好好处；我我的这些些良苦用用心希望望他将来来能够体体会的到到。张志涛的离离开有他他自己的的原因，也也有部分分我的责责任，我我之前已已经说明明过了。在在B8楼楼2022的工作作工程中中，除了了对底层层服务研研发、维维护和对对上层软软件产品品项目开开发的设设计及管管理方面面的工作作外。筛筛选待面面试人员员的工作作简历并并进行面面试也成成为了我我日常工工作过程程中不可可缺少的的一部分分，当然然也是团团队建设设过程中中所必须须的。工工作也经经常被打打断，简简历也经经常会收收到很多多份，并并从中筛筛选出我我需要的的人员。立立召和张张磊都是是这一时时期吸纳纳进来的的开发人人员。对于研发团团队的管管理上，王