近日，在技术圈里广受欢迎的又拍云Tech Minds 第五期首次进入杭州。在西湖边上，又拍云、哔哩哔哩(B站)、盛大游戏、二更、19楼、小影、KK唱响、奥点云、边锋、蓝鲨TV、顺网、巨人星云、漫画岛等互联网企业的技术高管，饮茶赏景，就“高效运维路在何方”的主题展开了热烈的讨论。
B站运维破局之旅
无论做什么运维，最基本的职责都是保证业务能够稳定运行。以视频弹幕、UP主闻名的B站深受90后、00后的追捧，受众甚至开始从二次元人群拓展到三次元人群。随着在B站上追番、看弹幕的用户增多，特别在新番上线时访问压力的增大，给B站运维团队带来了巨大的挑战。
B站运维总监胡凯在Tech Minds 第五期上分享了B站运维团队的血泪成长史。胡凯具有丰富的运维经验，曾是猎豹移动的运维负责人，胡凯加入B站后面临着运维团队人手不足、故障多和运维系统跟不上这三个痛点。针对三个痛点和B站技术人员热爱开源、敢于尝试新技术的特性，胡凯采用的三种破冰方法，即解放劳动力、部署“一棒子监控”告警系统，同时大量引入开源系统。
“由于人手不足，所以事情得挑着做，把劳动力从繁杂的日常运维工作中释放出来。”胡凯介绍了B站的运维情况。B站自建CDN，视频存储已达到N个PB，运维压力非常大，“IT系统的权限一开始在开发手上，出问题了以后运维总得跟在开发后面查原因，不仅效率低，沟通也容易出问题。”胡凯采用Ansible + Jenkins搞定自动发布后，将运维团队从繁琐的重复劳动中解放出来，开发的服务器需求占比明显下降。
胡凯在众多需求中，先抓入口、大的需求。胡凯刚加入B站时，原始的监控不能满足快速增长的业务，要把监控细化，又不是一两天的事情。由于B站几乎所有的请求都要经过CDN，胡凯选择在入口处做监控，把5xx 的错误提示都打到ELK，“无论是什么业务出问题了都会及时告警，让相关人员来处理，后续再细化。”
胡凯发现 手表的外观往往与价格和档次有关。正式场合佩戴的手表，外形要庄重保守，避免太过怪异新潮，尤其是德高望重的人或者长辈，应该多加注意。新颖别致的手表只适合女孩和儿童。一般来说，圆形手表、椭圆形手表、方形手表、矩形手表和钻石手表因其庄重保守的形状和广泛的应用范围，特别适合正式场合。像珠宝一样，人们在社交场合佩戴的手表也能从侧面反映了他们的身份地位和财富。因此，人们佩戴的手表，尤其是男性佩戴的手表，在人际交往中有着不同的含义。B站的运维系统跟不上业务的发展，加上B站的技术人员非常喜欢尝试新技术、开源项目，胡凯顺势而为，选择了先用开源项目解决目前的需求。B站使用过大量的开源组件，包括SheepDog和GlusterFS，其中最大的坑是 SD卡 + Ceph存储，“SD卡跪了导致系统也跪了，唯一的安慰是没有丢数据”，此外，Redis3.0、Codis、Twemproxy等开源系统也在B站得到了使用。由于Redis只吃单核， Codis现在没更新，Twemproxy的性能比较差，B站最后研发了 BiliTW(已开源)，不仅支持多核，还增加了一些易于运维的功能。
运维老司机的DevOps八荣八耻
互联网运维是一个融合网络、系统、开发、安全、应用架构、存储等多学科的综合性技术岗位，运维工作的特殊性也对运维工程师的软素质提出了高要求。从计算机老师、网管到售前技术支持、产品经理，再到出任又拍云运维总监，10余年浸淫于互联网运维之道，使得邵海杨对于运维的探索得心应手。
在本期Tech Minds上，邵海杨总结并分享了DevOps的八荣八耻、Herku PaaS的12要素宣言和OpenStack IaaS的设计指导思想。
在谈到运维与开发问题时，邵海杨提到，不管是运维还是开发部门做主导，关键是要分清是否为人为事故。“当年，又拍云服务器一年内翻了3倍，节点数量翻了6倍，全靠自动化工具，不然完全应付不过来。”邵海杨分享道，“我们用一个U盘就完成了硬件监测、系统安装、远程管理等一系列工作，供应商的机器直接从生产线送到机房，都不需要送到公司。”
DevOps的八荣八耻
以可配置为荣，以硬编码为耻
以互备为荣，以单点为耻
以随时重启为荣，以不能迁移为耻
以整体交付为荣，以部分交付为耻
以无状态为荣，以有状态为耻
以标准化为荣，以特殊化为耻
以自动化工具为荣，以手动+人肉为耻
以无人值守为荣，以人工介入为耻
关于Tech Minds：
Tech Minds是又拍云主办的高端技术领导人私享会，已先后在深圳、广州、北京、上海成功举办，凭借私密的分享环境、高质量的对话嘉宾、前沿的行业和技术话题，又拍云Tech Minds已经成为技术圈子中非常受欢迎的“思想汇”活动。
关于又拍云
杭州又拍云科技有限公司(简称“又拍云”)，成立于 2010 年，致力于为客户提供一站式的云加速服务，有效帮助用户加速从产品想法到产品上线速度，实现快速上云，让创业变得更简单。
核心业务：以场景化CDN为核心业务
产品：云分发、融合云存储、云处理、云安全、流量营销
行业解决方案：提供直播云、点播云、电商、游戏、移动App等场景化CDN解决方案
作为中国专业的云计算服务商，又拍云凭借多年的专业技术优势，在全球范围持续打造场景化CDN，现已拥有 6 大数据中心，150 多个自建 CDN 节点，4000 多台服务器，1.5TB+保有带宽资源，日均请求超过 500 亿次，并吸引了超过 15 万付费用户的使用, 为客户持续提供稳定、可靠、安全的云服务体验。
制造镂通表，要有很高超的技术，由于要暴露“本钱”，所有有些透视表还对零件和夹板上精雕细琢，例如刻花加蓝，锉成龙凤呈祥或祥云朵朵，因而具有很高的工艺价值。电波表卡西欧电波表内置高感度小型天线，接收标准电波进行自动对时，因而可以实现时间上/的精准。目前在国际上，德国、英国、美国、日本都已经有标准电波的发送。2007 年7 月，在中国河南商丘建 成的新电波塔已经开始发送电波。电波表将是继石英表取代机械表成为钟表市场主流之后又一钟表业的革命性技术产品。我们深信电波表必将成为未来中国钟表市场的主流。
原创文章，作者：leping，如若转载，请注明出处：https://www.zhjiashun.com/zjsb-169760.html
