随着业务规模不断扩大,很多系统都走向了分布式和平台化。不少系统采用了容器技术,开... 展开 >
臧秀涛,现就职于InfoQ,任QCon大会主编,负责QCon大会的策划和组织。2010年毕业于中国科学院计算技术研究所。曾先后在完美世界等公司从事软件开发工作。2014年加入InfoQ。业余喜爱读书和翻译,曾翻译出版过《C++ API设计》、《Groovy程序设计》和《Java性能权威指南》等技术图书。业余也维护了一个微信公众号“开发资讯(dev-news)”,欢迎关注。
对QCon大会有任何建议或想法,欢迎通过微博 @臧秀涛 与我联系。
随着业务规模不断扩大,很多系统都走向了分布式和平台化。不少系统采用了容器技术,开始转向微服务架构。本专题将关注与此有关的架构改造和基础设施建设问题,具体将涉及Istio、数据库的容器化和自研系统改造等话题。
百度运维大数据平台的实时计算和存储系统(ODW),是百度智能运维团队自研的一套分布式数据处理系统。
作为百度监控系统的底层,它承载了万亿级监控数据的汇聚计算和存储查询需求,保障了百度所有核心业务能够及时准确地感知故障并完成故障处置,是保障百度业务高可靠的重要环节。
面对这样一个日均处理万亿级别数据,包含数十个模块和数百个节点的服务。它的可用性保障,包含SLI制定、容量建设、故障感知、自愈等问题,都是我们面对的重大挑战。
本次分享将详细解析我们在ODW系统架构及高可用建设方面所做的工作。
随着视频行业的版权大战,专辑等长视频分化严重,能够检索到全部站点全部专辑内容的搜索引擎越发重要和满足用户的需求。同时feed流业务的愈发火爆,高质量的短视频内容(专业制作或者用户拍摄)的发现和挖掘愈发重要。
本次分享主要包括爱奇艺全网搜索在视频行业这两大问题中的一些实践。
随着公募基金体量的逐年上涨,好买系统规模变得越来越大,原本将所有的业务单元集中部署在一个或若干个大型机上的体系结构,已经越来越无法满足业务需求,更是随着腾讯理财通接入后的快速发展,我们经历了分布式与平台化的架构调整和多次重要升级的变革。
本次分享将从讲述了好买财富的第三方基金交易系统在演变过程中所遇到的问题与挑战,并包括全金融理财产品业务背景下对系统复杂度带来的关系。
大规模实践基于Docker的MySQL私有云平台。集成高可用、快速部署、自动化备份、性能监控、故障分析、过载保护、扩容缩容等多项自动化运维功能。数据库高可用是不容忽视的,在Docker容器分配时如何保障主从不在同一宿主机上呢?我们通过自研Docker容器调度平台,自定义Docker容器的分配算法。实现了MySQL的高密度、隔离化、高可用化部署。同时结合我们自研的数据库中间件,支持了分片集群及无感知的高可用切换功能。截止目前平台支撑了目前总量90%以上的MySQL服务(实际数量超过2000个),资源利用率提升30倍,数据库交付能力提升70倍。并且经受住了十一黄金周、春节票务业务高峰期的考验。未来将致力于数据库自动化向智能化的推进。