从基础架构层面保障应用场景落地——11.11基础架构峰会在京举行
11月25日,由京东IT资源服务部联合京东CTO办公室、京东商城研发基础架构部共同举办的“京东技术——11.11基础架构峰会”,在国家会议中心盛大举行!本次峰会经过了近一个月紧锣密鼓的精心筹备,从主题策划确认到讲师申请,再到与讲师们的多次深入沟通和探讨议题的内容如何做到精准、怎么调整能在比较短的现场分享时间内把好的内容呈现给参会用户。经历了重重优化,最终从容器、分布式系统、弹性数据库、微服务、机器学习、链路压测机器人等精彩话题登场京东技术11.11基础架构峰会。
现场有超过1000+位来自中国TOP100的互联网企业研发技术骨干,架构师和CTO技术总监。大家与来自京东、曙光、Mellanox的技术专家,共同交流和探讨了关于基础架构领域的核心技术以及应用场景。现场技术专家带来的精彩的主题演讲。
演讲主题:无感知动态调配基础设施资源——解密京东阿基米德平台
京东20万Docker容器集群,承载了几乎所有的核心业务。但在大促期间的流量高峰期,要保障资源调度、设备的充分利用,京东商城基础平台的技术高手在今年11.11前夕,上线阿基米德平台。实现在前端业务无感知的情况下,动态调配基础设施资源,满足突发巨大流量的场景。特别是对有状态服务的支持,真正实现给高速运动中的汽车换轮胎。从源码开始,到编译构建,镜像,自助上线,日志以及监控告警,系统资源的弹性伸缩的核心点,都将在本次峰会中进行了分享。
演讲主题:超大流量的基础架构保障核心
当代数据中心的发展给数据中心的设计者带来了前所未有的挑战,规模越来越大,管理越来越复杂,跑在数据中心上的业务越来越多,要求数据中心的性能越来越高。如何保证数据中心的规模可扩展性,资源易管理性,应用的性能可保障性,Mellanox在报告中分享了经验和建议。
演讲主题:京东图片系统的演进史
京东与图片相关的业务系统已经超过1000+,图片的规模远超百亿,每天上传量也过亿。这样巨大规模的应用背后离不开强大的技术支撑。图片系统经过了几代的技术架构升级,令图片系统中每张图片的大小减少了40~50%,技术的演进不仅从开源走向自研,从单机房到跨机房,也带来了更快的压缩速度、更小的容量和给用户更好的体验。
演讲主题:大规模商品数据计算和底层架构搭建
目前京东每天商品上新和修改都在千万级别。商品的数据质量将直接影响用户体验和业务迅猛发展,京东商城研发基础架构团队对商品数据,做了大规模数据计算和底层架构搭建的优化升级工作。实现提供高精度的商品数据,供各业务方使用。在本次峰会的议题中,何小锋与大家深入分享了京东商品数据大规模计算与挖掘的应用实例,让大家了解大规模计算框架的架构搭建和传统机器学习技术在商品数据清洗的技巧。
演讲主题:解密京东服务治理平台CallGraph
目前京东已经有将近3万个服务接口,每天的服务调用量达到了3000亿次,如此大量的服务调用,依赖关系已经非常复杂。本次分享京东CallGraph平台,它提供服务之间的依赖关系拓扑图,能够轻松定位问题。还能够看到全局服务调用热度变化图,对应用的使用情况评估,包括应用对底层资源占用合理性评估都一目了然。最后探讨了“服务网格”的前沿探索话题,共享“微服务”的未来发展趋势。
演讲主题:未来计算驱动人工智能
人工智能技术的发展需要极大的计算能力,如何在可预见的未来,用目前工业领域可实现的计算技术,更好支撑人工智能技术发展,成为计算领域关注的焦点,本次分享了曙光公司在计算领域的多年技术积累,以及在目前的技术条件下如何实现工业化计算能力扩展,以及巨大的计算能力如何推动目前流行的深度学习(人工智能)技术的发展。
演讲主题:全链路压测平台ForceBot核心技术解密
电商大促准备好的第一件事情就是应对高流量,全链路压测无疑成为必不可少的一个环节。全链路压测平台ForceBot(军演机器人)用于模仿用户,通过分布在全国地的压力节点从公网模拟并制造海量真实业务操作流量,并提供具有参考价值的性能指标监控和计算为全链路压测提供一个灵活可靠且易用的分布式压力测试平台,本次峰会首度向业界公开分享京东全链路压测的核心技术。