在当今数字化时代,企业每天都会产生和处理海量的数据。无论是电商平台的订单统计、金融机构的交易清算,还是物流企业的货物跟踪,都离不开高效的数据处理技术。而 Spring Batch,作为 Spring 生态系统中一颗璀璨的明星,正是为了解决这些大规模数据处理问题而诞生的。它就像是一位勤劳的幕后工作者,默默地在后台处理着大量的数据任务,为企业的正常运转提供坚实的支持。
随着大模型技术的爆发,AI Infra 已成为基础设施领域的核心战场。过去1年多的时间,我们QQ基础架构算法工程团队落地了多个大模型应用,包括语音合成大模型、内容理解多模态大模型、生成式推荐大模型,跑通大模型训练到推理的全链路。踩了很多坑,也积累了不少经验。本文将分享传统后台工程师积累的技术栈和方法论,如何延续并迁移到 AI 系统,并系统性拆解 AI Infra 的硬件、软件、训练和推理挑战。