揭开微盟百万商家营销大战背后的数据库秘密

又到了双十一、双十二、年终大促季，每年这个时候都是购物狂欢节，不仅促销产品多、种类全、覆盖面广，促销花样也在不断翻新，直播、砍价、优惠券、加价购等，令人眼花缭乱。当全国人民沉浸在买买买的自嗨中无法自拔时，考验的不仅是百万商家的战略战术，更是各种技术平台的实力比拼，尤其是底层的数据库，将迎来流量峰值期间的高并发和快速响应挑战。

高并发业务场景下快速、弹性扩缩容挑战

▲微盟产品和服务布局

以微盟为例，公司承载的是多渠道的广告营销业务，提供和各个细分领域相关的垂直SaaS解决方案及服务。比如双11期间的秒杀、拼团和砍价，需要很多专业解决方案和功能支撑，而微盟拥有丰富的产品和解决方案，处于业界最领先地位，很多优惠券、抽奖、广告牌、激励转化等功能，都有专门的数字化插件。

借用微盟数据库技术负责人 余成真 的话来说，“虽然微盟的很多SaaS业务经常被模仿，但从未被超越。”

从大的平台架构来看，每个业务系统都是独立应用，包括独立的后台、技术栈、数据库，并且对于库和表的设计，也各不相同。

而对于“秒杀”类活动，每天收到的活动报备请求至少几十个，遇到重要节日以及重大营销活动时，可能会有上百个商家发起活动报备申请，无论是用户在线数，还是业务请求量，都是TOP级别。

所以，对于数据库的性能来说，必须满足如下要求

● 反应要快，并且不同应用接口响应要求不一样。

● 针对恶意刷票行为，要进行流量防控。

● 要具备数据库的大量读写能力。

大体来看，微盟数据库团队主要面临4大挑战

1.高并发、低延时需求。

微盟的核心接口在平常状态下都是毫秒级响应，数据库的每条请求都是几毫秒，甚至是纳秒级响应时间。在活动高峰期，某些营销插件的场景类数据库，单实例就有超过7万真实QPS记录值。

2.确保稳定性及高可用性。

稳定性和可用性是基本要求，目前主要依赖腾讯云数据库底层高可用能力，微盟自己也有一套针对应急场景的可用性工具，未来希望能更可靠、更稳定。

3.数据安全。

如何对人员安全、数据库安全进行治理，成为一项长期工作。需要进一步加强治理的事项，包括数据分类分级、线上数据查询的精细授权、数据灾备的定期演练、运维操作风控等。

4.海量实例数据库运维。

微盟数据库类型多、数量多、业务线多，管理好这些元数据是DBA做好各项工作的先决条件。，只有做到精细化运维，才能规避工作中遇到的数据库问题 、将故障及风险降至最低。

此种背景下，微盟开启了全面的云数据库转型征程，从思维模式开始，让整个架构向更弹性、更灵活的服务模式演进。

　　采用现代化架构解决数据安全、技术能力扩张问题

▲基于云数据库的解决方案与实践

“SaaS电商业务的本质是，对数据库应用性能要求较高，必须抗住各种压力。” 余成真说道。

在数字化转型背景下，企业业务的核心是数据，数据驱动业务，数字即服务。而承载所有数据的数据库，既有事务ACID特性的要求，又有海量数据存储的要求。所以，数据库产品在具备联机事务处理能力，数据库的读取性能也必须强悍，还要具备数据分析能力。，微盟业务发展速度飞快，资源需求呈指数级倍增，数据安全、数据库类型扩展、数据库技术能力扩展等核心问题，都需要重新考虑。

微盟持续保持高速发展，创新和不断迭代是内在基因。2020年，为了助力更多商家实现数字化转型，微盟提出了“TSO全链路智慧增长”，从流量、SaaS工具和运营角度，构建全域数字化商业闭环。从产品角度看，最重要的是，全面提升信息安全保护能力，防止灾害及不可抗拒因素给业务系统带来的伤害。

为了配合集团业务高速发展的需求，数据库团队必须基于现代化业务架构，转变思维模式，让所有业务在充分享受云的弹性能力的，也要兼具业务的隔离性。

　利用云数据库弹性满足高并发和快速调整需求

纵观微盟数据库的发展史，主要分为3个重要阶段

1. 早期IDC建设阶段，包括自建黑石数据库服务集群。

2016年，微盟的数据库从阿里云全线迁移到腾讯黑石机房，实现了跨IDC的异地同步。在迁移之初，不仅要保证数据的一致性，对数据可用性的时间也有极高要求，数据库实例要在30分钟内全部切换完，具体到单套实例的不可用时间要限制到秒级。而且，迁移过程中注意的细节非常多，涉及到对项目的协调及人员的动员力，在数据库同步迁移技术上，要保证数据的绝对一致性，迁移过程中也要具备更缜密的思维。，还讲求战略战术和技巧，微盟当时使用的是主从复制技术，因为经典意味着可靠。

为了更贴合业务发展，微盟还自建了数据库服务集群，用半年时间打造了一整套数据库私有云解决方案，包括具备监控、告警、备份、高可用等相关功能。不仅解决了业务问题，在技术上也有重大突破，包括借助开源工具实现了二次开发，期间还编写了大量辅助运维工具，将零散的运维工作进行了工程化建模。由于数据库硬件服务器是高效及高可用架构设计，所以数据库集群在4年多线上真实环境应用中，没有出现任何事故级故障，整体集群非常稳定、高效。

2. 数据库全面上云以及异地多活架构升级。

2020年，为了配合TSO业务战略落地，微盟尝试探索公有云路线。因为，相对于私有云，公有云的弹性扩展能力强，更能满足业务高并发需求。经过大量调研、测试、选型、验证后，公司开始制定实施计划，全面上云。其实，当时很多云厂商提供的异地多活方案都不是非常成熟。期间，微盟数据库团队和腾讯云数据库部门保持密切沟通与互动。从最初通过线上边缘业务进行测试，到之后发展到周期性全实例的多活故障演练，最终才实现了技术上的突破，创造了成功的多活方案，高度确保了业务的稳定性。

3. 加码数据安全，实现精细化运维。

2021年，为了确保数据库部门拥有全线的业务支撑能力，微盟制定了很多和运维相关的规范及流程。主要包含两个维度一方面，运维操作人员要具有可量化的操作细节；另一方面，降低风险，提升沟通效率。

　　集中式+分布式技术架构设计