背景我们以电商为例,分享业务视角。业务初期,数据库基本都是单库单表实现的,这样可以快速支撑业务。
可以通过反复试验将资源成本控制在最低限度。但随着业务的不断发展,数据量将会呈指数级增长。
最终会发现单库单表无法支撑业务的快速发展,需要对现有的数据库架构进行改造。升级。
从技术角度来说,根据以往的经验,单表最多可以支持W左右的数据。如果数据量持续增长,会影响读写效率,需要将单库单表改造为分库表。
单库单表的问题: 性能瓶颈:随着数据量的增加,数据库的读、写、查询性能会逐渐下降。尤其是当表中的数据行数达到百万甚至更多时,即使是简单的查询操作也可能变得非常慢。
数据热点:所有数据操作都集中在数据库中的一张表上,很容易形成数据热点,导致某些数据行被频繁访问,成为性能瓶颈。高可用和容灾问题:单库单表架构很难实现高可用和容灾。
一旦数据库出现故障,整个应用都会受到影响。而且数据恢复时间较长,影响业务的正常运行。
扩展性问题:随着业务的发展,数据量和访问量不断增加,单库单表的架构很难通过简单的扩展来满足需求。水平扩展(添加更多服务器)和垂直扩展(升级现有服务器硬件)都有局限性。
事务管理和锁竞争:在高并发的情况下,大量的事务和数据库操作会引起锁竞争问题,影响数据库的处理能力。备份和维护难度:随着数据量的增加,备份和维护数据库的难度和时间成本也会大幅增加。
架构升级流程参考:数据库架构演进流程。这里我们直接一步完成流程,从单库单表到数据库的垂直拆解、水平分表、迁移过程场景总结、新旧数据、读写旧数据、旧数据,是的,是的,迁移步骤实现新数据的读写能力,实现旧数据到新数据的同步(通过监控binlog),实现新数据和旧数据的同步(通过监控binlog)。
开始新数据的灰度读取。读取全量新数据后,关闭旧数据。
开始读取数据。新数据的灰度写入。
新数据写满后,旧数据的写入线关闭。稳定运行一段时间后,新旧数据关闭,旧数据同时归档。
旧数据已离线。迁移前、迁移中、迁移后。
概括。至此完成了数据库架构的升级。
在整个迁移过程中,我们秉承对业务影响最小的战略理念,最终实现数据和功能向新数据库架构的平滑迁移。
站长声明
版权声明:本文内容由互联网用户自发贡献,本站不拥有所有权,不承担相关法律责任。如果发现本站有涉嫌抄袭的内容,欢迎发送邮件
举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。
相关文章
-
小米发布年度业绩报告。 财报显示,小米今年全球智能手机出货量为1亿台,同比增长17.5%。 全年智能手机收入达1亿元人民币,同比增长24.6%。 今年第四季度,智能手机收入达到1亿元,同比增长38.4%。 第四季度全球智能手机出货量为1万台,同比增长29.7%。
06-17
-
据投资界3月16日消息,蚂蚁金服近期完成对深圳市捷舟科技有限公司的投资.,持股比例为25.04%,后者专注于跨境贸易互联网服务。 据捷舟科技官网介绍,该公司主要通过自主研发的APOS跨境收银系统、阿波罗数字化通关等为商户提供产品数字化管理、跨境新零售系统建设、跨境物流对
06-17
-
《三体》中,主角和罗辑从2000年的“冬眠”中醒来,惊讶地发现2008年的所有电子产品都拥有无限的电量。 后来发现这是由于空气充电和核电技术造成的。 现实生活似乎比小说世界发展得快得多。 前天,小米正式发布空中充电技术,并宣布将率先在小米11上实现,无线时代来临了吗?
06-21
-
2020 年 3 月 25 日,是德科技宣布,重庆车辆检验研究院(国家乘用车质量监督检验中心)采用是德科技动力电池测试系统,该系统已通过正式投入使用,两者强强联手,共同推动新能源汽车产业高质量发展。 是德科技是一家领先的技术公司,帮助企业、服务提供商和政府客户加速创新
06-06
-
最近,雷锋网编辑在电梯、地铁里看到了不少“互联网二手房交易平台”的广告。 看来这个行业也掀起了一股热潮。 这些后起之秀纷纷发力,佣金0.5%甚至免费,喊出了颠覆传统二手房交易市场的口号。 就传统中介行业的冲击而言,后起之秀的攻击也不乏猛烈。 有一些是低佣金刺激的真
06-17
-
.wp-block-column h3{margin-left:0} 随着客户服务在各行各业中变得越来越重要,呼叫中心客服质检系统已成为企业提高服务质量和客户满意度的关键环节。 作为行业领先的客户服务解决方案提供商,沃丰科技以其优秀的呼叫中心客户服务质检体系,帮助企业实现更加高效、智能的客户
06-18
-
投资界(ID:pedaily)9月23日消息,近日,凯米生物制药(成都)有限公司(简称启米健生物)(简称启米健生物)达文生物(凯米 Bio)宣布完成首轮超亿元融资。 本轮融资由龙磐投资领投,普华资本、南京建友等机构参与。 本轮筹集的资金将加速两个首批产品进入临床试验,扩大国
06-18
-
国际机遇与企业服务7年50倍增长在企业数字化转型和数字经济的巨大机遇中,我们重点投资云计算、人工智能、大数据、工业数字化、金融科技等企业服务领域的机遇。 12-29 10:44发表于上海 以下文章来自靖亚资本卓越作者Jason林文丰靖亚洲资本卓越。 靖亚注重早期投资,坚信未来中
06-18
-
据《嘉善发布》公众号,2月20日,格科微电子增资扩产项目签约落户嘉善经济技术开发区< titlesplit >签约落户嘉善经济技术开发区。 据悉,格科微电子增资扩产项目包括二期封装测试制造中心。 主要建设CMOS图像传感器芯片封装测试线和CIS 12英寸特殊工艺封装生产线。 预计2018
06-06
-
城市更新资金来源主要通过政府债券、自有资金、银行贷款等 原文链接
06-18
-
在鲁西某县级市,绿色车牌的新能源汽车在大街上随处可见。 “除了五菱宏光Mini这样的微型车,从去年开始,我们发现街上的理想汽车、特斯拉、蔚来等品牌的新能源汽车越来越多,我们对新能源汽车的讨论也越来越多。 也变得更加频繁。 经常,”当地居民程宇说。 同样的现象也出现
06-17
-
中国资本市场正在发生一系列变化,逐步呈现规范化、多元化的市场格局:2016年,上海证券交易所开设科创板,也试点注册制; 2009年,新证券法实施,创业板注册制改革; 2009年,中小板与深交所主板合并,北交所开业……同时,由于疫情、地缘政治格局剧变等因素影响全球市场的不
06-17
最新文章
【玩转GPU】ControlNet初学者生存指南
【实战】获取小程序中用户的城市信息(附源码)
包雪雪简单介绍Vue.js:开学
Go进阶:使用Gin框架简单实现服务端渲染
线程池介绍及实际案例分享
JMeter 注释 18 - JMeter 常用配置组件介绍
基于Sentry的大数据权限解决方案
【云+社区年度征文集】GPE监控介绍及使用