单表60亿记录等大数据场景的MySQL优化和运维之道

此文是根据杨尚刚在【QCON高可用架构群】中，针对MySQL在单表海量记录等场景下，业界广泛关注的MySQL问题的经验分享整理而成，转发请注明出处。杨尚刚，美图公司数据库...

思路1：采用备份表 备份表中存储不活跃的数据eg：只有查询操作的数据(数据的部分属性字段不再更改)且查询次数也较少； 备份表可以是一张或者多张备份表，若采用多张备份表，则定期创建备份表(备份表的命名要规范，可以考虑使用原表名称+时间戳命名) 采用多张备份表：定期创建一个备份表（备份一定期间范围内的数据，多张备份表采用联合查询） 多张备份表时可以使用视图对多个备份表进行联合查询。 是否采用

单表60亿记录等大数据场景的MySQL优化和运维之道

一个成熟的数据库架构并不是一开始设计就具备高可用、高伸缩等特性的，它是随着用户量的增加，基础架构才逐渐完善。这篇博文主要谈MySQL数据库发展周期中所面临的问题及优化方案，暂且抛开前端应用不说，大致分为以下五个阶段：1、数据库表设计 项目立项后，开发部根据产品部需求开发项目，开发工程师工作其中一部分就是对表结构设计。对于数据库来说，这点很重要，如果设计不当，会直接影响访问速度和用户体验。影响的因

九、显示器术语解释 　　 　　　　扫描方式：显示器的扫描方式分为“逐行扫描”和“隔行扫描”两种。如果扫描系统采用在水平回扫时只扫描奇(偶)数行，垂直回扫时只扫描偶(奇)数行的扫描方式，采用这种方式的显示器被称为隔行扫描显示器，这种显示器虽然价格低，但人眼会明显地感到闪烁，用户长时间使用眼睛容易疲劳，目前已被淘汰。逐行显示器则克服了上述缺点，逐行扫描即每次水平扫描，垂直扫描都逐行进行，没有奇偶之分。

Operating System File-size Limit Linux 2.2-Intel 32-bit 2GB (LFS: 4GB) Linux 2.4+

本次对mysql做了单表亿级数据量的压测。 表的关系简单，只有两个int字段，user_id和company_id，且都增加了索引。 通过python脚本，随机向同一个表随机插入100W、500W、1000W-1E数据，并且记录了每次插入数据所耗时间。 先来看下写入数据的情况吧： python脚本空转： 空转100W：0.14s 空转1000W：1.74s 单次插入1000W条数据：

此文是根据杨尚刚在【QCON高可用架构群】中，针对MySQL在单表海量记录等场景下，业界广泛关注的MySQL问题的经验分享整理而成，转发请注明出处。 MySQL的优点   使用简单 开源免费 扩展性“好”，在一定阶段扩展性好 社区活跃 性能可以满足互联网存储和性能需求，离不开硬件支持   上面这几个因素也是大多数公司选择考虑MySQL...