本文目录一览：
MySQL数据库性能优化之分区分表分库
分表是分散数据库压力的好方法。 分表，最直白的意思，就是将一个表结构分为多个表，然后，可以再同一个库里，也可以放到不同的库。 当然，首先要知道什么情况下，才需要分表。个人觉得单表记录条数达到百万到千万级别时就要使用分表了。
编写entity Insert select 以上顺利实现mysql分库，同样的道理实现同时分库分表也很容易实现。
在这一点上，分区和分表的测重点不同，分表重点是存取数据时，如何提高mysql并发能力上；而分区呢，如何突破磁盘的读写能力，从而达到提高mysql性能的目的。
数据科学家如何选择mysql、mongodb等数据库?
1、例如，如果你需要的是数据分析仓库，关系数据库可能不是一个适合的选择；如果你处理事务的应用要求严格的数据完整性和一致性，就不要考虑NoSQL了。不要重新发明轮子 在过去的数十年，开源数据库技术迅速发展壮大。
2、缺少专业的数据库管理员如果你没有专业的DBA，同时你也不需要结构化你的数据及做join查询，MongoDB将会是你的首选。MongoDB非常适合类的持久化，类可以被序列化成JSON并储存在MongoDB。
3、在选择数据库时，可以考虑以下因素：数据库的类型和功能是否满足你的需求。数据库的性能是否满足你的要求。数据库的可靠性和安全性是否得到保障。数据库的易用性和可维护性如何。数据库的成本是否合理。
4、OpenFTS，3版本中内嵌 Tsearch2。NoSQL：JSON，JSONB，XML，HStore 原生支持，至 NoSQL 数据库的外部数据包装器。
5、所以我们所熟知的那些SQL语句就不适用于MongoDB了，因为SQL语句是关系型数据库的标准语言。关系型数据库-MySQL 在不同的引擎上有不同的存储方式。查询语句是使用传统的sql语句，拥有较为成熟的体系，成熟度很高。
6、MongoDB比MySQL快在它有Memory-Mapping以及它不用处理事物 MySQL适用于传统的对关联要求高的方面，MongoDB更多用于Logging、SNS等以K-V居多的需求，但是两种数据库其实都能胜任大多数需求。
mongodb设计,要不要“分表”
在我看来，放不放都可以，你所说的数据移动并不准确。
MongoDB 的数据分块称为 chunk。每个 chunk 都是 Collection 中一段连续的数据记录，通常最大尺寸是 200MB，超出则生成新的数据块。
解决方案主要分为4种：MySQL的分区技术、NoSql、NewSQL、MySQL的分库分表。（1）mysql分区技术：把一张表存放在不同存储文件。由于无法负载，使用较少。
因 MongoDB 是文档型数据库，为非结构货的文档增加一个新字段是很快速的操作，并且不会影响到已有数据。另外一个好处当业务数据发生变化时，是将不再需要由 DBA 修改表结构。
如何搭建mongodb分片
1、要构建一个 MongoDB Sharding Cluster，需要三种角色：Config Server 为了将一个特定的collection存储在多个shard中，需要为该collection指定一个shard key，例如{age： 1} ，shard key可以决定该条记录属于哪个chunk。
2、为了实现分片，你必须向MongoDB指定使用哪个索引作为片键，然后MongoDB会根据你的设置将你的数据划分到有着相同片键的数据块（Chunk）中。而后这些数据块将根据片键的大致顺序分散到副本集中。
3、创建数据库路径（data目录）、日志路径（logs目录）和日志文件（mongo.log文件），完成后如下图所示 创建配置文件mongo.conf。
4、片键介绍 数据划分（partitioning）关键问题是怎么样将一个集合中的数据均衡的分布在集群中的节点上。 MongoDB 数据划分的是在集合的层面上进行的，它根据片键来划分集合中的数据。
分库分表技术及技术方案
1、range根据范围进行划分，如日期，大小。此方案不存在数据迁移，但存在热点问题。分库分表的技术选型 技术选型 解决方案主要分为4种：MySQL的分区技术、NoSql、NewSQL、MySQL的分库分表。
2、常用的分库分表方案有以下几种：垂直分库、水平分库、垂直分表、水平分表、分片式数据库。垂直分库：按照业务领域或功能将数据分散到不同的数据库中。
3、垂直分库分表：这种方案是按照业务模块进行划分，不同的模块对应不同的数据库或表。这样可以降低单库的数据压力，同时也避免了业务模块之间的相互影响。
4、临时分库分表是为了应对突发访问量增加而设立的一种临时分库分表策略。在特定场景下，如节假日、促销活动等，可以通过临时分库分表缓解数据库压力，确保系统稳定运行。
5、如何分库分表？两种解决方案：垂直拆分、水平拆分垂直拆分：根据业务进行拆分，比如可以将一张表中的多个字段拆成两张表，一张是不经常更改的，一张是经常改的。
数据库为什么要分库分表
1、从字面上简单理解，就是把原本存储于一个库的数据分块存储到多个库上，把原本存储于一个表的数据分块存储到多个表上。
2、数据库涉及各种领域。即使同一领域也有不同需求，且有各种数据库软件，分库是很正常的。一个数据库内需要各种关系表，来避免冗余信息，使得数据库储存、检索效率提高。
3、为什么要分库分表①分库分表说白了，就是因为数据量太大了，如果你的单表数据量都到了千万级别，那么你的数据库就无法承受高并发的要求，数据库操作性能就会出现极大的下降。
4、分表是分散数据库压力的好方法。 分表，最直白的意思，就是将一个表结构分为多个表，然后，可以再同一个库里，也可以放到不同的库。 当然，首先要知道什么情况下，才需要分表。个人觉得单表记录条数达到百万到千万级别时就要使用分表了。
5、自己分库分表，自己掌控业务场景与访问模式，可控。分区表，研发写了一个sql，都不确定mysql是怎么玩的，不太可控。
6、分库分表的必要性 分库分表技术的使用，主要是数据库产生了瓶颈，如单库的并发访问或单表的查询都超出了阈值。对系统使用造成一定的影响，不得已而产生的技术。
