我们都知道，服务器数据库的开发一般都是通过java或者是PHP语言来编程实现的，而为了提高我们数据库的运行速度和效率，数据库优化也成为了我们每日的工作重点，今天，云南IT培训http://www.kmbdqn.cn/就一起来了解一下mysql服务器数据库的优化方法。
为什么要了解索引
真实案例
案例一：大学有段时间学习爬虫，爬取了知乎300w用户答题数据，存储到mysql数据中。那时不了解索引，一条简单的“根据用户名搜索全部回答的sql“需要执行半分钟左右，完全满足不了正常的使用。
案例二：近线上应用的数据库频频出现多条慢sql风险提示，而工作以来，对数据库优化方面所知甚少。例如一个用户数据页面需要执行很多次数据库查询，性能很慢，通过增加超时时间勉强可以访问，但是性能上需要优化。
索引的优点
合适的索引，可以大大减小mysql服务器扫描的数据量，避免内存排序和临时表，提高应用程序的查询性能。
索引的类型
mysql数据中有多种索引类型，primarykey，unique，normal，但底层存储的数据结构都是BTREE;有些存储引擎还提供hash索引，全文索引。
BTREE是常见的优化要面对的索引结构，都是基于BTREE的讨论。
B-TREE
查询数据简单暴力的方式是遍历所有记录;如果数据不重复，就可以通过组织成一颗排序二叉树，通过二分查找算法来查询，大大提高查询性能。而BTREE是一种更强大的排序树，支持多个分支，高度更低，数据的插入、删除、更新更快。
现代数据库的索引文件和文件系统的文件块都被组织成BTREE。
btree的每个节点都包含有key，data和只想子节点指针。
btree有度的概念d>=1。假设btree的度为d，则每个内部节点可以有n=[d+1，2d+1)个key，n+1个子节点指针。树的大高度为h=Logb[(N+1)/2]。
索引和文件系统中，B-TREE的节点常设计成接近一个内存页大小(也是磁盘扇区大小)，且树的度非常大。这样磁盘I/O的次数，就等于树的高度h。假设b=100，一百万个节点的树，h将只有3层。即，只有3次磁盘I/O就可以查找完毕，性能非常高。
索引查询
建立索引后，合适的查询语句才能大发挥索引的优势。
另外，由于查询优化器可以解析客户端的sql语句，会调整sql的查询语句的条件顺序去匹配合适的索引。
❷ java 怎样分页存储数据到mysql数据库
根据我的理解你的程序的主要作用是：
抓取另外一个网站的页面内容
解析后存储到自己的数据库里面
然后再在页面上显示刚刚抓取的数据
如果我的理解正确的话，你要做的是一个网站数据采集器，那么
分页存储的方法有两种：
方案A
在数据库找个表存储当前进行到的序号，比如现在网站上有1000个数据，有个字段可以标定数据的序号，就是网站文章的id（这个数据根据业务的不同要自己去寻找）
然后你读取对方网站的时候先把网站的html读取到java内存中，然后解析这些html，读出一个list列表
在对list列表遍历的时候，把文章的id跟数据库中存储的文章id比对，如果发现是已经存储过的文章id就不存储，如果是没存储过的再存储
在遍历的过程中记录下当前存储的文章数量，当达到一个指定的数量（你可以自己定义，比如是100个文章）的时候停止存储，并退出循环，然后把当前遍历到的文章id存储到数据库中
这样就实现了每次只存储指定的数量（比如100个文章）
方案B
如果你要抓取的网站也是分页的，那么你就每次抓取一页，并把当前抓取到的页数记录到数据库中
通过观察得出对方网站的不同页数据的url规律，比如发现他们网站第x页的数据总是根据 域名/具体的页面?page=x ，那么下次抓取的时候，从数据库读出上次抓取的页面数，然后加1
拼出新的页面的url，然后访问，再进行抓取
这样就实现了每次只存储一页数据
分页显示的方法：
使用mysql的 limit 语法：limit x,y ，代表从第x行开始读取 y 行数据
假定当前要翻到第page页，每页有row行数据，sql要这么写
select*fromuserlimit((page-1)*row),row
举个例子一页20条，第3页的写法
select*fromuserlimit40,20
❸ mysql 存储过程
1. exec 存储过程名
2. exec 存储过程名 参数1,参数2,参数3......
或者exec 存储过程名 参数1='',参数2='',参数3=''......
❹ 简介mysql之mysql语句执行流程
1.一条查询语句如何执行？
2.一条更新语句如何执行？
3.innodb的redolog是什么？
4.什么是写缓冲
5.写缓冲一定好吗？
6.什么情况会引发刷脏页
关于一条mysql查询语句在mysql中的执行流程
如select name from test where id=10;
1.连接器---先与mysql服务端连接器建立连接，若查询缓存命中则直接返回 （查询缓存的弊端：查询缓存的失效非常频繁，只要有对一个表的更新，这个表上所有的查询缓存都会被清空。）
2.分析器---词法分析告诉服务端你要干什么（我要找 test表中id为10的名字） ( 其中sql语法错误在这块暴露 )
3.优化器---服务端会思考该怎么执行最优(索引的选择)
4.执行器---检查用户对库对表的权限
5.存储引擎--存储数据，提供读写接口
以update a set name=1 where id=1;
主要区别在于在查询到数据之后(select name from a where id=1)，如果是innodb引擎它会进行日志的两阶段提交:
1.开启事务，写入redolog（innodb引擎特有），并更新内存
3.写入binlog，提交事务，commit
我们知道mysql数据存储包含内存与磁盘两个部分，innodb是按数据页(通常为16k)从磁盘读取到内存中的(剩余操作在内存中执行)，当要更新数据时，若目标数据的数据页刚好在内存中，则直接更新。不在呢？
将这个更新操作(也可能是插入) 缓存在change buffer中 (redolog也会记录这个change buffer操作)等到下一次查询要用到这些数据时，再执行这些操作，改变数据(称为合并操作记录称为merge)。
innodb_change_buffer_max_size
innodb_change_buffering
先介绍两个概念
因为redolog是环形日志，当redolog写满时，就需要“擦掉”开头的一部分数据来达到循环写，这里的擦掉指，指将redolog日志的checkpoint位置从 CP推进到CP‘ ，同时将两点之间的脏页刷到磁盘上(flush操作)，此时系统要停止所有的更新操作（防止更新操作丢失）
1.系统内存不足。当要读取新的内存页时就要淘汰一些数据页，如果淘汰的正好是脏页，就要执行一次flush操作
2.Mysql认为系统处于“空闲状态”
3.正常关闭Mysql
上述后两者场景(系统空闲和正常关闭)对于性能都没太大影响。
当为第一种redolog写满时，系统无法执行更新操作，所有操作都会堵塞
当为第二种内存不够用时，如果淘汰脏页太多，影响mysql响应时间
后两者刷脏页会影响性能，所以Mysql需要有刷脏页控制策略，可以从以下几个设置项考虑
1.设置innodb_io_capacity告诉innodb所在主机的IO能力
❺ mysql存储引擎类型有哪些
1、MyISAM
使用这个存储引擎，每个MyISAM在磁盘上存储成三个文件。
（1）frm文件：存储表的定义数据
（2）MYD文件：存放表具体记录的数据
（3）MYI文件：存储索引
frm和MYI可以存放在不同的目录下。MYI文件用来存储索引，但仅保存记录所在页的指针，索引的结构是B+树结构。下面这张图就是MYI文件保存的机制：
从这张图可以发现，这个存储引擎通过MYI的B+树结构来查找记录页，再根据记录页查找记录。并且支持全文索引、B树索引和数据压缩。
支持数据的类型也有三种：
（1）静态固定长度表
这种方式的优点在于存储速度非常快，容易发生缓存，而且表发生损坏后也容易修复。缺点是占空间。这也是默认的存储格式。
（2）动态可变长表
优点是节省空间，但是一旦出错恢复起来比较麻烦。
（3）压缩表
上面说到支持数据压缩，说明肯定也支持这个格式。在数据文件发生错误时候，可以使用check table工具来检查，而且还可以使用repair table工具来恢复。
有一个重要的特点那就是不支持事务，但是这也意味着他的存储速度更快，如果你的读写操作允许有错误数据的话，只是追求速度，可以选择这个存储引擎。
2、InnoDB
InnoDB是默认的数据库存储引擎，他的主要特点有：
（1）可以通过自动增长列，方法是auto_increment。
（2）支持事务。默认的事务隔离级别为可重复度，通过MVCC（并发版本控制）来实现的。
（3）使用的锁粒度为行级锁，可以支持更高的并发；
（4）支持外键约束；外键约束其实降低了表的查询速度，但是增加了表之间的耦合度。
（5）配合一些热备工具可以支持在线热备份；
（6）在InnoDB中存在着缓冲管理，通过缓冲池，将索引和数据全部缓存起来，加快查询的速度；
（7）对于InnoDB类型的表，其数据的物理组织形式是聚簇表。所有的数据按照主键来组织。数据和索引放在一块，都位于B+数的叶子节点上；
当然InnoDB的存储表和索引也有下面两种形式：
（1）使用共享表空间存储：所有的表和索引存放在同一个表空间中。
（2）使用多表空间存储：表结构放在frm文件，数据和索引放在IBD文件中。分区表的话，每个分区对应单独的IBD文件，分区表的定义可以查看我的其他文章。使用分区表的好处在于提升查询效率。
对于InnoDB来说，最大的特点在于支持事务。但是这是以损失效率来换取的。
3、Memory
将数据存在内存，为了提高数据的访问速度，每一个表实际上和一个磁盘文件关联。文件是frm。
（1）支持的数据类型有限制，比如：不支持TEXT和BLOB类型，对于字符串类型的数据，只支持固定长度的行，VARCHAR会被自动存储为CHAR类型；
（2）支持的锁粒度为表级锁。所以，在访问量比较大时，表级锁会成为MEMORY存储引擎的瓶颈；
（3）由于数据是存放在内存中，一旦服务器出现故障，数据都会丢失；
（4）查询的时候，如果有用到临时表，而且临时表中有BLOB，TEXT类型的字段，那么这个临时表就会转化为MyISAM类型的表，性能会急剧降低；
（5）默认使用hash索引。
（6）如果一个内部表很大，会转化为磁盘表。
在这里只是给出3个常见的存储引擎。使用哪一种引擎需要灵活选择，一个数据库中多个表可以使用不同引擎以满足各种性能和实际需求，使用合适的存储引擎，将会提高整个数据库的性能
❻ 五、MYSQL存储过程和函数
• create procere用来创建 存储过程 ，create function用来创建 函数
• Delimiter命令是改变语句的结束符 ，MySQL默认的结束符为;号，由于procere和function中的;号并不代表创建的结束，所以要替换成另外的结束符以便表示创建的结束
• rontine_body子句可以包含一个简单的SQL语句，也可以包含多个SQL语句， 通过begin…end将这多个SQL语句 包含在一起
• MySQL存储过程和函数中也可以包含类似create和drop等DDL语句
• comment子句用来写入对存储过程和函数的注释
• Language子句用来表示此存储过程和函数的创建语言
• 存储过程和函数被标注为deterministic表明当输入相同的参数是会返回相同的结果，反之如果是not deterministic则表示相同参数不会是相同结果，默认是not deterministic
• 相关属性短语只有咨询含义，并不是强制性的约束
• Drop procere/function语句用来 删除指定名称的存储过程或函数
• Begin…end语句通常出现在存储过程、函数和触发器中，其中 可以包含一个或多个语句 ，每个语句用;号隔开
• 标签label可以加在begin…end语句以及loop, repeat和while语句
• 语句中通过iterate和leave来控制流程，iterate表示返回指定标签位置，leave表示跳出标签
• Declare语句通常用来声明本地变量、游标、条件或者handler
• Declare语句只允许出现在begin … end语句中而且必须出现在第一行
• Declare的顺序也有要求，通常是先声明本地变量，再是游标，然后是条件和handler
• 本地变量可以通过declare语句进行声明
• 声明后的变量可以通过select … into var_list进行赋值，或者通过set语句赋值，或者通过定义游标并使用fetch … into var_list赋值
• 通过declare声明变量方法：
• MySQL支持if,case,iterate,leave,loop,while,repeat语句作为存储过程和函数中的 流程控制语句 ，另外return语句也是函数中的特定流程控制语句
• Case语句在存储过程或函数中表明了 复杂的条件选择语句
• IF语句在存储过程或函数中表明了 基础的条件选择语句
其中在 function 里面，只有 DETERMINISTIC, NO SQL 和 READS SQL DATA 被支持。如果我们开启了 bin-log, 我们就必须为我们的 function 指定一个参数。
在 MySQL 中创建函数时出现这种错误的解决方法：
set global log_bin_trust_function_creators=TRUE;
• Iterate语句 仅出现在loop,repeat,while循环语句中，其含义表示重新开始此循环
• Leave语句表明 退出指定标签的流程控制语句块
• 通常会用在begin…end，以及loop,repeat,while的循环语句中
• Loop语句是存储过程或函数中表达 循环执行 的一种方式
• repeat语句是存储过程或函数中表达 循环执行 的一种方式
• while语句是存储过程或函数中表达 循环执行 的一种方式
• Return语句用在 函数中，用来终结函数的执行并将指定值返回给调用者
• Cursor游标用来 声明一个数据集
• 游标的声明必须在变量和条件声明之后，在handler声明之前
• Cursor close语句用来 关闭之前打开的游标
• Cursor declare语句用来声明一个游标和指定游标对应的数据集合， 通常数据集合是一个select语句
• Cursor fetch语句用来获取游标指定数据集的 下一行数据 并将各个字段值赋予后面的变量
• Open cursor语句用来打开一个之前已经 声明好的游标
• Declare condition语句命名 特定的错误条件 ，而该特定错误可以在declare…handler中指定 处理方法
• 比如在MySQL中1051error code表示的是unknown table的错误，如果要对这
个错误做特殊处理，可以用三种方法：
• Declare handler语句用来声明一个handler来处理一个或多个特殊条件，当其中的某个条件满足时则触发其中的statement语句执行
• Statement可以是一个简单SQL语句，也可以是begin…end组成的多个语句
• Handler_action子句声明当执行完statement语句之后应该怎么办
Condition_value的值有以下几种：
• 当condition发生但没有声明handler时，则存储过程和函数依照如下规则处理
• create trigger语句用来创建一个触发器，触发器的作用是当表上有对应SQL语句发生时，则触发执行
• 触发器创建时需要 指定对应的表名 tbl_name
• Definer关键词用来指定trigger的安全环境
• Trigger_time指定触发器的执行时间，BEFORE和AFTER指定触发器在表中的 每行数据修改前或者后 执行
• Trigger_event指定触发该触发器的具体 事件
• INSERT当新的一行数据插入表中时触发，比如通过执行insert,load data,replace语句插入新数据
• UPDATE当表的一行数据被修改时触发，比如执行update语句时
• DELETE当表的一行数据被删除时触发，比如执行delete,replace语句时
• 当执行insert into … on plicate key update语句时，当碰到重复行执行update时，则触发update下的触发器
• 从5.7.2版本开始，可以创建具有相同trigger_time和trigger_event的同一个表上的多个触发器，默认情况下按照创建的时间依次执行，通过 指定FOLLOWS/PRECEDES改变执行顺序 ，即FOLLOWS时表示新创建的触发器后执行，PRECEDES则表示新触发器先执行
• Trigger_body表示触发器触发之后要执行的一个或多个语句，在内部可以引用涉及表的字段， OLD.col_name表示行数据被修改或删除之前的字段数据，NEW.col_name表示行数据被插入或修改之后的字段数据
• Drop trigger语句用来 删除一个触发器
• If exists短语用来避免删除不存在的触发器时引发报错
• 当你执行drop table时，表上的触发器也被drop掉了
❼ 请教mysql每次存储块大小的问题
想咨询您一下，mysql的myisam机制中，一次写到文件中的数据块时多少字节呢？有限制嘛？reclength和length的关系是什么呢？谢谢~
int _mi_write_part_record(MI_INFO *info,
my_off_t filepos, /* points at empty block */
ulong length, /* length of block */
my_off_t next_filepos,/* Next empty block */
byte **record, /* pointer to record ptr */
ulong *reclength, /* length of *record */