有下面两个表, TYPE_ID列上值的重复性很高.

CREATE TABLE T_SMALL (TYPE_ID, ID, …);
CREATE TABLE T_MIDDLE (TYPE_ID, ID1, ID2, …);

    运行下面的SQL时, 总是很慢, 我们已经指定用HASH JOIN, 并也指定了T_SMALL是驱动表, 百思不得其解.

SELECT …..
  FROM T_SMALL S, T_MIDDLE M
  WHERE S.TYPE_ID = M.TYPE_ID
    AND (S.ID = M.ID1 OR S.ID = M.ID2)

    第一百零一思时, 发现了原因所在, 因为OR的问题, Oracle在做HASH JOIN时只依据了TYPE_ID这个效率不高的列, 这时的PLAN中肯定出现了FILTER这样的步骤. 后来将这个语句手工改成UNION方式, 就从2个小时变成了15分钟.

SELECT …..
  FROM T_SMALL S, T_MIDDLE M
  WHERE S.TYPE_ID = M.TYPE_ID
    AND S.ID = M.ID1
UNION ALL
SELECT …..
  FROM T_SMALL S, T_MIDDLE M
  WHERE S.TYPE_ID = M.TYPE_ID
    AND S.ID = M.ID2 AND M.ID1 <> M.ID2

    SQL语句的调优, 其实很需要功夫, 也是一门很深的学问, 如此简单的SQL, 也有很深刻的知识.

Relative Posts:

• 2008/08/04 -- ASSM下DML的物理读高 (5)
• 2008/01/15 -- 分析用户所有表之后 (5)
• 2007/08/06 -- FOR UPDATE SKIP LOCKED语句中的逻辑读 (3)
• 2007/06/06 -- OR引起的性能问题, 在表上进行行过滤 (4)
• 2007/04/24 -- 如何创建Single Hash Cluster的表? (3)
• 2007/04/24 -- 选择了错误的实现方法, 其实很简单! (8)
• 2007/03/22 -- 过长的In List引起的共享池内存问题 (4)
• 2009/07/09 -- SQL执行filter条件的顺序问题 (2)
• 2009/06/25 -- oramon如何收集V$SYSTEM_EVENT数据? (3)
• 2009/06/25 -- oramon如何从V$SESSION收集性能数据? (0)

    在Oracle中每个会话都会有PGA, MySQL中的会话也是如此. 主要包括三部份: (a), 堆栈区, 由THREAD_STACK变量来决定; (b), 接收缓冲(Receive Buffer/Connection Buffer), 由NET_BUFFER_LENGTH参数决定; (c), 发送缓冲(Send Buffer/Result Buffer), 同接收缓冲区同样大小. 当在执行SQL语时, 会将SQL语句的文本复制一份, 如果你的SQL写得很长, 这部份也不可以小看的哦! 当进程或线程不再需要时, 则这些内存区域会释放.

2, IO Buffer

    IO读取缓冲, 顺序读时由参数READ_BUFFER_SIZE控制大小, 而随机读时由READ_RND_BUFFER_SIZE参数来决定, 在InnoDB下据说是没用的, 因为InnoDB本身就缓冲机制, 但是在读取临时文件时是否有效呢? 象Oracle中有专门的SORT_MULTIBLOCK_READ_COUNT参数.

3, Sort Buffer

    象Oracle中的SORT_AREA_SIZE一样, MySQL也有参数SORT_BUFFER_SIZE来将数据放到内存来进行排序, 比较容易理解. 有一个问题是, 当排序操作执行完后, 这些内存是立刻释放呢? 还是要到会话结束呢?

4, Join Buffer

    我到现在还不明白这一块内存是怎么用的? 当一个表没有索引可以用时, MySQL用这一块内存区进行Fast Full Join, 每两个表之间的Full Join都会使用一块这个区域, 如果更复杂的SQL包括很多个表, 有可能要使用多个Join Buffer, 这下我更晕了, 理论上(按照Oracle的)最多两个就够了吧, 因为Join只能在两个表间进行. 另外MySQL中所有的内存中的表都以Hash方式组织, 因此好象都是Oracle的Hash Join了?

5, BLOB Buffer

    当我们去扫描一个有BLOB列的表时, 会要配一个和返回记录中最大的BLOB大小一样的缓冲区. 这个有点不爽了, 如果BLOB中有两G的数据呢? 这一块如何释放呢? SQL执行完了就释放?

    以上只是我在看书时的猜测, 请大家扔砖吧!

Relative Posts:

• 2007/04/05 -- MySQL数据库如何进行排序(Sort)操作? (1)
• 2010/02/26 -- WebChart的DB连接配置2 (0)
• 2010/02/20 -- 定义不同数据源的SQL (4)
• 2010/01/26 -- 逻辑连接层与物理连接层(2) (1)
• 2010/01/05 -- DataReport中的FORALL循环 (0)
• 2009/12/25 -- SQLULDR2的自定义转义符处理 (2)
• 2009/11/07 -- MySQL数据迁移测试 (8)
• 2009/10/30 -- SQLULDR2功能增加, 性能不减 (14)
• 2009/10/28 -- SQLULDR2生成Insert SQL语句 (4)
• 2009/10/27 -- 将SQLULDR2转义符进行到底 (3)