首页    技术博客    PHP教程    数据库技术    前端开发   HTML5    Nginx    php论坛
新用户注册 | 会员登录
加入会员，解锁专属内容
取消
热门标签 | HotTags
当前位置:  开发笔记 > 数据库 > 正文

类似groupby的分组计数功能

作者：心在想念-小凡 | 来源：互联网 | 2018-06-08 03:32
之前同事发过一个语句，实现的功能比较简单，类似groupby的分组计数功能，因为where条件有like，又无法用groupby来实现。SELECTa.N0,b.N1,c.N2,d.N3,e.N4,f.N5,g.N6,h.N7,i.N8,j.N9from(selectcount(*)N0fromtbl_loginfo_20141110wherekeyrecord

之前同事发过一个语句，实现的功能比较简单，类似group by的分组计数功能，因为where条件有like，又无法用group by来实现。SELECT a.N0,b.N1,c.N2,d.N3,e.N4,f.N5,g.N6,h.N7,i.N8,j.N9 from (select count(*) N0 from tbl_loginfo_20141110 where keyrecord

之前同事发过一个语句，实现的功能比较简单，类似group by的分组计数功能，因为where条件有like，又无法用group by来实现。
SELECT a.N0,b.N1,c.N2,d.N3,e.N4,f.N5,g.N6,h.N7,i.N8,j.N9 from 
 (select count(*) N0 from tbl_loginfo_20141110 where keyrecord like &＃39;0%&＃39; or keyrecord like &＃39;GJ_0%&＃39;) a,
 (select count(*) N1 from tbl_loginfo_20141110 where keyrecord like &＃39;1%&＃39; or keyrecord like &＃39;GJ_1%&＃39;) b,
 (select count(*) N2 from tbl_loginfo_20141110 where keyrecord like &＃39;2%&＃39; or keyrecord like &＃39;GJ_2%&＃39;) c,
 (select count(*) N3 from tbl_loginfo_20141110 where keyrecord like &＃39;3%&＃39; or keyrecord like &＃39;GJ_3%&＃39;) d,
 (select count(*) N4 from tbl_loginfo_20141110 where keyrecord like &＃39;4%&＃39; or keyrecord like &＃39;GJ_4%&＃39;) e,
 (select count(*) N5 from tbl_loginfo_20141110 where keyrecord like &＃39;5%&＃39; or keyrecord like &＃39;GJ_5%&＃39;) f,
 (select count(*) N6 from tbl_loginfo_20141110 where keyrecord like &＃39;6%&＃39; or keyrecord like &＃39;GJ_6%&＃39;) g,
 (select count(*) N7 from tbl_loginfo_20141110 where keyrecord like &＃39;7%&＃39; or keyrecord like &＃39;GJ_7%&＃39;) h,
 (select count(*) N8 from tbl_loginfo_20141110 where keyrecord like &＃39;8%&＃39; or keyrecord like &＃39;GJ_8%&＃39;) i,
 (select count(*) N9 from tbl_loginfo_20141110 where keyrecord like &＃39;9%&＃39; or keyrecord like &＃39;GJ_9%&＃39;) j;
 
为了了解语句的性能，我做了如下类似的测试： 
select * from v$version;   --Oracle Database 11g Enterprise Edition Release 11.2.0.1.0 - Production
drop table a;
create table a as select * from dba_objects where rownum<=50000;
begin
  for x in 1..6 loop
    insert into a select * from a;
  end loop;
  commit;
end;

select count(*) from a;   --3200000
select bytes/1024/1024 from user_segments where segment_name=&＃39;A&＃39;;  --357M

alter system flush shared_pool;
alter system flush buffer_cache;

SELECT a.N0,b.N1,c.N2,d.N3,e.N4,f.N5,g.N6,h.N7,i.N8,j.N9 from 
 (select count(*) N0 from a where object_name like &＃39;A%&＃39; or object_name like &＃39;V%&＃39;) a,
 (select count(*) N1 from a where object_name like &＃39;B%&＃39; or object_name like &＃39;V%&＃39;) b,
 (select count(*) N2 from a where object_name like &＃39;C%&＃39; or object_name like &＃39;V%&＃39;) c,
 (select count(*) N3 from a where object_name like &＃39;D%&＃39; or object_name like &＃39;V%&＃39;) d,
 (select count(*) N4 from a where object_name like &＃39;E%&＃39; or object_name like &＃39;V%&＃39;) e,
 (select count(*) N5 from a where object_name like &＃39;F%&＃39; or object_name like &＃39;V%&＃39;) f,
 (select count(*) N6 from a where object_name like &＃39;G%&＃39; or object_name like &＃39;V%&＃39;) g,
 (select count(*) N7 from a where object_name like &＃39;H%&＃39; or object_name like &＃39;V%&＃39;) h,
 (select count(*) N8 from a where object_name like &＃39;I%&＃39; or object_name like &＃39;V%&＃39;) i,
 (select count(*) N9 from a where object_name like &＃39;J%&＃39; or object_name like &＃39;V%&＃39;) j;
--58s
alter system flush shared_pool;
alter system flush buffer_cache;

--改写后
select 
sum(case when object_name like &＃39;A%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N0,
sum(case when object_name like &＃39;B%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N1, 
sum(case when object_name like &＃39;C%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N2, 
sum(case when object_name like &＃39;D%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N3, 
sum(case when object_name like &＃39;E%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N4, 
sum(case when object_name like &＃39;F%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N5, 
sum(case when object_name like &＃39;G%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N6, 
sum(case when object_name like &＃39;H%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N7, 
sum(case when object_name like &＃39;I%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N8, 
sum(case when object_name like &＃39;J%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N9
from a; 

--19s





--对比执行计划：
--前者执行计划：
SQL> explain plan for
  2  SELECT a.N0,b.N1,c.N2,d.N3,e.N4,f.N5,g.N6,h.N7,i.N8,j.N9 from
  3   (select count(*) N0 from a where object_name like &＃39;A%&＃39; or object_name like &＃39;V%&＃39;) a,
  4   (select count(*) N1 from a where object_name like &＃39;B%&＃39; or object_name like &＃39;V%&＃39;) b,
  5   (select count(*) N2 from a where object_name like &＃39;C%&＃39; or object_name like &＃39;V%&＃39;) c,
  6   (select count(*) N3 from a where object_name like &＃39;D%&＃39; or object_name like &＃39;V%&＃39;) d,
  7   (select count(*) N4 from a where object_name like &＃39;E%&＃39; or object_name like &＃39;V%&＃39;) e,
  8   (select count(*) N5 from a where object_name like &＃39;F%&＃39; or object_name like &＃39;V%&＃39;) f,
  9   (select count(*) N6 from a where object_name like &＃39;G%&＃39; or object_name like &＃39;V%&＃39;) g,
 10   (select count(*) N7 from a where object_name like &＃39;H%&＃39; or object_name like &＃39;V%&＃39;) h,
 11   (select count(*) N8 from a where object_name like &＃39;I%&＃39; or object_name like &＃39;V%&＃39;) i,
 12   (select count(*) N9 from a where object_name like &＃39;J%&＃39; or object_name like &＃39;V%&＃39;) j;

Explained.

Elapsed: 00:00:00.15
SQL> @getplan
&＃39;general,outline,starts&＃39;

Enter value for plan type:

PLAN_TABLE_OUTPUT
-----------------------------------------------------------------------------------------
Plan hash value: 2527411742

-------------------------------------------------------------------------------------
| Id  | Operation                    | Name | Rows  | Bytes | Cost (%CPU)| Time     |
-------------------------------------------------------------------------------------
|   0 | SELECT STATEMENT             |      |     1 |   130 |   123K  (1)| 00:24:46 |
|   1 |  NESTED LOOPS                |      |     1 |   130 |   123K  (1)| 00:24:46 |
|   2 |   NESTED LOOPS               |      |     1 |   117 |   111K  (1)| 00:22:17 |
|   3 |    NESTED LOOPS              |      |     1 |   104 | 99032   (1)| 00:19:49 |
|   4 |     NESTED LOOPS             |      |     1 |    91 | 86653   (1)| 00:17:20 |
|   5 |      NESTED LOOPS            |      |     1 |    78 | 74274   (1)| 00:14:52 |
|   6 |       NESTED LOOPS           |      |     1 |    65 | 61895   (1)| 00:12:23 |
|   7 |        NESTED LOOPS          |      |     1 |    52 | 49516   (1)| 00:09:55 |
|   8 |         NESTED LOOPS         |      |     1 |    39 | 37137   (1)| 00:07:26 |
|   9 |          NESTED LOOPS        |      |     1 |    26 | 24758   (1)| 00:04:58 |
|  10 |           VIEW               |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  11 |            SORT AGGREGATE    |      |     1 |    66 |            |          |
|* 12 |             TABLE ACCESS FULL| A    | 91587 |  5903K| 12379   (1)| 00:02:29 |
|  13 |           VIEW               |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  14 |            SORT AGGREGATE    |      |     1 |    66 |            |          |
|* 15 |             TABLE ACCESS FULL| A    |   137K|  8831K| 12379   (1)| 00:02:29 |
|  16 |          VIEW                |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  17 |           SORT AGGREGATE     |      |     1 |    66 |            |          |
|* 18 |            TABLE ACCESS FULL | A    | 85818 |  5531K| 12379   (1)| 00:02:29 |
|  19 |         VIEW                 |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  20 |          SORT AGGREGATE      |      |     1 |    66 |            |          |
|* 21 |           TABLE ACCESS FULL  | A    |   111K|  7158K| 12379   (1)| 00:02:29 |
|  22 |        VIEW                  |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  23 |         SORT AGGREGATE       |      |     1 |    66 |            |          |
|* 24 |          TABLE ACCESS FULL   | A    | 86539 |  5577K| 12379   (1)| 00:02:29 |
|  25 |       VIEW                   |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  26 |        SORT AGGREGATE        |      |     1 |    66 |            |          |
|* 27 |         TABLE ACCESS FULL    | A    | 91587 |  5903K| 12379   (1)| 00:02:29 |
|  28 |      VIEW                    |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  29 |       SORT AGGREGATE         |      |     1 |    66 |            |          |
|* 30 |        TABLE ACCESS FULL     | A    |   228K|    14M| 12379   (1)| 00:02:29 |
|  31 |     VIEW                     |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  32 |      SORT AGGREGATE          |      |     1 |    66 |            |          |
|* 33 |       TABLE ACCESS FULL      | A    | 87981 |  5670K| 12379   (1)| 00:02:29 |
|  34 |    VIEW                      |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  35 |     SORT AGGREGATE           |      |     1 |    66 |            |          |
|* 36 |      TABLE ACCESS FULL       | A    | 84376 |  5438K| 12379   (1)| 00:02:29 |
|  37 |   VIEW                       |      |     1 |    13 | 12379   (1)| 00:02:29 |
|  38 |    SORT AGGREGATE            |      |     1 |    66 |            |          |
|* 39 |     TABLE ACCESS FULL        | A    |   112K|  7251K| 12379   (1)| 00:02:29 |
-------------------------------------------------------------------------------------

Predicate Information (identified by operation id):
---------------------------------------------------

  12 - filter("OBJECT_NAME" LIKE &＃39;J%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  15 - filter("OBJECT_NAME" LIKE &＃39;I%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  18 - filter("OBJECT_NAME" LIKE &＃39;H%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  21 - filter("OBJECT_NAME" LIKE &＃39;G%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  24 - filter("OBJECT_NAME" LIKE &＃39;F%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  27 - filter("OBJECT_NAME" LIKE &＃39;E%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  30 - filter("OBJECT_NAME" LIKE &＃39;D%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  33 - filter("OBJECT_NAME" LIKE &＃39;C%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  36 - filter("OBJECT_NAME" LIKE &＃39;B%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  39 - filter("OBJECT_NAME" LIKE &＃39;A%&＃39; OR "OBJECT_NAME" LIKE &＃39;V%&＃39;)
  
  
  
  
  
--后者执行计划：  
SQL> explain plan for
  2  select
  3  sum(case when object_name like &＃39;A%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N0,
  4  sum(case when object_name like &＃39;B%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N1,
  5  sum(case when object_name like &＃39;C%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N2,
  6  sum(case when object_name like &＃39;D%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N3,
  7  sum(case when object_name like &＃39;E%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N4,
  8  sum(case when object_name like &＃39;F%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N5,
  9  sum(case when object_name like &＃39;G%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N6,
 10  sum(case when object_name like &＃39;H%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N7,
 11  sum(case when object_name like &＃39;I%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N8,
 12  sum(case when object_name like &＃39;J%&＃39; or object_name like &＃39;V%&＃39; then 1 else 0 end) N9
 13  from a;

Explained.

Elapsed: 00:00:00.01
SQL> @getplan
&＃39;general,outline,starts&＃39;

Enter value for plan type:

PLAN_TABLE_OUTPUT
--------------------------------------------------------------------------------------------
Plan hash value: 3918351354

---------------------------------------------------------------------------
| Id  | Operation          | Name | Rows  | Bytes | Cost (%CPU)| Time     |
---------------------------------------------------------------------------
|   0 | SELECT STATEMENT   |      |     1 |    66 | 12349   (1)| 00:02:29 |
|   1 |  SORT AGGREGATE    |      |     1 |    66 |            |          |
|   2 |   TABLE ACCESS FULL| A    |  3097K|   194M| 12349   (1)| 00:02:29 |
---------------------------------------------------------------------------

Note
-----
   - dynamic sampling used for this statement (level=2)  


可以看出，前者10次全表扫描，后者1次全表扫描。从而时间上也大大降低了。由58s降低到19s。
优化这个sql主要还是思路的转换，难点在于怎样把10次全表扫描转化成1次全表扫描。
在OLAP中，可以加并行使sql速度更快。


推荐阅读
  • join

    如何在MySQL中将零值替换为先前的非零值？

    本文介绍了如何在MySQL中将零值替换为先前的非零值的方法，包括使用内联查询和更新查询。同时还提供了选择正确值的方法。 ... [详细]
  • odbc

    使用Power Design和SQL Server进行数据库反向工程的方法详解

    本文介绍了如何使用Power Design（PD）和SQL Server进行数据库反向工程的方法。通过创建数据源、选择要反向工程的数据表，PD可以生成物理模型，进而生成所需的概念模型。该方法适用于SQL Server数据库，对于其他数据库是否适用尚不确定。详细步骤和操作说明可参考本文内容。 ... [详细]
  • join

    使用 Ubuntu 中的 Python 获取浏览器历史记录

    使用Ubuntu中的Python获取浏览器历史记录原文: ... [详细]
  • insert

    PHP中的MySQL函数库及其常用函数介绍

    本文由编程笔记小编整理，介绍了PHP中的MySQL函数库及其常用函数，包括mysql_connect、mysql_error、mysql_select_db、mysql_query、mysql_affected_row、mysql_close等。希望对读者有一定的参考价值。 ... [详细]
  • oracle

    Oracle中tnsnames.ora的作用和配置方法

    本文介绍了Oracle数据库中tnsnames.ora文件的作用和配置方法。tnsnames.ora文件在数据库启动过程中会被读取，用于解析LOCAL_LISTENER，并且与侦听无关。文章还提供了配置LOCAL_LISTENER和1522端口的示例，并展示了listener.ora文件的内容。 ... [详细]
  • sql

    Spring特性实现接口多类的动态调用详解

    Spring特性实现接口多类的动态调用详解
    本文详细介绍了如何使用Spring特性实现接口多类的动态调用。通过对Spring IoC容器的基础类BeanFactory和ApplicationContext的介绍，以及getBeansOfType方法的应用，解决了在实际工作中遇到的接口及多个实现类的问题。同时，文章还提到了SPI使用的不便之处，并介绍了借助ApplicationContext实现需求的方法。阅读本文，你将了解到Spring特性的实现原理和实际应用方式。 ... [详细]
  • insert

    Java String与StringBuffer的区别及其应用场景

    Java String与StringBuffer的区别及其应用场景
    本文主要介绍了Java中String和StringBuffer的区别，String是不可变的，而StringBuffer是可变的。StringBuffer在进行字符串处理时不生成新的对象，内存使用上要优于String类。因此，在需要频繁对字符串进行修改的情况下，使用StringBuffer更加适合。同时，文章还介绍了String和StringBuffer的应用场景。 ... [详细]
  • oracle

    Oracle分析函数first_value()和last_value()的用法及原理

    Oracle分析函数first_value()和last_value()的用法及原理
    本文介绍了Oracle分析函数first_value()和last_value()的用法和原理，以及在查询销售记录日期和部门中的应用。通过示例和解释，详细说明了first_value()和last_value()的功能和不同之处。同时，对于last_value()的结果出现不一样的情况进行了解释，并提供了理解last_value()默认统计范围的方法。该文对于使用Oracle分析函数的开发人员和数据库管理员具有参考价值。 ... [详细]
  • sql

    MyBatis错题分析解析及注意事项

    MyBatis错题分析解析及注意事项
    本文对MyBatis的错题进行了分析和解析，同时介绍了使用MyBatis时需要注意的一些事项，如resultMap的使用、SqlSession和SqlSessionFactory的获取方式、动态SQL中的else元素和when元素的使用、resource属性和url属性的配置方式、typeAliases的使用方法等。同时还指出了在属性名与查询字段名不一致时需要使用resultMap进行结果映射，而不能使用resultType。 ... [详细]
  • insert

    ASP.NET Tips: 获取插入记录的ID的方法详解

    本文详细介绍了在ASP.NET中获取插入记录的ID的几种方法，包括使用SCOPE_IDENTITY()和IDENT_CURRENT()函数，以及通过ExecuteReader方法执行SQL语句获取ID的步骤。同时，还提供了使用这些方法的示例代码和注意事项。对于需要获取表中最后一个插入操作所产生的ID或马上使用刚插入的新记录ID的开发者来说，本文提供了一些有用的技巧和建议。 ... [详细]
  • sql

    VB.NET在线急等问题解决方法，如何统计数据库字段下的数据并显示在文本框里？

    本文介绍了一个在线急等问题解决方法，即如何统计数据库中某个字段下的所有数据，并将结果显示在文本框里。作者提到了自己是一个菜鸟，希望能够得到帮助。作者使用的是ACCESS数据库，并且给出了一个例子，希望得到的结果是560。作者还提到自己已经尝试了使用"select sum(字段2) from 表名"的语句，得到的结果是650，但不知道如何得到560。希望能够得到解决方案。 ... [详细]
  • insert

    SpringJdbcTemplate的使用详解

    本文详细介绍了Spring的JdbcTemplate的使用方法，包括执行存储过程、存储函数的call()方法，执行任何SQL语句的execute()方法，单个更新和批量更新的update()和batchUpdate()方法，以及单查和列表查询的query()和queryForXXX()方法。提供了经过测试的API供使用。 ... [详细]
  • sql

    高质量SQL书写的30条建议

    高质量SQL书写的30条建议
    本文提供了30条关于优化SQL的建议，包括避免使用select *，使用具体字段，以及使用limit 1等。这些建议是基于实际开发经验总结出来的，旨在帮助读者优化SQL查询。 ... [详细]
  • sql

    如何查看mysql的安装路径

    本文介绍了通过mysql命令查看mysql的安装路径的方法，提供了相应的sql语句，并希望对读者有参考价值。 ... [详细]
  • oracle

    问题2：重新命名或者移动数据文件、日志文件到新的位置

    本文讨论了在数据库打开和关闭状态下，重新命名或移动数据文件和日志文件的情况。针对性能和维护原因，需要将数据库文件移动到不同的磁盘上或重新分配到新的磁盘上的情况，以及在操作系统级别移动或重命名数据文件但未在数据库层进行重命名导致报错的情况。通过三个方面进行讨论。 ... [详细]
author-avatar
心在想念-小凡
这个家伙很懒，什么也没留下！
Tags | 热门标签
RankList | 热门文章
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有