当前位置:  数据库>oracle

统计量收集Method_Opt参数使用

    来源: 互联网  发布时间:2017-06-05

    本文导语: 对Oracle优化器CBO而言,统计量是至关重要的工作基础。在早期的CBO版本中,我们使用analyze table方法进行统计量收集。到10g之后,这种方法被精细度更高的dbms_stats包取代。相比analyze table方法,dbms_stats在很多方面有不可取代的优...

对Oracle优化器CBO而言,统计量是至关重要的工作基础。在早期的CBO版本中,我们使用analyze table方法进行统计量收集。到10g之后,这种方法被精细度更高的dbms_stats包取代。相比analyze table方法,dbms_stats在很多方面有不可取代的优势。

 

下面是一个典型的dbms_stats方法调用。

 

 

SQL> exec dbms_stats.gather_table_stats(user,'T',cascade => true,method_opt => 'for all columns size auto');

 

PL/SQL procedure successfully completed

 

 

其中,method_opt参数是一个重要的工作控制参数,与表列统计量有关。目前的method_opt参数主要负责三部分职责:

 

ü用来指定对哪些数据列收集或者不收集统计量;

ü数据列直方图Histogram生成控制;

ü拓展统计量extended statistics数据收集;

 

本篇分别从实验的各个环节进行分析。

 

1、实验环境介绍

 

我们选择11gR2版本进行试验。

 

 

SQL> select * from v$version;

 

BANNER

---------------------------------------------------------------------

Oracle Database 11g Enterprise Edition Release 11.2.0.1.0 - Production

PL/SQL Release 11.2.0.1.0 - Production

CORE11.2.0.1.0Production

 

TNS for Linux: Version 11.2.0.1.0 - Production

NLSRTL Version 11.2.0.1.0 - Production

 

 

数据表T创建。

 

 

SQL> create table t as select * from dba_objects ;

Table created

 

SQL> exec dbms_stats.gather_table_stats(user,'T',cascade => true,method_opt => 'for all columns size auto');

 

PL/SQL procedure successfully completed

 

 

2、Method_Opt参数官方解析

 

从官方资料中,我们可以找到dbms_stats方法的说明如下:

 

 

procedure gather_table_stats

(ownname varchar2, tabname varchar2, partname varchar2 default null,

estimate_percent number default DEFAULT_ESTIMATE_PERCENT,

block_sample boolean default FALSE,

method_opt varchar2 default DEFAULT_METHOD_OPT,

degree number default to_degree_type(get_param('DEGREE')),

granularity varchar2 defaultDEFAULT_GRANULARITY,

cascade boolean default DEFAULT_CASCADE,

stattab varchar2 default null, statid varchar2 default null,

statown varchar2 default null,

no_invalidate boolean default

to_no_invalidate_type(get_param('NO_INVALIDATE')),

stattype varchar2 default 'DATA',

force boolean default FALSE);

 

--method_opt - method options of the following format

--

--method_opt:= FOR ALL [INDEXED | HIDDEN] COLUMNS [size_clause]

--FOR COLUMNS [size_clause]

--column|attribute [size_clause]

--[,column|attribute [size_clause] ... ]

--

--size_clause := SIZE [integer | auto | skewonly | repeat],

--where integer is between 1 and 254

--

--column:= column name | extension name | extension

--

--default is FOR ALL COLUMNS SIZE AUTO.

--The default value can be changed using set_param procedure.

--Optimizer related table statistics are always gathered.

--

--If an extension is provided, the procedure create the extension if it

--does not exist already. Please refer to create_extended_stats for

--description of extension.

 

 

从说明材料中,可以发现几个方面的内容:首先,method_opt并不只是gather_table_stats过程独有的参数,而是dbms_stats包若干方法中共有的一个控制参数。如果没有指定的话,Oracle选择了一个默认值DEFAULT_METHOD_OPT赋值。

 

在包声明中寻找DEFAULT_METHOD_OPT取值,可以找到一个定义值’z’。

 

 

DEFAULT_METHOD_OPTCONSTANT VARCHAR2(1) := 'Z';

 

 

取值内部Z是一个编码内部解析的原理,不是随便的字符可以得到解析。

 

 

SQL> exec dbms_stats.gather_table_stats(user,'T',method_opt => 'Z');

 

PL/SQL procedure successfully completed

 

SQL> exec dbms_stats.gather_table_stats(user,'T',method_opt => 'A');

 

begin dbms_stats.gather_table_stats(user,'T',method_opt => 'A'); end;

 

ORA-20000: Cannot parse for clause: A

ORA-06512: 在 "SYS.DBMS_STATS", line 20337

ORA-06512: 在 "SYS.DBMS_STATS", line 20360

ORA-06512: 在 line 1

 

 

从官方解析的看,11gR2这个参数的取值作用是for all columns size auto。注意:之前版本9i时,这个参数取值不是这个。

 

那么,这个method_opt默认取值for all columns size auto的作用是什么呢?这个取值是要给所有的数据列生成统计量,并且依据auto的原则生成直方图Histogram。

 

3、auto与直方图

 

直方图Histogram是Oracle为了解决倾斜列Skew进行的一种折中处理方法。因为如果一个列取值分布是不平均的,那么where条件中出现不同的取值,对应的最优执行计划可能是不同的。

 

但是,传统的密度、选择率等统计量是不能够反应取值分布差异的。所以,Oracle选择使用高度均衡和频度均衡直方图的方法对数据进行描述。

 

那么,是不是“描述”的越多越好呢?我们先不讨论正常数据���型列的数据分布是不是应该有很多的倾斜列。Oracle进行直方图的收集,要针对列每一个数据行进行复杂的检索动作,而且直方图数据要对应额外的存储空间。

 

如果给每一个数据列都收集统计量直方图,统计量收集过程要消耗很多的性能和空间。这就意味着,我们需要统计那些“需要收集统计量直方图”的列。

 

参数method_opt的默认值for all columns size auto是目前Oracle选择出的适应性最强的功能取值。我们本部分探讨一下该参数取值的机理。我们先看一下默认取值下的统计量信息。

 

 

 

SQL> exec dbms_stats.gather_table_stats(user,'T',cascade => true,method_opt => 'for all columns size auto');

 

PL/SQL procedure successfully completed

 

 

SQL> select column_name, histogram from dba_tab_col_statistics where wner='SYS' and table_name='T';

 

COLUMN_NAMEHISTOGRAM

------------------------------ ---------------

OWNERNONE

OBJECT_NAMENONE

SUBOBJECT_NAMENONE

OBJECT_IDNONE

DATA_OBJECT_IDNONE

OBJECT_TYPENONE

CREATEDNONE

LAST_DDL_TIMENONE

TIMESTAMPNONE

STATUSNONE

TEMPORARYNONE

GENERATEDNONE

SECONDARYNONE

NAMESPACENONE

EDITION_NAMENONE

 

15 rows selected

 

 

注意,此时Oracle为“all columns”也就是所有列生成了统计量,但是在目前情况下,没有一个直方图被生成。auto参数没有明确指定为哪个列生成直方图,更没有指定直方图bucket数量。

 

熟悉dba_objects数据源的朋友很清楚,一些数据列,如status,owner和object_type有明显的数据倾斜特性。

 

auto取值是和Oracle内部的column使用监控机制有关。我们站在Oracle的角度看待问题,auto选项让Oracle并不是在意所有数据列是否真正倾斜,因为这样做会去探究所有数据列一遍,从而消耗资源。Oracle的做法是:探究一下“使用过”的数据列是不是倾斜的,如果是倾斜的就生成直方图。

 

这就引入了基表col_usage$。这个内部数据表是列使用监控的一个重要结果记录,当一个SQL发出的时候,会将SQL使用数据列的情况作为统计项目进行记录。

 

 

 

SQL> select object_id from dba_objects where object_name='T' and wner='SYS';

 

OBJECT_ID

----------

78037

 

 

SQL> select * from col_usage$ where obj#=78037;

 

OBJ#INTCOL# EQUALITY_PREDS EQUIJOIN_PREDS NONEQUIJOIN_PREDS RANGE_PREDS LIKE_PREDS NULL_PREDS TIMESTAMP

---------- ---------- -------------- -------------- ----------------- ----------- ---------- ---------- -----------

 

 

以object_id作为检索项,我们可以明确的看到一个数据表的数据列被引用的情况。在之前的数据表T中,因为从来没有针对where列的检索条件,所以没有针对任何列的使用情况,进而也就在auto情况下不会去尝试检测是否需要生成直方图。

 

更多详情见请继续阅读下一页的精彩内容:


    
 
 
 
本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • linux 命令 统计两个文件夹下 不同的文件(只统计文件名)
  • shell脚本实现的网站日志分析统计(可以统计9种数据)
  • 如何得到一个字符串里的换行次数,我用StringTokenizer来统计的话如果有一个行没内容的话就会统计出错,好烦啊
  • Web日志统计工具 sawmill
  • 代码覆盖率统计工具gcov的扩展 lcov
  • 请问如何在UNIX下统计一批文件的大小啊?
  • php 统计字数(支持中英文)的实现代码
  • 源码统计工具 pepper
  • 邮件反病毒统计代理 DSPAM
  • Apache日志统计 GoAccess
  • 网站流量统计系统 AudiStat
  • 网页统计日志分析 SuperSeriousStats
  • 网站流量访问统计分析 SlimStat
  • JavaScript统计库 jStat
  • 如何用awk统计数据
  • 网络使用情况统计工具 AsItHappens
  • Oracle中关数据库对象的统计分析
  • 代码行数统计工具 uuStepCount
  • 磁盘使用统计工具 ncdu
  • Web网站统计 WebDruid


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,