最新文章專題視頻專題問答1問答10問答100問答1000問答2000關(guān)鍵字專題1關(guān)鍵字專題50關(guān)鍵字專題500關(guān)鍵字專題1500TAG最新視頻文章推薦1 推薦3 推薦5 推薦7 推薦9 推薦11 推薦13 推薦15 推薦17 推薦19 推薦21 推薦23 推薦25 推薦27 推薦29 推薦31 推薦33 推薦35 推薦37視頻文章20視頻文章30視頻文章40視頻文章50視頻文章60 視頻文章70視頻文章80視頻文章90視頻文章100視頻文章120視頻文章140 視頻2關(guān)鍵字專題關(guān)鍵字專題tag2tag3文章專題文章專題2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章專題3
問答文章1 問答文章501 問答文章1001 問答文章1501 問答文章2001 問答文章2501 問答文章3001 問答文章3501 問答文章4001 問答文章4501 問答文章5001 問答文章5501 問答文章6001 問答文章6501 問答文章7001 問答文章7501 問答文章8001 問答文章8501 問答文章9001 問答文章9501
當前位置: 首頁 - 科技 - 知識百科 - 正文

數(shù)據(jù)分布影響exp條件導出變慢的問題處理

來源:懂視網(wǎng) 責編:小采 時間:2020-11-09 10:20:51
文檔

數(shù)據(jù)分布影響exp條件導出變慢的問題處理

數(shù)據(jù)分布影響exp條件導出變慢的問題處理:oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的導出表,數(shù)據(jù)處理全部完成后,按照每個表的字段A1進行where條件過 oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的
推薦度:
導讀數(shù)據(jù)分布影響exp條件導出變慢的問題處理:oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的導出表,數(shù)據(jù)處理全部完成后,按照每個表的字段A1進行where條件過 oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的

oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的導出表,數(shù)據(jù)處理全部完成后,按照每個表的字段A1進行where條件過

oracle10.2.0.4
AIX5.3

夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的導出表,數(shù)據(jù)處理全部完成后,按照每個表的字段A1進行where條件過濾導出。

在數(shù)據(jù)處理過程中,由于無意義的嵌套循環(huán),導致對一張表的數(shù)據(jù)重復的進行I/O讀取。數(shù)據(jù)量大后,處理變慢,優(yōu)化需求就提上來了。

例如:

CURSOR cur_a1 is select code from cura1; LOOP select A1 into x_a1 from testa where ta1=cur_a1; begin --判斷sequence重置 select count(*) into v_count from sys.dba_objects where object_type='SEQUENCE' AND object_name = 'SEQUENCEname'; IF (v_icount > 0) THEN EXECUTE IMMEDIATE 'DROP SEQUENCE SEQUENCEname'; END IF; EXECUTE IMMEDIATE 'CREATE SEQUENCE SEQUENCEname INCREMENT BY 1 START WITH 1 MINVALUE 1 NOCYCLE NOCACHE NOORDER'; --執(zhí)行數(shù)據(jù)插入 insert into table (a1,a2,a3) select a1,SEQUENCEname.NEXTVAL,a3 from A1 where a1=x_a1;

為何說是無意義循環(huán),在我們的這套環(huán)境中,是根據(jù)表A中的字段A1中的非重復值數(shù)量進行循環(huán),A1字段相等的時候,A2字段取遞增序列SEQ作為A2字段的值,在每次循環(huán)初始,都會重置SEQ。唯一約束為A1+A2。而A2字段值在程序處理過程中毫無用處。因此計劃取消循環(huán),一次SEQ遞增直到處理完A表,確保A表A2字段值不會重復。

根據(jù)這思路,完成了優(yōu)化,大大提高了數(shù)據(jù)處理過程的耗時。

但是奇怪的是,就在優(yōu)化變更做完當天,導出的過程卻離奇的變慢了許多,以至于提高的時間被抹平。

經(jīng)過分析,發(fā)現(xiàn)在優(yōu)化前和優(yōu)化后,表的數(shù)據(jù)分布情況發(fā)生了變化,原先是根據(jù)A1字段排序插入A表,而優(yōu)化后一次生成數(shù)據(jù)插入A表,忽略了排序,因此導致A1字段索引聚族因子變差。從而影響[exptable=Aquery='whereA1like'1002%']語句的導出效率。

直接加上orderbya1發(fā)現(xiàn)報錯:

insert into testa (a1, a2, a3) select a1, SEQUENCEname.NEXTVAL, a3 from A order by a1; ORA - 02287 :sequence number not allowed here

ORACLE有如下限制:
RestrictionsonSequenceValuesYoucannotuseCURRVALandNEXTVALinthe
followingconstructs:
AsubqueryinaDELETE,SELECT,orUPDATEstatement
Aqueryofavieworofamaterializedview
ASELECTstatementwiththeDISTINCToperator
ASELECTstatementwithaGROUPBYclauseorORDERBYclause
ASELECTstatementthatiscombinedwithanotherSELECTstatementwiththeUNION,INTERSECT,orMINUSsetoperator
TheWHEREclauseofaSELECTstatement
TheDEFAULTvalueofacolumninaCREATETABLEorALTERTABLEstatement
TheconditionofaCHECKconstrain

調(diào)整語句結(jié)構(gòu)如下:

insert into testa (a1, a2, a3) select a1, SEQUENCEname.NEXTVAL, a3 from (select a1, a3 from A order by a1);

順利完成。

本文出自 “DBA的隨筆記錄” 博客,,請務(wù)必保留此出處

聲明:本網(wǎng)頁內(nèi)容旨在傳播知識,若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com

本文如未解决您的问题请添加抖音号:51dongshi(抖音搜索懂视),直接咨询即可。

文檔

數(shù)據(jù)分布影響exp條件導出變慢的問題處理

數(shù)據(jù)分布影響exp條件導出變慢的問題處理:oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的導出表,數(shù)據(jù)處理全部完成后,按照每個表的字段A1進行where條件過 oracle10.2.0.4AIX5.3夜間跑批的一個存儲過程,邏輯大致為數(shù)據(jù)庫內(nèi)部先進行數(shù)據(jù)處理后插入空的
推薦度:
  • 熱門焦點
專題
Top
fffffffffffff

抖音扫码关注

手机端二维码

每天分享百科知识!