久久精品国产精品国产精品污,男人扒开添女人下部免费视频,一级国产69式性姿势免费视频,夜鲁夜鲁很鲁在线视频 视频,欧美丰满少妇一区二区三区,国产偷国产偷亚洲高清人乐享,中文 在线 日韩 亚洲 欧美,熟妇人妻无乱码中文字幕真矢织江,一区二区三区人妻制服国产

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

揭密Oracle之 七种武器

發布時間:2025/4/14 编程问答 30 豆豆
生活随笔 收集整理的這篇文章主要介紹了 揭密Oracle之 七种武器 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

揭密Oracle之 七種武器 第一章 搭建測試環境

vage


揭密Oracle之 七種武器 ?第一章 搭建測試環境


(揭密Oracle之七種武器第二章地址:DTrace語法:跟蹤物理IO
http://www.itpub.net/thread-1609235-1-1.html

揭密Oracle之七種武器之三:破譯古老的謎題---共享CBC Latch的秘密
http://www.itpub.net/thread-1617245-1-1.html)

第一章 ?測試環境的搭建

面對越來越封閉的Oracle,你想揭開它神秘的面紗嗎。
奇奇怪怪的問題,總是查不出原因,你想揭開它背后的秘密嗎。
還等什么,DTrace+GDB,

有必要說明下,雖然我們只能在Solaris測試,但Oracle的工作原理,在
大部分平臺下,是一樣的 ?(可能Windows會有點不同吧)。我們用Dtrace分析Oracle的原理,比如在什么時候
、加什么樣的鎖、Pin、Latch或Mutex,加到什么操作為至釋放,會以怎樣的形式阻塞,等等,用這個原理,去
診斷其他平臺的問題。

1、安裝Solaris
首先你要有個測試環境,DTrace只有Solaris下有,我們就搭個Solaris的測試平臺吧。到Oracle官網上下個

Solaris,現在已經有11了,我下的是10,這是10的
鏈接:http://www.oracle.com/technetwork/server-storage/solaris10/overview/index.html 。如果你想用
11,當然也可以。對于我們測試Oracle,10和11差別不大的。
下載的文件,是個ISO文件,直接加載到虛擬機里安裝就可以了,安裝過程我不再說了,非常簡單。考慮到以后

我還要裝Oracle、建庫,磁盤最好搞大點,20G吧
。對了,我的虛擬機是VMWare 8.0.0 build-471780。你也可以選擇其他版本,或其他虛擬機。
2、安裝Oracle
(1)、下載Oracle
我們最好裝兩個版本,10GR2和11GR2。10G現在用的還比較多,而且10G相關DTrace和GDB的資料更多些,因為我
一直在用DTrace+GDB研究10G,后面我會逐步總結
一些我的研究結果。11GR2作為未來必定會流行的版本,有必要早做準備。

注意,11GR2在Solaris平臺,只有64位版本的。要求你的電腦要是64位才行。


(1)、創建Oracle用戶和Oinstall、DBA組
groupadd dba
groupadd oinstall

useradd -g oinstall -G dba -d /export/home/lhb -m oracle


(2)、設置內核參數
編輯/etc/system文件,增加如下行:
set shmsys:shminfo_shmmax=10737418240
set shmsys:shminfo_shmmin=1048576?
set shmsys:shminfo_shmseg=1000?
set shmsys:shminfo_shmmni=100?
set semsys:seminfo_semmns=700?
set semsys:seminfo_semmni=100
set semsys:seminfo_semmsl=256

我10G、11G都是這樣寫的。


(3)、設置oracle用戶下的.profile
我的.profile只有這些內容:
ORACLE_BASE=/export/home/oracle/opt/?
ORACLE_HOME=$ORACLE_BASE/product/10.2.0/?
LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME/lib:/usr/lib?
PATH=$PATH:/usr/ccs/bin:$ORACLE_HOME/bin
ORACLE_SID=h1
export ORACLE_BASE
export ORACLE_HOME
export LD_LIBRARY_PATH?
export PATH

export ORACLE_SID


(4)、安裝和建庫
解壓下載的Oracle安裝文件,開始安裝。
11G安裝畫面變了很多,但過程和10G大致上相差無幾。我安裝11GR2的時候,在環境檢查時,報swap和tmp不夠
大,直接忽略過去就行了。還有,在安裝的83%時,停了很
久。到底多久不知道,因為等了太久,都晚點12點多來,我一直有早睡早起的習慣,直接去睡了,第二天早上
起來一看,已經裝好了。

庫你怎么建都行,我一般是手動建,你當然可以選擇在安裝的時候一起建,這些基本的我就不再說了。


3、安裝GDB
到http://www.sunfreeware.com中,下載GDB的庫,我下載了這五個庫:
expat-2.0.1-sol10-x86-local.gz ? ?
gdb-6.8-sol10-x86-local.gz ? ?
libiconv-1.14-sol10-x86-local.gz ?
libintl-3.4.0-sol10-x86-local.gz
ncurses-5.7-sol10-x86-local.gz
用如下命令,依次安裝5個庫。注意,最好安照我上面的順序安裝,
gunzip expat-2.0.1-sol10-x86-local.gz?
pkgadd -d expat-2.0.1-sol10-x86-local.gz
安裝完后,將gdb的路徑,加入到/etc/profile中:
在/etc/profile中增加如下行:
PATH=$PATH:/usr/sfw/bin:/usr/local/bin
LD_LIBRARY_PATH=/usr/sfw/lib
export LD_LIBRARY_PATH
export PATH
好了,等測試環境建好后,我們來一步一步,用DTrace+GDB,刀劍合璧,讓Oracle沒有秘密。

========

揭密Oracle之七種武器二:DTrace語法:跟蹤物理IO

vage

揭密Oracle之七種武器二:DTrace語法:跟蹤物理IO

(第一章地址:
揭密Oracle之 七種武器 ?第一章 搭建測試環境
http://www.itpub.net/thread-1605241-1-1.html?
或參考我的BLOG www.MythData.com

揭密Oracle之七種武器之三:破譯古老的謎題---共享CBC Latch的秘密
http://www.itpub.net/thread-1617245-1-1.html



? ? ? ? 其實本章是以物理IO為例,介紹DTrace的基本語法。本篇內容還是比較多的,應該足夠有興趣的朋友

學習一周了。下周,再推出我的第三章。
? ? ? ? ?另外說明一下,我并不是DTrace專家,我用DTrace主要目的是研究Oracle。我們不會對DTrace作過多

深入的介紹(不過DTrace本身也沒有深入的東西,調試工具嗎,復雜的是要調試的目標),我們的主要內容,

還是逐步深入,介紹如何用DTrace分析、研究Oracle方法。
? ? ? ? 授人以魚,不如授人以漁。我相信,方法比結果重要。

? ? ? ? 本篇內容會用到一本書,Solaris 動態跟蹤指南,可以到這里下載。 ? D語言全面介紹.pdf (1.83?
MB, 下載次數: 1840) 這個是Solaris官方提供的文檔,而且是中文的。當字典來查,非常不錯。

第二章 ?DTrace語法:跟蹤物理IO

第一節 ?Hello World
? ? ? ? DTrace是什么,這個問題很容易回答:調試工具。具體我們可以這樣理解,Solaris在其內部,增加了
N多的觸發器,這些觸發器平時是Disable的,對性能沒有任
何影響。你可以通過DTrace,Enable某些觸發器。并且,在Enable的同時,還可以為這些觸發器指定動作。
? ? ? ? 比如,有一個I/O觸發器,你用DTrace Enable了它,同時,你定義動作,“每次發生I/O時,顯示出
I/O大小”。當然,還可以定義更復雜的動作,顯示I/O的內容
、甚至修改I/O數據。進程想往磁盤中寫個A,你可以用DTrace,將A換成B。當然,我們調試進程,一般不需要
修改,只需要觀察。
? ? ? ? 換成DTrace中的術語,觸發器就是Probe,可以譯為探針。探針并時都是關閉的,也就是Disable的。
我們可以使用DTrace,打開探針,并為探針指定動作。當探針
被觸發,你通過DTrace為探針定義的動作,就會被執行。
? ? ? ? 好,閑言少敘,試試我們的第一個DTrace程序吧。讓我們也來個DTrace版的“Hello World
”吧。
? ? ? ? 在root下,vi test1.d,輸入如下命令:
BEGIN
{
? ? printf("hello world,www.MythData.com ";
? ? exit(0);
}
如下執行此腳本:
# dtrace -s test1.d
結果顯示:
dtrace: script 'test1.d' matched 1 probe
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 3 ? ? ?1 ? ? ? ? ? ? ? ? ? ? ? ? ? :BEGIN hello world,www.MythData.com?
? ? ? ? 在此加上我的BLOG地址,我的那篇突然35歲,雖然被轉載的到處都是,但被截掉了我的BLOG地址。唉

。如果有人轉載的話,應該也會有人截掉的。
? ? ? ? 閑言少敘,上面就是顯示結果了。對于我的程序和輸出結果,略加說明。
? ? ? ? 1、BEGIN:它是DTrace的探針之一。也是最簡單的探針。它不和操作系統任何操作關聯,一般它用來

做DTrace程序運行的初始化工作。BEGIN探針中的代碼,會在
DTrace程序開始時運行。
? ? ? ? 2、大括號:如我們所見,探針名之下,就是大括號。這足以說明DTrace的設計者是C語言迷,將C語言

的格式帶入到了DTrace中來。
? ? ? ? 3、大括號中間的語句:這就是我們為BEGIN探針定義的動作了。包含兩條語句,顯示和退出。每條語

句之后以;號結尾。
? ? ? ? 4、關于這兩條語句,我就不再多說了,printf,在此的使用方法,完全和C語言一樣。
? ? ? ? 5、兩注意事項,(1)、大小寫是敏感的。(2)、如果不加exit(0)的話,此程序運行完將不會退出

。可以手工Ctrl+C退出。
? ? ? ? 輸出結果的話:
? ? ? ? 1、CPU列為3,說明此DTrace程序在運行時,剛好在3號CPU上執行命令。
? ? ? ? 2、ID列是探針編號。
? ? ? ? 3、FUNCTION:NAME,:BEGIN,探針名相關信息,這個后面再詳細說。
? ? ? ? 4、最后無列名的部分,hello world,www.MythData.com,就是我們程序的輸出結果了。
? ? ? ? 最后,每次運行此程序時,都要dtrace -s,太麻繁了。我們可以添加一個#!/usr/sbin/dtrace -s在

程序頭,如下所示:
#!/usr/sbin/dtrace -s
BEGIN
{
? ? printf("hello world,www.MythData.com ";
? ? exit(0);
}
? ? ? ? 保存,使用chmod 755 test1.d,賦上去可執行權限,如下方式執行:
# ./test1.d
dtrace: script './test1.d' matched 1 probe
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 0 ? ? ?1 ? ? ? ? ? ? ? ? ? ? ? ? ? :BEGIN hello world,www.MythData.com?


第二節 ?詳述探針(Probe)

? ? ? ? 完整的探針描述符,絕對不至上節我們遇到的BEGIN這么簡單。它包括PROVIDER(提供器),MODULE(

模塊名),FUNCTION(函數名)和NAME(探針名稱)四部分
。BEGIN只是最簡單的一個特例。
? ? ? ? PROVIDER是最上層的稱號,比如有IO PROVIDER,進程PROVIDER,等等。每種PROVIDER根據其包含的探

針不同,又分為N種MODULE。MODULE之中又包含各種FUNCTION
,最后的NAME是探針名,通常是進入、開始、退出、完成這些東西,在進入一個FUNCTION(函數)、退出函數、

完成函數等等動作發生時被觸發。
? ? ? ? 我們以IO為例,這應該是我們最關心的話題。操作系統中大部分IO事件的開始處,有這樣一個探針:
io:genunix:bdev_strategy:start
? ? ? ? io是PROVIDER,genunix是MODULE。bdev_strategy是FUNCTION,所有串行磁盤I/O事件將調用

bdev_strategy函數完成。最后一個,start,bdev_strategy函數入口
處的探針。
? ? ? ? 我們可以這樣稱呼它,io提供器下的genunix模塊中的bdev_strategy函數上的start探針。我們可以理

解為某數據庫下某Schema中的某個表上的某某觸發器。一個
探針的稱呼其實無所謂。了解Solaris一供為我們提供了什么PROVIDER(提供器),這些提供器下都有什么

MODULE(模塊),這些模塊中都有什么FUNCTION(函數),以及
這些函數上都有什么探針,這才是重要的。關于這點,我們可以參考《Solaris 動態跟蹤指南》,這是本書像

一本字典,詳細介紹了所有的提供器、模塊等等。
? ? ? ? 好,先以io:genunix:bdev_strategy:start為例子,測試一下吧:
vi test2.d
#!/usr/sbin/dtrace -s
BEGIN
{
? ? i=0;
}
io:genunix:bdev_strategy:start
{
? ? printf("%d number physio IO",i);
? ? i++;
}
保存,chmod 755 test2.d,這是執行的結果:
# ./test2.d
dtrace: script './test2.d' matched 2 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 0 number physio IO
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 1 number physio IO
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 2 number physio IO
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 3 number physio IO
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 4 number physio IO
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start 5 number physio IO
……………………
? ? ? ? 每有一次IO,程序會都會顯示一行,“ ?1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:star”,這一部分


是固定輸出,這一部分其實可以用一個參數關掉。參數我們以
后再說。后面“ 0 number physio IO”,是我們程序的輸出結果。
? ? ? ? 如果我們不按Ctrl+C,程序會一直顯示下去。每有一次串行IO發生,準確說是每調用一次


bdev_strategy函數,探針被觸發一次,就會顯示一行。
? ? ? ? 只顯示IO的次數,也沒啥意義。其實我們可以顯示更多的東西。但要對IO類探針進一步了解些。
? ? ? ? bdev_strategy既然被叫作函數,是函數的話,當然有參數。它一共有3個參數,參數1是bufinfo_t型

的結構,參數2是devinfo_t型結構,參數3是fileinfo_t型結
構。可以參見《Solaris 動態跟蹤指南》 356頁。
? ? ? ? 另外,結構,Struct,C語言的基本東西。不會的話,去看看潭浩強的C語言吧。二級C語言,我想我們

都應該沒啥問題吧。確定寫DTrace腳本,連二級C都不需要,
只需要對C語言有最基本的了解即可。
? ? ? ? 這三個結構當中,fileinfo_t包含的有I/O所針對的文件名,請允許我粘一段《Solaris 動態跟蹤指南

》 359頁的內容,fileinfo_t結構的定義:
typedef struct fileinfo?
{
? ? ? ? string fi_name; ? ? ? ? /* name (basename of fi_pathname) */
? ? ? ? string fi_dirname; ? ? ? ? /* directory (dirname of fi_pathname) */
? ? ? ? string fi_pathname; ? ? ? ? /* full pathname */
? ? ? ? offset_t fi_offset; ? ? ? ? /* offset within file */
? ? ? ? string fi_fs; ? ? ? ? ? ? ? ? /* filesystem */
? ? ? ? string fi_mount; ? ? ? ? /* mount point of file system */
} fileinfo_t;
? ? ? ? 在此,照顧一下不會C語言的人,簡單說明一下,如果我們要訪問結構中的內容,格式是“結構名.域

”,或者“結構指針->域”。在DTrace中,我們得到的一般都
是指針。
? ? ? ? 好,下面我們改一下腳本程序:
io:genunix:bdev_strategy:start
{
? ? printf("%s",args[2]->fi_pathname);
}
? ? ? ? args[2],是bdev_strategy函數的第三個參數,這是Dtrace中的固定用法。DTrace中還會有一些類似

的固定用法,可以參考《Solaris 動態跟蹤指南》P68頁,內
置變量。我們以后還會用到一些其他的。
? ? ? ? 在bdev_strategy函數中,第三個參數是fileinfo_t型的指針,也就是說,我們可以用“args[2]->域

”的格式,訪問fileinfo_t型結構中的域。我們此外訪問的域
是fi_pathname,也就是文件的完整路徑加名字,形式就是如上面所示:args[2]->fi_pathname。
這是我執行后的結果:
# ./test2.d
dtrace: script './test2.d' matched 2 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 2 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 2 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 0 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 0 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start <none>
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start <none>
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start <none>
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start <none>
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl
? ? ? ? 可以看到,有很多控制文件的寫。隨帶說一下,我這個測試庫很閑,沒有任何操作。但你可以看著表


統計一下,不超過3秒,肯定會有一次控制文件的IO操作。原
因是什么,我就不用再說了吧。
? ? ? ? 再進一步的,Oracle每次控制文件的IO是多大呢? IO的大小在bufinfo_t結構中的b_bcount域,你可

以查看《Solaris 動態跟蹤指南》 356頁,為了節省篇幅,我
就不再粘過來了。bufinfo_t結構的指針,是bdev_strategy的第一個參數,也就是args[0]。因此,我們可以如

下再次修改代碼:

io:genunix:bdev_strategy:start
{
? ? printf("%s %d",args[2]->fi_pathname,args[0]->b_bcount);
}
這是我的執行結果:
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192
? 2 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /var/tmp/Exwla4xc 8192
? 2 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/redo03 4096
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192
? ? ? ? 控制文件的IO大小,很整齊的都是8192字節,8K,控制文件的塊大小。出乎我意料的是,有一個Redo

文件:redo03,它的IO大小是4096。我以前一直以為,應該是
512才對,因為Solaris下,Redo的塊大小就是512字節啊(我碰到的系統,好像只有HP的不是512)。
? ? ? ? 不急,我們還沒有搞清楚這些IO是讀還是寫呢,說不定是歸檔的讀Redo IO呢。還是bufinfo_t結構,

b_flags域,說明了IO類型。關于這個域,在操作系統內部定
義了幾個標志(就是用#define 定義的),B_WRITE代表IO是寫,B_READ代表是讀,還有些其他的,自己到357

頁查吧。
? ? ? ? 我將代碼修改如下,添加上去IO類別的判斷:
io:genunix:bdev_strategy:start
{
? ? printf("%s %d %s",args[2]->fi_pathname,args[0]->b_bcount,args[0]->b_flags&B_READ?"R":"W" );
}
? ? ? ? args[0]->b_flags&B_READ?"R":"W",這種使用形式,條件表達式,是我們以后常用的形式,因為

DTrace中沒有if、while等流程控制語句,所以條件表達式將是if
的常用替代者,但它必竟替代不了復雜的控制語句。
? ? ? ? 仍然是為了程序不太好的人,介紹一下這個條件表達式:“條件?值1?值2”,將條件為True,值1為

整個條件表達式的值。否則,值2為整個條件表達式的值。
這是執行結果:
? 3 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192?

W
? 3 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192?

W
? 2 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/redo01 4096 W
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192?

W
? 1 ? ?781 ? ? ? ? ? ? ?bdev_strategy:start /export/home/oracle/opt/dbdata/h1/control01.ctl 8192?

W
………………
? ? ? ? 控制文件IO也全是寫,還有,中間的Redo文件IO,是我專門修改1行,Commit一下產生的,IO大小是


4096字節,而且是寫IO。看來,的確是LGWR在寫Redo01。我們
可以觀察一會兒,不會發現Redo文件有512字節IO,這也說明了一個我之前一直忽視的問題,先賣個關子,我們


待會再討論。
? ? ? ??
? ? ? ? 我們為io:genunix:bdev_strategy:start處的探針定義了動作,當運行此DTrace腳本時,我們就開啟


了探針io:genunix:bdev_strategy:start。但有些IO,并不是
通過bdev_strategy函數完成的,探針io:genunix:bdev_strategy:start捕獲不得這些IO。為了開啟更多的探針


、捕獲更多的IO操作,在完整的探針描述符中,我們可以確
實部分內容,下面,如下修改程序:
io:genunix::start
{
? ? printf("%s %d %s",args[2]->fi_pathname,args[0]->b_bcount,args[0]->b_flags&B_READ?"R":"W" );
}
腳本程序運行后的提示:
# ./test2.d
dtrace: script './test2.d' matched 4 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/control01.ctl?

8192 W
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/control01.ctl?

8192 W
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/control01.ctl?

8192 W
? ? ? ? 其中,第一行“dtrace: script './test2.d' matched 4 probes”,說明一共開啟了4個探針,比之

前的測試,多開啟了兩個探針。
? ? ? ? 我們還可以進一步省略,io:::start,這將開啟7個探針。我就不再測試了。但我們不能寫成:::start

,或io:::這樣的形式。
? ? ? ? 我們還可以使用通配符,如“i*:::start”,這就是打開所有i開頭的提供器中的所有模塊、所有函數

的Start探針。當然,我們也可以在模塊、函數名中,使用通
配符,但不能在探針名中使用通配符。比如,這樣將是錯誤的:“io:::st*”。通配符還可以是問號,比如:

“i?:::start”。 * 號代表所有字符,一個 ? 號,只能代表
一個字符。
? ? ? ? 探針的使用,說的也就差不多了,最后再來一個總結,我們如何知道Solaris有哪些探針,當然,我們

可以查看《Solaris 動態跟蹤指南》。除了這個之外,
dtrace -l 命令可以查看所有的探針:
# dtrace -l|wc -l
? ?51805
? ? ? ? 我使用的Solaris中,一共有5萬多個探針。
? ? ? ? 我們還可以顯示某一個提供器下所有探針,這樣更有針對性,比如,顯示io提供器下有什么模塊、函

數、探針:
# dtrace -lP io
? ?ID ? PROVIDER ? ? ? ? ? ?MODULE ? ? ? ? ? ? ? ? ? ? ? ? ?FUNCTION NAME
? 767 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ? ? ? ? biodone done
? 768 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ? ? ? ? biowait wait-done
? 769 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ? ? ? ? biowait wait-start
? 780 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ?default_physio start
? 781 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ? bdev_strategy start
? 782 ? ? ? ? io ? ? ? ? ? genunix ? ? ? ? ? ? ? ? ? ? ? ? ? aphysio start
2530 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ?nfs4_bio done
2531 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ?nfs3_bio done
2532 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ? nfs_bio done
2533 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ?nfs4_bio start
2534 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ?nfs3_bio start
2535 ? ? ? ? io ? ? ? ? ? ? ? nfs ? ? ? ? ? ? ? ? ? ? ? ? ? nfs_bio start
? ? ? ? 不多,io提供器下,只有13個探針。
? ? ? ? 好了,探針的內容我們就說到這兒,下面,下一項內容:謂詞。


第三節 謂詞


? ? ? ? 謂詞其實就是條件語句,減化版的條件語句。比如,我們繼續前面的例子,我只想觀察一下針對Redo


文件的IO,我們可以這樣做,先用如下命令確認一下當前Redo
文件是誰:
set linesize 10000
select * from v$log;
? ? GROUP# ? ?THREAD# ?SEQUENCE# ? ? ?BYTES ? ?MEMBERS ARC STATUS ? ? ? ? ? FIRST_CHANGE#?


FIRST_TIM
---------- ---------- ---------- ---------- ---------- --- ---------------- -------------?


---------
? ? ? ? ?1 ? ? ? ? ?1 ? ? ? ?470 ? 62914560 ? ? ? ? ?1 YES ACTIVE ? ? ? ? ? ? ? ? 9387236 05-


MAY-12
? ? ? ? ?2 ? ? ? ? ?1 ? ? ? ?471 ? 62914560 ? ? ? ? ?1 NO ?CURRENT ? ? ? ? ? ? ? ?9388037 05-


MAY-12
? ? ? ? ?3 ? ? ? ? ?1 ? ? ? ?469 ? 62914560 ? ? ? ? ?1 YES INACTIVE ? ? ? ? ? ? ? 9386469 05-


MAY-12
2號Redo文件是當前Redo文件,再如下確認一下2號Redo文件是誰:
select member from v$logfile where group#=2;
MEMBER
-------------------------------------------------------------------------------------------------


-----------------------------------------------------
/export/home/oracle/opt/dbdata/h1/redo2.log
? ? ? ? 好,如下修改腳本:
io:::start
/ args[2]->fi_pathname=="/export/home/oracle/opt/dbdata/h1/redo2.log" /
{
? ? ? ? printf("%s %s %d %s\n",args[1]->dev_statname,args[2]->fi_pathname,args[0]->b_bcount,args


[0]->b_flags&B_READ?"R":"W" );
}
? ? ? ? 探針描述符我簡寫為:io:::start,我開啟了所有IO開始處的探針,攔截io提供器下所有的IO函數調


用。在探針描述符之下的 / ………… / ,就是本節所要介紹
的謂詞。簡單點說,就是條件。當探針被觸發后,只有滿足謂詞條件,才會執行探針下的動作。
? ? ? ? 結合上面的程序,也就是當有IO發生時,只有當IO是針對redo2.log這個文件的,才會執行下面的


Printf命令。
? ? ? ? 開一個數據庫會話,使用update命令更新一行,觀察一下行針對Redo的IO。
? ? ? ? 我針對一個很小的表,執行如下命令:
SQL> update a1 set id=id+0 where id=1;
1 row updated.
SQL> commit;
Commit complete.
? ? ? ? 觀察結果, update a1 set id=id+0 where id=1時,并沒有Redo的IO,這是因為在全新的IMU模式下


,Redo機制Oracle做了很大調整,DML語句執行時,只要沒有
超過private strand大小,日志不會被寫進Log Buffer。關于這些內容,后面我們專門開個帖子詳細討論吧。


在Commit時,就有了如下輸出:
# ./test2.d
dtrace: script './test2.d' matched 7 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo2.log?


4096 W
? ? ? ? 有4096字節的針對Redo2.log的寫IO。但是,注意,并不是每次提交時,都會有IO。下面是我做的一個


完整測試,我一共執行了上面的Update、commit命令共10次
,有6次commit時有IO:
# ./test2.d
dtrace: script './test2.d' matched 7 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? 3 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? 1 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? 3 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? 2 ? ?782 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/redo3.log?


4096 W
? ? ? ? 我們可以用truss 跟蹤一下lgwr進程,每次提交時,lgwr都會調用pwrite64函數,寫Redo文件。寫的


大小不等,最小時會是512字節。而且,每次提交時,都會寫
Redo文件。這就是Oracle的運行法則之一嗎,提交時,一定會寫Redo文件。但是,如果你使用的是文件系統,


對日志文件的寫,操作系統有可能只是暫時先寫進主機的緩存
當中。
? ? ? ? 當然,在Solaris下,我們可以mount -o directio 這樣Mount磁盤,所有IO都將是直接IO了。
? ? ? ? 使用文件系統是危險的。我只了解Oracle,不了解各種文件系統。嚴謹點的說法,使用某些文件系統


存放Redo文件是危險的。有可能造成提交后的數據丟失。如果
你決定使用文件系統,一定要詳細了解下你的文件系統,針對Redo文件,是否是直接IO,或者在突然當機后的


處理,有沒有類似Oracle的實例恢復機制。
? ? ? ? 我們可以測試一下,做一個DML操作,提交,然后馬上關掉主機電源(我是Power Off掉虛擬機的電源


),再重新啟動虛擬機、數據庫,查看剛才已經提交DML的結
果,你會發現,有時DML的結果會丟失掉的。注意,是已提交的DML結果會丟失。
? ? ? ? 在謂詞中,我們可以使用常見的||、&&、!,就是或、與、非。比如,我共有三個日志文件,上面的


謂詞我捕獲一個日志文件redo2.log的IO,為了三個文件都捕
獲,可以如下改寫:
io:::start
/ args[2]->fi_pathname=="/export/home/oracle/opt/dbdata/h1/redo1.log" ||?
? args[2]->fi_pathname=="/export/home/oracle/opt/dbdata/h1/redo2.log" ||
? args[2]->fi_pathname=="/export/home/oracle/opt/dbdata/h1/redo3.log" /
{
? ? ? ? printf("%s %s %d %s\n",args[1]->dev_statname,args[2]->fi_pathname,args[0]->b_bcount,args


[0]->b_flags&B_READ?"R":"W" );
}
? ? ? ? 謂詞中我使用兩個||符號,也就是“或”,將三個條件連接起來。只要有任意一個條件滿足,都會執


行下面的printf命令。這樣,無論日志怎么切換,我們都可以
觀察Redo的IO情況了。
? ? ? ? 那么,ASM會不會有這樣的情況呢,我們可以測試下。
? ? ? ? 首先,配置ASM。我們先在10G下測試吧,10G的ASM配置比較簡單,網上資料也比較多。11GR2的,我們


以后再配置、觀察。
(1)、配置ASM
# export ORACLE_HOME=/export/home/oracle/opt//product/10.2.0/
# cd $ORACLE_HOME/bin
# ./localconfig add
(2)、準備ASM參數文件
$ cat asmpfile.ora
instance_type=asm
cluster_database=false
asm_diskgroups=dg1
asm_diskstring='/dev/rdsk/c*'
processes=200
remote_login_passwordfile=exclusive
core_dump_dest=/export/home/oracle/opt/admin/myasm/cdump
user_dump_dest=/export/home/oracle/opt/admin/myasm/udump
background_dump_dest=/export/home/oracle/opt/admin/myasm/bdump
(3)、啟動ASM實例
? ? ? ? 先要保證參數文件中background_dump_dest幾個參數中所指定的位置是有的,如下啟動ASM實例即可:
ORACLE_SID=myasm
sqlplus / as sysdba
create spfile from pfile='/export/home/oracle/asmpfile.ora';
startup nomount;
? ? ? ? 在我博客上有一篇文章,專門講如何配置ASM的:http://space.itpub.net/321157/viewspace-718805
(4)、給虛擬機添加新的磁盤。
? ? ? ? 這個我就不多說了,要先關掉虛擬機,添加完磁盤再重啟。先添加兩塊吧,大小不用太大。
(5)、格式化
? ? ? ? 格式化的步驟比較長,我寫的詳細些:
# format ? ?<----------------------------------format ,格式化命令。
Searching for disks...done
AVAILABLE DISK SELECTIONS:
? ? ? ?0. c0d1 <DEFAULT cyl 2085 alt 2 hd 255 sec 63>
? ? ? ? ? [url=]/pci@0,0/pci-ide@7,1/ide@1/cmdk@1,0[/url]
? ? ? ?1. c1t1d0 <DEFAULT cyl 98 alt 2 hd 64 sec 32>
? ? ? ? ? [url=]/pci@0,0/pci15ad,1976@10/sd@1,0[/url]
? ? ? ?2. c1t3d0 <DEFAULT cyl 98 alt 2 hd 64 sec 32>
? ? ? ? ? [url=]/pci@0,0/pci15ad,1976@10/sd@3,0[/url]
? ? ? ?3. c2t0d0 <DEFAULT cyl 98 alt 2 hd 64 sec 32>
? ? ? ? ? [url=]/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@0,0[/url]
? ? ? ?4. c2t1d0 <DEFAULT cyl 98 alt 2 hd 64 sec 32>
? ? ? ? ? [url=]/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0[/url]
Specify disk (enter its number):1 ? ?<-------------------------除了c0d1是我安裝系統時,原始創建的


磁盤外,剩下四個是后面添加的。此處我選擇1號磁盤,
c1t1d0。
selecting c1t1d0
[disk formatted]


FORMAT MENU:
? ? ? ? disk ? ? ? - select a disk
? ? ? ? type ? ? ? - select (define) a disk type
? ? ? ? partition ?- select (define) a partition table
? ? ? ? current ? ?- describe the current disk
? ? ? ? format ? ? - format and analyze the disk
? ? ? ? fdisk ? ? ?- run the fdisk program
? ? ? ? repair ? ? - repair a defective sector
? ? ? ? label ? ? ?- write label to the disk
? ? ? ? analyze ? ?- surface analysis
? ? ? ? defect ? ? - defect list management
? ? ? ? backup ? ? - search for backup labels
? ? ? ? verify ? ? - read and display labels
? ? ? ? save ? ? ? - save new disk/partition definitions
? ? ? ? inquiry ? ?- show vendor, product and revision
? ? ? ? volname ? ?- set 8-character volume name
? ? ? ? !<cmd> ? ? - execute <cmd>, then return
? ? ? ? quit
format> fdisk ? ?<------------------------應該先fdisk一下
No fdisk table exists. The default partition for the disk is:
? a 100% "SOLARIS System" partition
Type "y" to accept the default partition, ?otherwise type "n" to edit the
partition table.
y <-----------------------------此處輸入y
format> partition ? <---------------------進入分區命令
PARTITION MENU:
? ? ? ? 0 ? ? ?- change `0' partition
? ? ? ? 1 ? ? ?- change `1' partition
? ? ? ? 2 ? ? ?- change `2' partition
? ? ? ? 3 ? ? ?- change `3' partition
? ? ? ? 4 ? ? ?- change `4' partition
? ? ? ? 5 ? ? ?- change `5' partition
? ? ? ? 6 ? ? ?- change `6' partition
? ? ? ? 7 ? ? ?- change `7' partition
? ? ? ? select - select a predefined table
? ? ? ? modify - modify a predefined partition table
? ? ? ? name ? - name the current table
? ? ? ? print ?- display the current table
? ? ? ? label ?- write partition map and label to the disk
? ? ? ? !<cmd> - execute <cmd>, then return
? ? ? ? quit
partition> print ? ? ?<-------------------查看分區狀態
Current partition table (original):
Total disk cylinders available: 98 + 2 (reserved cylinders)
Part ? ? ?Tag ? ?Flag ? ? Cylinders ? ? ?Size ? ? ? ? ? ?Blocks
? 0 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 1 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 2 ? ? backup ? ?wu ? ? ? 0 - 97 ? ? ? 98.00MB ? ?(98/0/0) 200704 ?<-------2號分區已經被系統使用
? 3 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 4 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 5 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 6 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 7 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
? 8 ? ? ? boot ? ?wu ? ? ? 0 - ?0 ? ? ? ?1.00MB ? ?(1/0/0) ? ?2048 ?<-------8號分區也已經被系統使



? 9 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
partition> 0 ? <--------------------------------------選擇第0號分區,也可以選擇1號、3號或其他的,


但不能選擇2號、8號這兩個已經占用的。
Part ? ? ?Tag ? ?Flag ? ? Cylinders ? ? ?Size ? ? ? ? ? ?Blocks
? 0 unassigned ? ?wm ? ? ? 0 ? ? ? ? ? ? 0 ? ? ? ? (0/0/0) ? ? ? 0
Enter partition id tag[unassigned]: ? ?<-------- 缺省,直接回車
Enter partition permission flags[wm]: ?<-------- 缺省,直接回車
Enter new starting cyl[0]:1 ? ? ? ? ? ?<-------- 如果要用ASM,此處要從1開始,否則可以從0開始
Enter partition size[0b, 0c, 0e, 0.00mb, 0.00gb]: 95mb ?<-------- 輸入大小
partition> label ? <-------------設置label
Ready to label disk, continue? y ?<------------輸入y
partition> quit ? ?<-------------退出partition,回到Format
FORMAT MENU:
? ? ? ? disk ? ? ? - select a disk
? ? ? ? type ? ? ? - select (define) a disk type
? ? ? ? partition ?- select (define) a partition table
? ? ? ? current ? ?- describe the current disk
? ? ? ? format ? ? - format and analyze the disk
? ? ? ? fdisk ? ? ?- run the fdisk program
? ? ? ? repair ? ? - repair a defective sector
? ? ? ? label ? ? ?- write label to the disk
? ? ? ? analyze ? ?- surface analysis
? ? ? ? defect ? ? - defect list management
? ? ? ? backup ? ? - search for backup labels
? ? ? ? verify ? ? - read and display labels
? ? ? ? save ? ? ? - save new disk/partition definitions
? ? ? ? inquiry ? ?- show vendor, product and revision
? ? ? ? volname ? ?- set 8-character volume name
? ? ? ? !<cmd> ? ? - execute <cmd>, then return
? ? ? ? quit
format> type ? ? ? ? ?<----------------------------選擇類型
AVAILABLE DRIVE TYPES:
? ? ? ? 0. Auto configure
? ? ? ? 1. DEFAULT
? ? ? ? 2. other
Specify disk type (enter its number)[1]: 1 ? ?<---------------------此處選DEFAULT
selecting c1t1d0
[disk formatted]
format> save ? ? ? ? ? ? ? ? ? <-----------------------------此處,輸入save,保存剛才做的所有工作
Saving new disk and partition definitions
Enter file name["./format.dat"]: ? ? ? ?<-----------------------此處直接回車
format> quit ? ? ? ? ? ? <---------------------退出
#
? ? ? ? 然后到剛才啟動的ASM實例中,確定asm_diskstring參數的值為/dev/rdsk/c*:
SQL> show parameter string
NAME ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? TYPE ? ? ? ?VALUE
------------------------------------ ----------- ------------------------------
asm_diskstring ? ? ? ? ? ? ? ? ? ? ? string ? ? ?/dev/rdsk/c*
? ? ? ? 查看我們剛才Format的磁盤:
SQL> select path from v$asm_disk;
PATH
--------------------------------------------------------------------------------
/dev/rdsk/c0d1s0
/dev/rdsk/c0d1s1
/dev/rdsk/c0d1s7
/dev/rdsk/c0d1s9
/dev/rdsk/c1t1d0s0
? ? ? ? /dev/rdsk/c1t1d0s0,即為我們剛才Format的磁盤。c0d1s9這些不是,這些是裝系統時建的盤。
? ? ? ? 說到這兒,補充一下Solaris下磁盤名的格式:
/dev/[r]dsk/cXtXdXsX
c:邏輯控制器號(邏輯控制器)
t:物理總線目標號
d:磁盤或邏輯單元號(LUN)
s:分區號
如c1t1d0s0表示1號控制器,1號磁盤,0號LUN,0號分區。
? ? ? ??
? ? ? ? 分完區后,不需要設置屬主,ASM就可以自動識別到了。再把其他的盤也Format一下,讓ASM可以識別


到。
? ? ? ? 我最終選擇了這兩塊盤創建DG:
SQL> create diskgroup dg1 external redundancy disk '/dev/rdsk/c2t1d0s3','/dev/rdsk/c1t3d0s3';
Diskgroup created.
? ? ? ??
? ? ? ? 然后我們把Redo挪到ASM的dg1中,我在asmcmd中,在DG1里面建了一個redo目錄,然后到數據庫實例中


,將組2、組3挪進了ASM。在刪除組1、再添加組1到ASM中時
,報ASM空間不足。算了,我的磁盤太小了。
alter database drop logfile group 2;
alter database add logfile group 2 ('+DG1/redo/redo2.log') size 60m reuse;
alter database drop logfile group 3;
alter database add logfile group 3 ('+DG1/redo/redo3.log') size 60m reuse;
alter database drop logfile group 1;
? ? ? ? 現在我只有兩組日志,都在ASM中,對于我們測試來說,兩組已經夠了:
SQL> select * from v$log;
? ? GROUP# ? ?THREAD# ?SEQUENCE# ? ? ?BYTES ? ?MEMBERS ARC STATUS ? ? ? ? ? FIRST_CHANGE#?


FIRST_TIM
---------- ---------- ---------- ---------- ---------- --- ---------------- -------------?


---------
? ? ? ? ?2 ? ? ? ? ?1 ? ? ? ?489 ? 62914560 ? ? ? ? ?1 NO ?CURRENT ? ? ? ? ? ? ? ?9400623 07-


MAY-12
? ? ? ? ?3 ? ? ? ? ?1 ? ? ? ? ?0 ? 62914560 ? ? ? ? ?1 YES UNUSED ? ? ? ? ? ? ? ? ? ? ? 0
? ? ? ? 好了,開始我們的測試吧。修改一下腳本:
io:::start
{
? ? ? ? printf("%s %s %d %s\n",args[1]->dev_statname,args[2]->fi_pathname,args[0]->b_bcount,args


[0]->b_flags&B_READ?"R":"W" );
}
? ? ? ? 將上面所加的args[2]->fi_pathname=="/export/home/oracle/opt/dbdata/h1/redo1.log" ? ? ? ?這


種謂詞去掉。
# ./test2.d
dtrace: script './test2.d' matched 7 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 1 ? 3092 ? ? ? ? ? ? default_physio:start sd5 <none> 4096 W
? 1 ? 3092 ? ? ? ? ? ? default_physio:start sd2 <none> 4096 W
? 3 ? 3093 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/control01.ctl?


8192 W
? 3 ? 3093 ? ? ? ? ? ? ?bdev_strategy:start cmdk0 /export/home/oracle/opt/dbdata/h1/control01.ctl?


8192 W
……………………………………
……………………………………
……………………………………
? ? ? ? 由于打開了7個探針,所有IO開始時的操作都會被我們捕獲,因此,輸出信息會比較多。
? ? ? ? 在Oracle 會話中,修改一行數據,再提交,可以觀察到這樣的IO:
? 2 ? 3094 ? ? ? ? ? ? ? ? ? ?aphysio:start sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? ? ? ? [url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url],這一串東西是啥?只要顯示一下


ASM中的磁盤就明了了,我的ASM DG1 中包含這兩塊盤/dev/rdsk/c2t1d0s3,
/dev/rdsk/c1t3d0s3。


# ls -lFrt /dev/rdsk/c2t1d0s3
lrwxrwxrwx ? 1 root ? ? root ? ? ? ? ?64 Mar 17 10:03 /dev/rdsk/c2t1d0s3 ->?


../../devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw*
# ls -lFrt /dev/rdsk/c1t3d0s3
lrwxrwxrwx ? 1 root ? ? root ? ? ? ? ?50 Mar 17 10:03 /dev/rdsk/c1t3d0s3 ->?


../../devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw
? ? ? ? 經過觀察,可以發現,剛才的IO,其實是針對/dev/rdsk/c1t3d0s3的,這正是DG1中的一塊盤。接下來


我們如下修改腳本:
io:::start
/ args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url]" ||
? args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url]"?


/
{
? ? ? ? printf("%s %s %d %s\n",args[1]->dev_statname,args[2]->fi_pathname,args[0]->b_bcount,args


[0]->b_flags&B_READ?"R":"W" );
}
? ? ? ? 我們只觀察針對這兩個磁盤的IO。執行一條簡單的DML,修改一行,我執行如下命令:
SQL> update a1 set id=id+0 where id=2;
1 row updated.
SQL> commit;
Commit complete.
? ? ? ? 在提交時,可以發現會有如下的IO:
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? ? ? ? 每次提交時,都會有IO發生,這是和文件系統的最大區別。這樣的話,我們提交的數據,就不會丟失


了。有時,也可以觀察到512字節的IO。
? ? ? ? 再進一步的,我們知道,在ASM中,AU的大小通常是1M,條帶大小也為1M。但Redo和控制文件Oracle會


將它們設置為“細粒度條帶”,條帶大小為128K。這個128K
,到底有什么意義呢? 為什么我上面一定要在ASM DG1中,至少搞兩塊磁盤,就是為了觀察這個“細粒度條帶


”。我們繼續。
? ? ? ??
? ? ? ? 經過觀察,我測試用的兩條命令,update a1 set id=id+0 where id=2;,commit,每次執行,都會產


生1K的Redo。這種說法也不太準備,更準確應該是這兩條命
令,每次執行會觸發Lgwr 執行1K的IO寫操作。其實這兩條語句產生的Redo只有700多字節,但提交的時候,


LGWR寫Redo數據,只能以塊為單位去寫。700多字節,正好占兩
個日志塊,1K字節。
? ? ? ? 腳本再做一下修改,完整的腳本如下:
#!/usr/sbin/dtrace -s
BEGIN
{
? ? i=0;
}
io:::start
/ args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url]" ||
? args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url]"?


/
{
? ? ? ? printf("IO number:%d %s %s %d %s\n",i,args[1]->dev_statname,args[2]->fi_pathname,args


[0]->b_bcount,args[0]->b_flags&B_READ?"R":"W" );
? ? ? ? i++;
}
? ? ? ? 我把之前用過的i++加了進來,主要用來觀察IO的次數。好,運行這個程序,然后反反復復的執行上面


的DML和提交語句。
# ./test2.d
dtrace: script './test2.d' matched 7 probes
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:0 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:1 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
…………………………………………省略部分內容…………………………………………
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:99 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? 2 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:100 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? 2 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:101 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
…………………………………………省略部分內容…………………………………………
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:227 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:228 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:229 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
…………………………………………省略部分內容…………………………………………
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:354 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:355 sd5?


[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url] 1024 W
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:356 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? 0 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:357 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
^C
? ? ? ? 上面的結果,注意IO number:0的值,從IO number:100到IO number:227為止,共128次1K的IO,都是


針對,磁盤設
備“/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw”,從228次IO到355次IO,共128次1K IO,針對另一磁


盤設
備“/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw”。
? ? ? ? 這就是細粒度條帶的意義。雖然AU大小仍為1M,文件仍是按1M來分配空間。文件的第一個1M,在磁盤1


,第二個1M,在磁盤2,等等。但在使用空間的時候,卻是按
128K。先在磁盤1寫128K,再在磁盤2中寫128K,等等。
? ? ? ? 最后,還有一個問題,比如第100和101次IO:
? 2 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:100 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? 2 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:101 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W
? ? ? ? 這是兩次IO,每次IO的大小是1K,但是,我們如何確定這兩次1K大小的IO,一共寫了4個日志塊?有沒


有可能100次IO,寫了1、2號日志塊,101次IO,寫了2、3號
日志塊,兩次1K大小的IO,總共寫了1.5K數據?
? ? ? ? 之所以有這樣的疑問,是因為我的那條DML加提交,產生的Redo量是700多字節。雖然要占兩個塊,但


是占不滿兩個塊。那么,接下來的一次針對Redo的IO,是從沒
占滿的塊繼續往下寫,還是新占一個塊?
? ? ? ? 在資料視圖中,有一個資料redo wastage,Redo浪費空間。如果兩次IO每次各占兩個塊,redo?


wastage會不會有增加呢? 我用如下語句查了一下
SQL> col name for a20
SQL> select name,value from v$sesstat a,v$statname b where a.statistic#=b.statistic# and b.name?


in( 'redo size','redo wastage') and sid=855;
NAME ? ? ? ? ? ? ? ? ? ? ?VALUE
-------------------- ----------
redo size ? ? ? ? ? ? ? ?774092
redo wastage ? ? ? ? ? ? ? ? ?0
? ? ? ? 855號會話,就是我反反復復執行那條DML、提交語句的會話。我們沒有觀察到這個會話中有Redo浪費


。通過這個結果,我上面的測試,好像兩次相鄰的、1K大小的
IO,應該并沒有產生共2K的Redo,應該只有1.5K。
? ? ? ? 但是,如果是這樣的話,我們上面關于“細粒度條帶”的結論,就有問題了。因為它是建立在連續128


次1K大小的IO,共寫了128K Redo基本上的。或者說,是建立
在兩次相鄰的、1K大小的IO,一定會產生2K的Redo這個基礎上。但通過redo wastage分析的結果,好像應該只


有1.5K才對。
? ? ? ? 到底結果如何,如果要確定的話,我們只能分析每次Redo IO的內容了。請看下節:“獲取進程數據”


第四節 ? 獲取進程數據


? ? ? ? 不久前才看過一個笑話,從哪兒來的我也忘了。說是一名生物學家研究螃蠏的聽覺系統,對著螃蠏大


吼一聲,螃蠏馬上跑了。將螃蠏的腿截掉,對著螃蠏再次大吼
一聲,螃蠏沒有跑。因此證明螃蠏的聽覺系統是在腿上。
? ? ? ? 我們做測試,千萬不要無意中成為這名生物學家。用不嚴謹的測試、得到錯誤的結論,然后再用這個


結論去分析碰到的問題,可想而知,這會是什么結果。
? ? ? ? 好,言歸正傳,繼續上節中的測試,為了得到準確的結論,我們需要獲得IO的內容。
? ? ? ? 繼續做這個分析,需要我們對Redo的塊格式,有簡單的了解。
? ? ? ? 512字節的一個Redo塊,前16字節,是塊頭。塊頭中第8到11字節,是塊所屬于日志序列號,第4到7字


節,是塊編號。接下來要做的,在Start探針中,讀出塊頭,
將每次IO的日志序列號、塊號顯示出來。
? ? ? ? DTrace中,可以使用copyin,《Solaris 動態跟蹤指南》P155頁,有這個函數的介紹。P411頁,還有


更詳細的介紹。
? ? ? ? 簡單點說,某個進程的數據,我們不能直接顯示,要使用copyin拷貝到DTrace的緩存中,才能顯示。


如下修改我們的腳本:
#!/usr/sbin/dtrace -s
char *rd;
char bn[4];
char seq[4];
BEGIN
{
? ? i=0;
}
io:::start
/ args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url]" ||
? args[2]->fi_pathname=="[url=]/devices/pci@0,0/pci15ad,790@11/pci15ad,1976@3/sd@1,0:d,raw[/url]"?


/
{
? ? ? ? rd=copyin((uintptr_t )(args[0]->b_addr),16);
? ? ? ? bn[0]=rd[4];
? ? ? ? bn[1]=rd[5];
? ? ? ? bn[2]=rd[6];
? ? ? ? bn[3]=rd[7];
? ? ? ? seq[0]=rd[8];
? ? ? ? seq[1]=rd[9];
? ? ? ? seq[2]=rd[10];
? ? ? ? seq[3]=rd[11];
? ? ? ? printf("IO number:%d %s %s %d %s Seq:%d,Block:%d\n",i,args[1]->dev_statname,args[2]-


>fi_pathname,args[0]->b_bcount,args[0]-
>b_flags&B_READ?"R":"W",*((int *)&seq[0]),*((int *)&bn[0]));
? ? ? ? i++; ? ? ? ? ? ? ? ?
}
? ? ? ? 解釋一下這段腳本,首先,在開頭的三個變量定義:
char *rd;
char bn[4];
char seq[4];
? ? ? ? 我們在BEGIN探針中,也用過變量:i。在io:::start探針中,還對i做了自增操作。這三個變量與i的區


別有兩點,一它們是全局變量,二它們有類型。
? ? ? ? 只有這樣的全局變量,才需要專門在程序開頭定義,也只有它們,才可以有類型。可以使用的類型,


同C語言一樣。變量i我們沒有定義,直接就開始使用。DTrace
根據它的值來決定它的類型。
? ? ? ??
? ? ? ? 然后,這行是這個腳本程序的關鍵:
rd=copyin((uintptr_t )(args[0]->b_addr),16);
? ? ? ? (uintptr_t )(args[0]->b_addr),這是我們的地址,我們從這個地址中,考貝16個字節,到rd中。rd


是一個字符型指針,它的空間在DTrace緩存中。args[0]-
>b_addr這個域的值,就是存放IO內容的緩存區地址。我們在這個地址前加一個(uintptr_t ),強制類型轉換。


因為在《Solaris 動態跟蹤指南》P155頁,我們可以看到:
void *copyin(uintptr_t addr, size_t size)
? ? ? ? copyin要求的地址類型是uintptr_t型。但(args[0]->b_addr)的類型并不是這個,因此,我們需要加


個強制類型轉換。將(args[0]->b_addr)轉成uintptr_t型。
? ? ? ? 在這里我拷貝了16個字節,就是整個塊頭了。下面的賦值語句:
? ? ? ? bn[0]=rd[4];
? ? ? ? bn[1]=rd[5];
? ? ? ? bn[2]=rd[6];
? ? ? ? bn[3]=rd[7];
? ? ? ? seq[0]=rd[8];
? ? ? ? seq[1]=rd[9];
? ? ? ? seq[2]=rd[10];
? ? ? ? seq[3]=rd[11];
? ? ? ? 將塊頭中的4到7字節,傳到bn中,這是塊號。將8到11字節,傳到seq中,這是日志序列號。最后一步


輸出時,是這樣操作bn和seq這兩個數組的:
…………,*((int *)&seq[0]),*((int *)&bn[0]);
? ? ? ? &seq[0],取出seq數組中0號元素的地址。(int *),將這個地址轉成整型,(int *)&seq[0],是一個


整型的地址,指向seq的開頭。在它之前再加一個*,取出這個
整型地址中值。其實根本含意就是,將bn數組中的4個字節,當作一個整型變量輸出。這是C語言中指針的常見


玩法。在使用copyin時,可能會用的比較多。
? ? ? ? 好了,運行腳本,執行DML+提交,觀察輸出結果:
……………………
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:93 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W Seq:495,Block:513
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:94 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W Seq:495,Block:515
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:95 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W Seq:495,Block:517
? 3 ? ?783 ? ? ? ? ? ? ? ? ? ?aphysio:start IO number:96 sd3?


[url=]/devices/pci@0,0/pci15ad,1976@10/sd@3,0:d,raw[/url] 1024 W Seq:495,Block:519
……………………
? ? ? ? 可以看到第93次IO寫的是495號日志第513號塊,大小1K。94次IO是495號日志515號塊,大小1K,等等



? ? ? ? 也就是說,兩次相鄰Commit觸發的IO,各自寫各自的塊。兩次1K的IO,共寫了4個塊。
? ? ? ? 也就是說,我們對“細粒度條帶”的分析是不錯的。但redo wastage資料中的值就有問題了,不知道


它衡量的是什么浪費。我每次只產生700多字節Redo,用了
1024字節空間,但redo wastage的值為0。


? ? ? ? 好了,我們的揭密Oracle之七種武器之二,先到這里吧。第三章將繼續介紹DTrace語法,同時結合


Oracle的觀察結果。
? ? ? ? 用一句廣告語:精彩繼續,敬請期待。
========

揭密Oracle之七種武器之三:破譯古老的謎題---共享CBC Latch的秘密

vage




揭密Oracle之七種武器之三:破譯古老的謎題---共享CBC Latch的秘密


(前兩章地址
揭密Oracle之 七種武器 ?第一章 搭建測試環境(目前已到第三章)
http://www.itpub.net/thread-1605241-1-1.html


揭密Oracle之七種武器二:DTrace語法:跟蹤物理IO
http://www.itpub.net/thread-1609235-1-1.html



? ? ? ? 從9iR2開始,Cache Buffers Chain(以下簡稱CBC)Latch就變成共享Latch了。從那時開始,我想當


然的認為,如果我只有讀操作,互相之間就不會阻
塞了。于是馬上測試:
declare
? myid number;
begin
? for i in 1..10000000 loop
? ? select id1 into myid from a2_70m where rowid='AAACYJAAEAAAAAUAAA';
? end loop;
end;
/
? ? ? ? 這段過程很簡單,就是反復的邏輯讀某一行。將這段過程在兩個會話同時執行,我天真的認為,不會


再看到CBC Latch等待。但是,查看等待事件的結果
,令我深深的迷惑。為什么還是有等待呢?無論CBC 鏈還是數據塊,我都沒有修改,只是反復讀取,為什么共


享Latch不共享呢?從此,這個迷團一直困繞著我。
? ? ? ? 當然,還有其他一些謎團,比如唯一索引和非唯一索引在讀掃描時的區別。最普通的區別,是它們兩


個邏輯讀不一樣,唯一索引比非唯一少一個邏輯讀
。但其實,它們兩個的區別非常大。具體的區別在哪里?這些區別對于我們的選擇,會有什么影響?
? ? ? ? 這些謎團很長一段時間內沒有答案。
? ? ? ? 五、六年轉眼即過,2011年初,因公司技術轉型,我被迫從頭學起GreenPlum。翻開幾百頁的英文文檔


,我不禁倦意襲來。再看會Oracle的資料,又不禁
精神百倍。于是,我退意蒙生。但是,這段經歷,讓我有一個意外的收獲。阿里的GreenPlum,都是跑在


Solaris下。接手GreenPlum運維,必先學會Solaris。在
學習Solaris時,看到有一本書用兩頁紙介紹了一個工具:DTrace語言,說是可以跟蹤Solaris中的任何操作。


當時我對Oracle的研究,也陷入了困境。能用的跟
蹤事件都用了,很多原理還是無法搞清楚,只能跟著別人,人云亦云一下,自我感覺對Oracle了解甚為深入,


已經沒什么可以再學的了。但分析一些工作中奇怪
的問題,就總感覺似是,而非。
? ? ? ? 這種感覺讓我想起來多年前,年青的時候我酷愛神秘文化。什么東西都信,曾在二月底初春時節跳入


溥冰覆蓋的河水中受洗,隨身攜帶一本荒漠甘泉。
在被女神無情拋棄后,獨自站在空曠的教堂祈禱:“仁慈的圣父啊,我知道這是您對我的庇護和煅煉,雖然您


的孩子此刻心如刀絞,但我仍然感謝您、愛您。哈
利路亞,阿門。”不久之后,下一位女神出現,卻是信佛的。于是我又到家鄉著名的大相國寺,皈依佛祖,每


逢初一、十五,燒香誦經:“南無西方琉璃藥師佛
,南無……”。
? ? ? ? 在諸多雜學之中,我最精通的卻還是周易。剛剛參加工作哪會,我為我們科室6個人占卦,算他們哪一


年結婚、哪一年有小孩,6個人,只有一個算錯了
。83%的準確率,很高了。但是,為什么有一次算錯了呢?為什么其他的可以算對呢?這些問題我都答不上來,


我對周易的理解,始終似是,而非。
? ? ? ? 易經這東西,真正的神人傳下來的,幾千年中,看懂的沒幾個。但是Oracle呢,我也無法真正的看“


懂”它嗎。對易經的理解似是而非,這我服氣,但
對Oracle,我不想停留在似是而非的境界。 ? ? ? ?
? ? ? ? 當看到這個DTrace后,我眼前頓時一亮,如果用DTrace跟蹤Oracle,又會有怎樣的效果呢?是否可以


打破“似是而非”的僵局呢?于是我馬上搜集資料
開始學習,這一下,沒想到豁然為我打開一扇大門。于是我再也顧不得什么GreenPlum、什么KPI了。
? ? ? ? 好了,言歸正傳,這一節,從一個重要的提供器開始,PID進程提供器。Solaris在進程調用、退出每


個函數時,都設置了Prob,進程提供器的作用就是
打開這些Prob。
? ? ? ? 我們可以寫如下的腳本,打開PID提供器所有調用函數時的探針:
pid1234:::entry
{?
? ? ?動作;
}
? ? ? ? 這個腳本的作用是打開1234進程所有函數調用處的探針。簡單點說,1234進程每調一次函數,都會被


觸發。這個腳本還可以進一步改成這樣:
pid$1:::entry
{?
? ? ?動作;
}
? ? ? ? 用$1代替了1234。$1,這種寫法是來自于Shell腳本編程,第一個參數。當然,我們也可以pid$2。
? ? ? ? 接下來,我們可以定義什么動作呢?當然還是觀察了.
? ? ? ? 在我上傳的《Solaris 動態跟蹤指南》書中,P68頁,列出了全部的內置變量,這次,我們使用這幾個


內置變量:probeprov, probemod, probefunc,?
probename,arg0和arg1……
? ? ? ? probeprov:提供器名
? ? ? ? probemod : 模塊名
? ? ? ? probefunc:函數名,這是我們要查看的重點。
? ? ? ? probename:探針名,只有兩個。entry,return,一個進入、一個是退出。
? ? ? ? arg0,arg1,…… :調用函數時,傳遞給函數的參數。 ? ? ? ?
? ? ? ? 這些內置變量,無需定義,可以直接使用。內置變量中保存了很多重要的值,在上篇文章已經有用到


過。
? ? ? ? 好,我們的最終腳本程序,是這個樣子:
? ? ? ? 這個探針的使用很簡單,我們總的腳本如下:
#!/usr/sbin/dtrace -s -n
dtrace:::BEGIN
{
? ? ? ? i=1;
}
pid$1:::entry
{
? ? ? ? printf("i=%d PID::entry:==%s:%s:%s:%s %x %x %x %x %x %x",i, probeprov, probemod,?


probefunc, probename,arg0,arg1,arg2,arg3,arg4,arg5);
? ? ? ? i=i+1;
}
? ? ? ? 參數這塊,我們也不知道每個函數都有幾個參數,好在多輸出參數DTrace并不會報錯,所以,我們就


多顯示幾個參數,我顯示了前6個:
arg0,arg1,arg2,arg3,arg4,arg5。都以%x,16進程格式顯示。
? ? ? ? 將此腳本保存為all_func.d,授于執行權限,開始執行。
? ? ? ? 對了,別忘了,本章的目的,是觀察CBC Latch。更進一步的,觀察邏輯讀的CBC Latch。
? ? ? ? 打開一個會話,查詢出它對應的進程號:
SQL> select c.sid,spid,pid,a.SERIAL# from (select sid from v$mystat where rownum<=1) c,v$session?


a,v$process b where c.sid=a.sid and?
a.paddr=b.addr;
? ? ? ?SID SPID ? ? ? ? ? ? ? ?PID ? ?SERIAL#
---------- ------------ ---------- ----------
? ? ? ?863 970 ? ? ? ? ? ? ? ? ?22 ? ? ? ? ?1
? ? ? ? 我的進程號是970。另外,在開始觀察前,執行幾次如下語句,讓讀是邏輯讀:
select * from a2_70m where rowid='AAACYJAAEAAAAAUAAA';
? ? ? ? 如下運行腳本,觀察970號進程:
# ./all_func.d 970 > logic_read1.log
dtrace: script './all_func.d' matched 124179 probes
? ? ? ? 根據顯示結果,共有124179個探針被打開。十幾萬個探針,說明Oracle內部,有十幾萬個函數。C語言


中,程序代碼的復用,全靠函數了。C又被稱為函
數語言嗎。不過,Oracle內部競然有十幾萬個函數,還是出乎我的意料。不過,函數分的越細,對我們調試、


跟蹤越好。在沒有源代碼的情況下,我們只能跟蹤
到函數級別了。
? ? ? ??
? ? ? ? 跟蹤結果會很多,為了便于觀察,我將結果重定向到logic_read1.log文件中。
? ? ? ? 另外,由于會打開太多探針,有可能會超出DTrace的限制,報出錯誤,可以修


改/kernel/drv/fasttrap.conf中fastrap-max-probes設置,在我的測試環
境中,我設置為fastrap-max-probes=1000000。
? ? ? ? 另外,如果在970進程執行期間,all_func.d腳本報內存不足,可以在腳本開頭加上去內存大小或刷新


頻率的設置:
#!/usr/sbin/dtrace -s -n -x switchrate=10hz -b 16m
? ? ? ? -x switchrate=10hz,設置刷新頻率。DTrace會結果發送到輸出終端,這個值可以理解為發送頻率。


在數據沒有發送到輸出終端前,DTrace會先保存到
自己的緩存中。因此,增加刷新頻率,可以減少內存使用。
? ? ? ? -b 16m , 修改緩存大小。
? ? ? ? 好了,來看結果吧,在970進程對應的會話中,再執行一次:
select * from a2_70m where rowid='AAACYJAAEAAAAAUAAA';
? ? ? ? 回到執行DTrace命令的窗口,按Ctrl+C。然后查看結果,先看一下有多少行輸出吧:
# cat logic_read1.log|wc -l
? ? 1211
? ? ? ? 1211行,這是運行一次軟軟解析,再加上對一個塊邏輯讀取出一行,Oracle所要調用的函數次數。這


也是我們最細粒度的跟蹤級別了。比10046等任何一
個Event,都要細致的多。除非你去看源碼,否則,不可能比這個更細、更深入了。
? ? ? ? 下面,讓我們來看看結果都是什么吧:
# cat logic_read1.log|more
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 3 172611 ? ? ? ? ? ? ? ? ? ? memcpy:entry i=1 PID::entry:==pid970:libc.so.1:memcpy:entry?


8047708 c0f2c28 1 c028934 c02a6dc 6
? 3 ?52316 ? ? ? ? ? ? ?kslwte_resmgr:entry i=2 PID::entry:==pid970racle:kslwte_resmgr:entry 100?


62657100 1 0 8047708 c028894
? 3 174943 ? ? ? ? ? ? ? ? ?gethrtime:entry i=3 PID::entry:==pid970:libc.so.1:gethrtime:entry?


c07ad01 80461e4 80461e4 8dd9467 100 62657100
? 3 ?52313 ? ? ? ? ? ? ? ? ?kslwte_tm:entry i=4 PID::entry:==pid970racle:kslwte_tm:entry 100?


62657100 1 0 cfacb398 1
? 3 111268 ? ? ? ? ? ? ? ? ?skgslnoop:entry i=5 PID::entry:==pid970racle:skgslnoop:entry c028934?


c02a6dc 0 8046130 c0e7078 b0fc070
? 3 ?86139 ? ? ? ? ? ? kews_idle_wait:entry i=6 PID::entry:==pid970racle:kews_idle_wait:entry?


8c9775bd 0 c028934 c02a6dc 0 8046130
? 3 174943 ? ? ? ? ? ? ? ? ?gethrtime:entry i=7 PID::entry:==pid970:libc.so.1:gethrtime:entry?


8f1e27a0 8f18c820 8c9775bd a9c0001 c07ad9c 80460f0
? 3 ?86061 ? ? ? ? ? kewe_trace_level:entry i=8 PID::entry:==pid970racle:kewe_trace_level:entry?


8f18c820 c028934 c02a6dc 0 8046130 c0e7078
? 3 ?52312 ? ? ? ? ? ksl_which_bucket:entry i=9 PID::entry:==pid970racle:ksl_which_bucket:entry?


2325dd c028934 c02a6dc 0 8046130 c0e7078
? 3 ?53333 ? ? ? ? ? ? ? ? ? kskthewt:entry i=10 PID::entry:==pid970racle:kskthewt:entry c07ad01?


80461e4 80461e4 8dd9467 100 62657100
? 3 172611 ? ? ? ? ? ? ? ? ? ? memcpy:entry i=11 PID::entry:==pid970:libc.so.1:memcpy:entry?


8047714 c0f2c29 2 101 c028890 c0e7120
? 3 104873 ? ? ? ? ? ? ? ? ? kpuhhmrk:entry i=12 PID::entry:==pid970racle:kpuhhmrk:entry c028850?


101 c028890 c0e7120 804773c 0
…………………………
…………………………
…………………………
? ? ? ? 以第一行為例,pid970:libc.so.1:memcpy:entry,pid970是提供器名,libc.so.1是模塊名,memcpy


是函數名,entry是探針名。
? ? ? ? 我摘出前十幾行,DTrace是能以很細的粒度跟蹤Oracle,細致程度遠超10046,但問題來了,我們如何


解讀跟蹤結果。這是一個很重要的問題。
? ? ? ? 簡單點說,這些函數都是干嗎的。不要指望誰能告訴你,現在,進行這種探索的,還非常非常少。這


方面的資料,就不要奢望了。來吧,Maoyeye教導我
們,自己動手,豐衣足食。
? ? ? ? 我們不需要、也可能能搞清楚這每一行函數調用都是干嗎的。Oracle的代碼量哪么龐大,估計Oracle


的開發人員,也不可能搞清楚這每一行全部的意義
。我們只需要搞清楚,我們自己關心的就行了。比如,我一開始所說的,Oracle在什么時候加什么的Mutex、


Latch、Pin、Lock,什么時候釋放,會以怎樣的形式
阻塞,等等。
? ? ? ? 我們今天,先以CBC Latch為例,說一下研究它的思路。其他的也都類似。我想做的,不是告訴你一個


結果,而是這結果是怎么來的,讓我們大家都可以
都可以用這種方式去研究。
? ? ? ? 每個Latch,都有一個地址,哪么,Oracle在調函數去獲得、獲放Latch時,應該會將此地址做為參數


。好,馬上,查找Latch的地址:
1、找出測試語句中ROWID在哪個文件哪個塊:
SQL> select dbms_rowid.ROWID_RELATIVE_FNO('AAACYJAAEAAAAAUAAA'),dbms_rowid.rowid_block_number


('AAACYJAAEAAAAAUAAA') from dual;
DBMS_ROWID.ROWID_RELATIVE_FNO('AAACYJAAEAAAAAUAAA') DBMS_ROWID.ROWID_BLOCK_NUMBER


('AAACYJAAEAAAAAUAAA')
---------------------------------------------------?


---------------------------------------------------
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 4 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ??


? ?20
測試語句要查找的行在4號文件、20號塊
2、在x$BH中,找到此塊在哪個Latch的保護下:
SQL> select file#,dbablk,tch,lower(HLADDR) from x$bh where file#=4 and dbablk=20;
? ? ?FILE# ? ? DBABLK ? ? ? ?TCH LOWER(HL
---------- ---------- ---------- --------
? ? ? ? ?4 ? ? ? ? 20 ? ? ? ? ?3 8ea1d750
? ? ? ??
? ? ? ? 4號文件20號塊,是受地址為8ea1d750的Latch保護。
3、在跟蹤結果文件中查找相關的:
# cat logic_read1.log|grep 8ea1d750
? 3 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry i=517 PID::entry:==pid970racle:sskgslcas:entry?


8ea1d750 0 20000016 fdc3f1e4 fdc3f18c fdc3f1e4
? 3 111578 ? ? ? ? ? ? ? ? sskgsldecr:entry i=526 PID::entry:==pid970racle:sskgsldecr:entry?


8ea1d750 20000016 fdc3f1e4 fdc3f18c fdc3f1e4 804544c
? 3 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry i=552 PID::entry:==pid970racle:sskgslcas:entry?


8ea1d750 0 20000016 1 fdc3f17c 81e1c064
? 3 ?57740 ? ? ? ? ? ? ? ? ? ? kcbzar:entry i=557 PID::entry:==pid970racle:kcbzar:entry 8ef9a5b4?


8ea1d750 108000 8045368 1 fdc3f17c
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=558 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=559 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=560 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=561 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=562 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 101760 ? ? ? ? ? ? ? ? ? slmxnoop:entry i=564 PID::entry:==pid970racle:slmxnoop:entry?


81ff1de4 fdc3f1ec 8ea1d750 8045338 a9bdd25 c030d18
? 3 111578 ? ? ? ? ? ? ? ? sskgsldecr:entry i=566 PID::entry:==pid970racle:sskgsldecr:entry?


8ea1d750 20000016 1 fdc3f17c 81e1c064 8045510
? 3 ?52568 ? ? ? ? ? ? ? ? ? ? kssrmf:entry i=568 PID::entry:==pid970racle:kssrmf:entry 8ef9a590?


8e94811c 81ff1de4 20000016 8ea1d750 8ef9a5b4
? ? ? ? 和這個地址相關的有這十幾行。在這里,有一點編程習慣再說一下,要申請某一個地址處的Latch,這


個Latch的地址,是這個函數的最重要的參數,因
此,Oracle會把它排在第一位,也就是說,以上這十幾行中,第一個參數不是8ea1d750的,基本可以排隊掉了



? ? ? ? 所以,我們只剩這些行需要關注:
# cat logic_read1.log|grep "entry 8ea1d750"
? 3 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry i=517 PID::entry:==pid970racle:sskgslcas:entry?


8ea1d750 0 20000016 fdc3f1e4 fdc3f18c fdc3f1e4
? 3 111578 ? ? ? ? ? ? ? ? sskgsldecr:entry i=526 PID::entry:==pid970racle:sskgsldecr:entry?


8ea1d750 20000016 fdc3f1e4 fdc3f18c fdc3f1e4 804544c
? 3 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry i=552 PID::entry:==pid970racle:sskgslcas:entry?


8ea1d750 0 20000016 1 fdc3f17c 81e1c064
? 3 111578 ? ? ? ? ? ? ? ? sskgsldecr:entry i=566 PID::entry:==pid970racle:sskgsldecr:entry?


8ea1d750 20000016 1 fdc3f17c 81e1c064 8045510
? ? ? ? 這四行,兩個函數調用,sskgslcas、sskgsldecr,第一個參數都是Latch的地址:8ea1d750。我相信


這不是巧合,它們肯定是申請、釋放Latch的函數。
? ? ? ? i=517這行,Oracle調用sskgslcas持有Latch,在i=526這行,調用sskgsldecr釋放,接下來在i=552又


一次調用sskgslcas持有Latch,在i=566處調用
sskgsldecr釋放。一次邏輯讀對應兩次Latch調用。
? ? ? ? 結果是這樣嗎,讓我們繼續驗證,Oracle的Oradebug可以調用某個Oracle自身的函數,就有它來驗證


吧:
SQL> oradebug setmypid
Statement processed.
SQL> oradebug call sskgslcas 0x8ea1d750 0 0x20000016 0xfdc3f1e4?
Function returned 1
SQL>?
? ? ? ? sskgslcas參數的取值,就是我們上面的跟蹤結果。我只用了4個參數,其實應該只有3個參數。但是,


用Oradebug時,多傳了參數也無所謂。
? ? ? ? Function returned 1,這一行說明我們的調用是成功的。
? ? ? ? 回到970進程對應的會話,再次執行如下語句:
SQL> select * from a2_70m where rowid='AAACYJAAEAAAAAUAAA';
? ? ? ? 被Hang住了,在另一個會話中查看等待事件(970號進程對應的會話ID是863):
SQL> select sid,event,p1raw,p2 from v$session where sid=863;
? ? ? ?SID EVENT ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?P1RAW ? ? ? ? ? ?P2
---------- ---------------------------------------------------------------- -------- ----------
? ? ? ?863 latch: cache buffers chains ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?8EA1D750 ? ? ? ?122
? ? ? ? 863果然在等待CBC Latch,而且根據P1RAW列的值,所等的Latch就是8EA1D750。接著,sskgsldecr是


釋放Latch,繼續驗證此點,在剛才Oradebug的會話
中繼續執行:
SQL> oradebug call sskgsldecr 0x8ea1d750 0x20000016?
Function returned 20000016
? ? ? ? 同樣,sskgsldecr 0x8ea1d750 0x20000016,這個函數的參數來自于我們的跟蹤文件。我們這樣手動


調用結束,剛才被Hang的會話,已經可以順利執行
下去了。說明Latch已經被釋放。
? ? ? ? 看,我們很輕松就已經找到了Oracle申請、釋放CBC Latch的函數。一切都是如此簡單。
? ? ? ? 到這里,可能有人會有不同意見了。如果你看過其他一些牛人的書,包括Oracle的DSI405,都說到


Latch的調用、釋放,是用kslgetl(獨占)、
kslgetsl(共享)和kslfre,怎么我又說申請、釋放Latch是另外的函數呢。
? ? ? ? 這很容易理解,DSI405是講9i的。其他牛人說的也沒錯,kslgetl(獨占)、kslgetsl(共享)和


kslfre的確也是Latch相關的函數。物理讀一個塊時,
Oracle也會用這三個函數來加、釋放CBC Latch,但邏輯讀不是。
? ? ? ? 這很容易理解,邏輯讀是最繁忙的操作,Oracle專門為它開個小灶、做做優化不是很正常嗎。而且,


提前說一下,Mutex也是用sskgslcas申請的(釋放
不是用sskgsldecr),關于Mutex內幕,我們到后幾章再詳細說,順便說一句,要想揭開Mutex內幕,也只有D&G


(DTrace+GDB)了。
? ? ? ? 我們還要再接著研究。CBC Latch的地址是8ea1d750,在這個地址處,Oracle都放了什么呢。有兩種方


式可以觀察這個,用Oradebug,或者,改寫我們的
DTrace腳本。我用后一種方式吧,這種方式早晚要熟練掌握的,而且并不是每個要觀察的值,都可以用


Oradebug。
? ? ? ? 使用DTrace,如果參數是地址的話,將地址的址讀出來,這種方法在上一章中已經有描述了,如下修


改腳本程序:
#!/usr/sbin/dtrace -s -n?
char *memnr;
int latchaddr;
dtrace:::BEGIN
{
? ? ? ? i=1;
? ? ? ? latchaddr=0;
}
pid$1::sskgslcas:entry
{
? ? ? ? memnr=copyin(arg0,12);
? ? ? ? latchaddr=arg0;
? ? ? ? printf("[%2x%2x%2x%2x|%2x%2x%2x%2x|%2x%2x%2x%2x]",memnr[3],memnr[2],memnr[1],memnr


[0],memnr[7],memnr[6],memnr[5],memnr[4],memnr
[11],memnr[10],memnr[9],memnr[8]);
? ? ? ? printf("i=%d PID::entry:==%s:%s:%s:%s %x %x %x %x %x %x",i, probeprov, probemod,?


probefunc, probename,arg0,arg1,arg2,arg3,arg4,arg5);
? ? ? ? i=i+1;
}
pid$1::sskgslcas:return
{
? ? ? ? memnr=copyin(latchaddr,12);
? ? ? ? printf("[%2x%2x%2x%2x|%2x%2x%2x%2x|%2x%2x%2x%2x]",memnr[3],memnr[2],memnr[1],memnr


[0],memnr[7],memnr[6],memnr[5],memnr[4],memnr
[11],memnr[10],memnr[9],memnr[8]);
? ? ? ? printf("i=%d PID::entry:==%s:%s:%s:%s %x %x %x",i, probeprov, probemod, probefunc,?


probename,latchaddr,arg0,arg1);
? ? ? ? i=i+1;
}
? ? ? ? 在這個腳本中,我只觀察CBC的申請和釋放。copyin函數的使用,上一章有,不再重述。需要注意的時


,我在pid$1::sskgslcas:entry中,執行了這樣一
行:latchaddr=arg0;目的是將Latch的地址保存到全局變量latchaddr中。然后,在sskgslcas申請Latch后,


再觀察一下此地址中的值。
? ? ? ? 看一下觀察結果吧:
# cat logic_read2.log|grep "8ea1d750"
? 0 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 291| 0 0 07a]i=3?


PID::entry:==pid970racle:sskgslcas:entry 8ea1d750 0 20000016 fdc1a2dc fdc1a284 fdc1a2dc
? 0 175725 ? ? ? ? ? ? ? ? sskgslcas:return [20 0 016| 0 0 291| 0 0 07a]i=4?


PID::entry:==pid970racle:sskgslcas:return 8ea1d750 16 1
? 0 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 292| 0 0 07a]i=5?


PID::entry:==pid970racle:sskgslcas:entry 8ea1d750 0 20000016 1?
fdc1a274 81e1c064
? 0 175725 ? ? ? ? ? ? ? ? sskgslcas:return [20 0 016| 0 0 292| 0 0 07a]i=6?


PID::entry:==pid970racle:sskgslcas:return 8ea1d750 16 1
? ? ? ? 我顯示了latch地址處的12個字節,我將結果整理一下:
進入sskgslcas函數時:[ 0 0 0 0| 0 0 291| 0 0 07a]
從sskgslcas返回時 ?:[20 0 016| 0 0 291| 0 0 07a]
進入sskgslcas函數時:[ 0 0 0 0| 0 0 292| 0 0 07a]
從sskgslcas返回時 ?:[20 0 016| 0 0 292| 0 0 07a]
? ? ? ? 我一共顯示了12個字節。后4個節字,7A,10進制是122。這個是Latch編號。中間4個字節,291、292


,明顯是我訪問的次數。這些可以從v
$latch_children視圖中得到。后4個字節是LATCH#列,中間4個字節,就是GETS列了。
? ? ? ? 最前面4個字節,20000016,正好是sskgslcas的第三個參數。我覺得這個應該是模式。
? ? ? ? 看來,sskgslcas的作用,應該就是將第三個參數的值“20000016”交換到Latch 地址所指向的內存中


。然后訪問次數加1。
? ? ? ? 接下來,該如何確定20000016是否是模式呢?這個,從這里就看不出來了,我們要找個索引試試。
? ? ? ? 在我的測試表a2_70m,ID1列上有個索引,索引名是A2_70M_ID1。我使用如下測試語句:
SQL> select * from a2_70m where id1=1;
? ? ? ?ID1 ? ? ? ?ID2 CC1
---------- ---------- ------------------------------
? ? ? ? ?1 ? ? ? ? 10 A-----------------------------
? ? ? ? 以上語句,多執行個幾次,在另一個會話中,查看索引的塊和Latch地址:
SQL> set pagesize 50000
SQL> set linesize 10000
SQL> select file#,dbablk,tch,ba,HLADDR from x$bh a,dba_objects b where a.obj=b.data_object_id and?


object_name='A2_70M_ID1' order by?
FILE#,DBABLK;
? ? ?FILE# ? ? DBABLK ? ? ? ?TCH BA ? ? ? HLADDR
---------- ---------- ---------- -------- --------
? ? ? ? ?5 ? ? ?23449 ? ? ? ? ?0 8189E000 8E98DAD4
? ? ? ? ?5 ? ? ?23450 ? ? ? ? ?0 81A74000 8EAF0390
? ? ? ? ?5 ? ? ?23451 ? ? ? ? ?0 8189C000 8EA150C8
? ? ? ? ?5 ? ? ?23452 ? ? ? ? ?3 81A78000 8EB77E00
? ? ? ? ?5 ? ? ?23453 ? ? ? ? ?3 81A76000 8EA9CB38
? ? ? ? ?5 ? ? ?23454 ? ? ? ? ?0 81A72000 8E9C13F4
? ? ? ? ?5 ? ? ?23455 ? ? ? ? ?0 8189A000 8EB2412C
? ? ? ? ?5 ? ? ?23456 ? ? ? ? ?0 81A70000 8EA48E64
? ? ? ? ?6 ? ? ? 5695 ? ? ? ? ?3 818A0000 8EACBC98
? ? ? ? 多執行幾次測試語句,找出TCH值不斷在增加的,這些塊就是索引掃描時相關的塊了。我這里是5號文


件23452、23453塊,和6號文件5695塊。索引的root
塊,都是段頭的下一個塊,我們可以如下確認一下:
SQL> select segment_name,header_file,header_block from dba_segments where segment_name=upper


('A2_70M_ID1');
SEGMENT_NAME ? ? ? ? ? ? ? ? ? HEADER_FILE HEADER_BLOCK
------------------------------ ----------- ------------
A2_70M_ID1 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 5 ? ? ? ?23451
? ? ? ? 段頭是23451塊,哪么23452就是root塊了。提一個注意事項,索引掃描在10.2.0.2后是不用讀段頭的


,真接Root、枝、葉。但在10.2.0.1,有時還是需
要讀段頭的。
? ? ? ? 好,用我們剛才的腳本,開始觀察吧。
先執行腳本:
# ./all_func.d 970 > logic_read3.log
dtrace: script './all_func.d' matched 3 probes
? ? ? ? 再執行測試SQL,顯示logic_read3.log內容,觀察結果,先看根塊吧:
# cat logic_read3.log|grep 8eb77e00
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 721| 0 0 07a]i=3?


PID::entry:==pid970racle:sskgslcas:entry 8eb77e00 0 1 fdc1a3bc fdc1a3b4 fdc1a278
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 721| 0 0 07a]i=4?


PID::entry:==pid970racle:sskgslcas:return 8eb77e00 16 1
? ? ? ? 根塊Latch的地址是8eb77e00,先只看一下根塊。注意第三個參數,不是20000016,而是1。我們自己


調一下試試:
SQL> oradebug call sskgslcas 0x8eb77e00 0 1
Function returned 1
(釋放是:
SQL> oradebug call sskgsldecr 0x8eb77e00 1?
Function returned 1

? ? ? ? 再到另一個會話執行測試SQL,不會被阻塞。看來這才是共享模式啊。再往下看跟蹤文件,8eacbc98是


root塊后接著申請的一個Latch,它對應6號文件
5695號塊。看來它是枝塊了。
# cat logic_read3.log|grep 8eacbc98
? 2 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 784| 0 0 07a]i=5?


PID::entry:==pid970racle:sskgslcas:entry 8eacbc98 0 1 fdc3f2c4 fdc3f2bc fdc3f180
? 2 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 784| 0 0 07a]i=6?


PID::entry:==pid970racle:sskgslcas:return 8eacbc98 16 1
? ? ? ? 枝塊獲得CBC Latch,也是共享的。
? ? ? ? 那么5號文件23453塊,它應該是葉塊了,查看它的獲取Latch情況:
# cat logic_read3.log|grep 8ea9cb38
? 2 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 783| 0 0 07a]i=7?


PID::entry:==pid970racle:sskgslcas:entry 8ea9cb38 0 1 fdc3f2c4 fdc3f2bc fdc3f180
? 2 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 783| 0 0 07a]i=8?


PID::entry:==pid970racle:sskgslcas:return 8ea9cb38 16 1
? 2 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 784| 0 0 07a]i=13?


PID::entry:==pid970racle:sskgslcas:entry 8ea9cb38 0 20000016 ffffffff fdc3f2c4 fdc3f17c
? 2 175725 ? ? ? ? ? ? ? ? sskgslcas:return [20 0 016| 0 0 784| 0 0 07a]i=14?


PID::entry:==pid970racle:sskgslcas:return 8ea9cb38 16 1
? 2 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 785| 0 0 07a]i=15?


PID::entry:==pid970racle:sskgslcas:entry 8ea9cb38 0 20000016 c030e14 fdc3f180 fdc3f2bc
? 2 175725 ? ? ? ? ? ? ? ? sskgslcas:return [20 0 016| 0 0 785| 0 0 07a]i=16?


PID::entry:==pid970racle:sskgslcas:return 8ea9cb38 16 1
? 2 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 786| 0 0 07a]i=17?


PID::entry:==pid970racle:sskgslcas:entry 8ea9cb38 0 20000016 0 fdc3f2c4 fdc3f2b8
? 2 175725 ? ? ? ? ? ? ? ? sskgslcas:return [20 0 016| 0 0 786| 0 0 07a]i=18?


PID::entry:==pid970racle:sskgslcas:return 8ea9cb38 16 1
? ? ? ? 它一共獲取了4次,第一次是共享的,后面三次,是獨占的。最后還可以再看一下表塊,表塊要獲得兩


次,都是獨占的。這樣看來,索引葉塊的CBC?
Latch的爭用,要比表塊多啊。建議索引的PCTFREE可以調的比表高些,既能減少中間塊分裂的總次數。塊中行


更少,又能分散爭用。
? ? ? ? 但這樣做會使索引樹層數升高,增加索引訪問時的邏輯讀。對于解決索引塊上的CBC Latch爭用,這樣


做還是非常值得的。因為同樣是邏輯讀,消耗的資
源可是不以同日而語的。索引枝塊只需要一次CBC Latch,而且是共享的,并且,不需要把數據拷貝到PGA中,


只在Buffer Cache中比較一下Key值,取出下一層塊
的位置。這種邏輯讀,不會造成爭用,因為從頭到尾,所有資源都是共享的,所耗資源比表塊邏輯讀也少的多


。而且大的PCTFree,還可以減少索引塊分裂次數。
因此,使用這種方式,減少索引葉塊的CBC Latch爭用,是可行的。
? ? ? ? 好,經過上面的測試,本章開頭提到第一個問題,已經有了答案。為什么共享的CBC Latch會有爭用,


答案是因為Oracle以獨占的方式持有了它。
? ? ? ??
? ? ? ? 在文章開頭,我還提到過一個問題,就是唯一索引和非唯一索引讀掃描時的區別,剛才我的測試索引


,不是非唯一的,我把它重建為唯一索引試試,我
們可以比較下,區別還是非常大的:
SQL> drop index a2_70m_id1;
Index dropped.
SQL> CREATE unique INDEX a2_70m_id1 on a2_70m(id1);
Index created.
? ? ? ? 我們的測試語句和剛才相同,只不過這次它的訪問路徑是唯一索引掃描。
? ? ? ? 唯一索引的測試結果,和非唯一有很大不同:
# cat logic_read3.log
CPU ? ? ID ? ? ? ? ? ? ? ? ? ?FUNCTION:NAME
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 01d| 0 0 0 0]i=1?


PID::entry:==pid970racle:sskgslcas:entry 87d88194 0 35f0001 8886a9c8 87d88194 888f7c48
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 35f 0 1| 0 0 01d| 0 0 0 0]i=2?


PID::entry:==pid970racle:sskgslcas:return 87d88194 16 1
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 c67| 0 0 07a]i=3?


PID::entry:==pid970racle:sskgslcas:entry 8eb77e00 0 1 804520c 8045204 fda522f8
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 c67| 0 0 07a]i=4?


PID::entry:==pid970racle:sskgslcas:return 8eb77e00 16 1
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 bc3| 0 0 07a]i=5?


PID::entry:==pid970racle:sskgslcas:entry 8eafa97c 0 1 804520c 8045204 fda522f8
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 bc3| 0 0 07a]i=6?


PID::entry:==pid970racle:sskgslcas:return 8eafa97c 16 1
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 c38| 0 0 07a]i=7?


PID::entry:==pid970racle:sskgslcas:entry 8ea9cb38 0 1 804520c 8045204 fda522f8
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 c38| 0 0 07a]i=8?


PID::entry:==pid970racle:sskgslcas:return 8ea9cb38 16 1
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 0| 0 0 bdc| 0 0 07a]i=9?


PID::entry:==pid970racle:sskgslcas:entry 8ea1d750 0 1 fda52660 fda52658 fda52600
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 0 0 0 1| 0 0 bdc| 0 0 07a]i=10?


PID::entry:==pid970racle:sskgslcas:return 8ea1d750 16 1
? 1 111575 ? ? ? ? ? ? ? ? ?sskgslcas:entry [ 0 0 0 1| 0 0 01e| 0 0 0 0]i=11?


PID::entry:==pid970:oracle:sskgslcas:entry 87d88194 1 35f0000 c030d18 87d88194 888f7c48
? 1 175725 ? ? ? ? ? ? ? ? sskgslcas:return [ 35f 0 0| 0 0 01e| 0 0 0 0]i=12?


PID::entry:==pid970:oracle:sskgslcas:return 87d88194 16 1
? ? ? ? 索引還是占了同樣的數據塊,所以對應的Latch不變。可以看到,從根塊到葉塊,再到數據塊,競然都


不是獨占的,全是共享的,而且都只需要申請一次
。可以用個匿名塊驗證一下:
declare
? myid number;
begin
? for i in 1..10000000 loop
? ? select id1 into myid from a2_70m where id1=1;
? end loop;
end;
/
? ? ? ? 和最開頭的存儲過程不同的是,select id1 into myid from a2_70m where id1=1 ,這條語句不再直


接用ROWID訪問,換成唯一索引。在兩個會話中分
別執行此段過程,最終查看了一下:
SQL> select event from v$session_event where sid=862;
EVENT
---------------------------------------------
db file sequential read
cursor: pin S wait on X
SQL*Net message to client
SQL*Net message from client
SQL*Net break/reset to client
events in waitclass Other
6 rows selected.
? ? ? ? 果然沒有CBC Latch的競爭。看到沒,區別可是非常之大啊。如果不用DTrace分析,恐怕很難準確的發


現這點。看來INDEX UNIQUE SCAN和INDEX RANGE?
SCAN,不同的訪問路徑,Oracle實現起來的方法大相庭徑啊。而且,由不由的訪問路徑起始,上層的操作也會


不一樣。
? ? ? ? 比如同樣是TABLE ACCESS BY INDEX ROWID,下層是INDEX UNIQUE SCAN的話,表塊將只有共享Latch。


下層是INDEX RANGE SCAN的話,表塊上將有獨占
Latch。
? ? ? ? 比較一下唯一索引和非唯一索引的區別:
? ? ? ? ?唯一 ? ? ? ? 非唯一
------ ?-------- ?----------------
? 根 ? ?1次共享 ? 1次共享?
? 枝 ? ?1次共享 ? 1次共享
? 葉 ? ?1次共享 ? 1次共享 3次獨占
表塊 ? 1次共享 ? ? ? ? ? 2次獨占
? ? ? ? 非唯一索引共需8次CBC Latch,其中5次是獨占。看來,在讀遠高于寫的環境,想解決CBC Latch競爭


問題嗎,那就如果可能的話,使用唯一索引吧。
? ? ? ? (當然,出現CBC Latch爭用,一般都是SQL惹的禍,調SQL即可。這個結論,是說如何從宏觀上減少


CBC Latch爭用)
? ? ? ? 順便測一下DML,唯一索引時,即使修改索引列,索引的訪問不變,都是共享Latch。但表塊是獨占


Latch。其他UNDO塊、DUNO段頭了等等Latch的持有訪
問,我就不再演示了,有興趣自己測吧。
? ? ? ? 其實還有一個問題,就是為什么用Rowid訪問一個表塊,或者非唯一索引的葉塊、表塊,Oracle不會以


共享的方式獲得Latch呢?要解答這個問題,先要
搞清楚一點,為什么用ROWID的形式,訪問表塊的時候,要申請2次CBC Latch。而根塊、枝塊只要一次,唯一索


引以INDEX UNIQUE SCAN形式訪問,所有塊都只需
要一次共享的CBC Latch。
? ? ? ? 這個問題又可以寫一篇很長的文章分析了。不知道放在這里是否合適,因為這篇文章已經有點長了。


但我覺得,如果你掌握了今天我們所用的方法,繼
續這樣的分析難度不大。我先簡單描述一下,后面再另起一章詳細解剖。可以使用我們第一個腳本:
#!/usr/sbin/dtrace -s -n
dtrace:::BEGIN
{
? ? ? ? i=1;
}
pid$1:::entry
{
? ? ? ? printf("i=%d PID::entry:==%s:%s:%s:%s %x %x %x %x %x %x",i, probeprov, probemod,?


probefunc, probename,arg0,arg1,arg2,arg3,arg4,arg5);
? ? ? ? i=i+1;
}
? ? ? ? 攔截所有操作,你可以發現通過ROWID訪問,形式如下:
1、調用sskgslcas獲得Latch
2、進行一些未知操作
3、調用sskgsldecr釋放Latch
4、未知操作
5、memcpy拷貝內存,從SGA向PGA
6、未知操作
7、調用sskgslcas獲得Latch
8、進行一些未知操作
9、調用sskgsldecr釋放Latch
? ? ? ? 第5步拷貝內存,其實就是真正的邏輯讀過程,把數據從SGA中的Buffer Cache,拷貝到PGA,我跟蹤出


的Memcpy函數形式如下:
? 2 172791 ? ? ? ? ? ? ? ? ? ? memcpy:entry i=663 PID::entry:==pid972:libc.so.1:memcpy:entry?


fdad1b10 82c61fde 1e fdad2f94 886f2bf8 8045478
? ? ? ??
? ? ? ? 第二個參數82c61fde , 是Buffer Cache中行的位置,我們可以如下確定:
SQL> select file#,dbablk,tch,lower(HLADDR),ba from x$bh where file#=4 and dbablk=20;
? ? ?FILE# ? ? DBABLK ? ? ? ?TCH LOWER(HL BA
---------- ---------- ---------- -------- --------
? ? ? ? ?4 ? ? ? ? 20 ? ? ? ? ?7 8ea1d750 82C60000
? ? ? ? BA列,82C60000開始的8K,也就是從82C60000到82C62000,都是4號文件20號塊的Buffer。memcpy第二


個參數82c61fde,正是在這個范圍之間。證明是從
4號文件20號塊中拷貝數據。第一個參數地址fdad1b10,它不在任何內存池地址空間范圍之內,它是進程自身的


內存,可以認為是PGA。第三個參數1e,十進制是
30,是拷貝數據的長度。查看表的定義:
SQL> desc a2_70m;
Name ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?Null? ? ?Type
----------------------------------------- -------- ----------------------------
ID1 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?NUMBER(38)
ID2 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?NUMBER(38)
CC1 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?VARCHAR2(30)
? ? ? ? 拷貝30個字節,其實就是將CC1列的數據讀到PGA中。
? ? ? ? 另外,還有一點,先說明一下,到下一章再詳細講。上面步驟1至3中間的未知操作,和7至9中的未知


操作,其實是加Buffer Pin和釋放Buffer Pin。其
實,上面那9個步驟,我們可以簡化一下:
? ? ? ??
1、調用sskgslcas獲得獨占Latch
2、加Buffer Pin
3、調用sskgsldecr釋放Latch
5、memcpy拷貝內存,從SGA向PGA
7、調用sskgslcas獲得獨占Latch
8、釋放Buffer Pin
9、調用sskgsldecr釋放Latch
? ? ? ? 但在唯一索引訪問時,形式是這樣的:
1、調用sskgslcas獲得共享Latch
2、memcpy拷貝內存,從SGA向PGA
3、調用sskgsldecr釋放Latch
? ? ? ? 和ROWID訪問的不同之處,沒有了Buffer Pin。一個CBC Latch,從邏輯讀開始到邏輯讀結尾。
? ? ? ? 為什么索引Root塊、枝塊的訪問,只需要一次共享CBC Latch,葉塊、表塊需要多次獨占。這個問題,


現在可以回答了。Oracle認為根塊、枝塊不會經常
修改,因為,用一個共享CBC Latch,保護邏輯讀所有操作。雖然Latch持有時間長,但由于是共享的,不會有


爭用。而對于葉塊和表塊,Oracle認為有可能會頻
繁修改,所以,用獨占Latch保護,獲得Buffer Pin,在Pin的保護下,讀取、修改Buffer數據。
? ? ? ? 而至于唯一索引,INDEX UNIQUE SCAN的訪問路徑,Oracle單獨做了處理,也依照根塊、枝塊的方式訪


問。這說明如果是唯一索引,對表有大量讀寫混合
的操作,那么CBC Latch競爭會激烈些,因為沒有了Buffer Pin,讀持有CBC Latch的時間會較長。但對于讀遠


遠多于寫的環境,由于讀都是共享Latch,反而可以
大大減少CBC Latch的爭用。
? ? ? ? 好了,先到這里吧。已經有點長了。
? ? ? ? 本章內容,難度稍高,有興趣的兄弟還是要好好測測。這章內容是后面的基礎,如果這一章沒問題,


那后理解Mutex等等內容就方便了。
? ? ? ? 由于本章長度有限,有些問題,比如Buffer Pin的問題。我們交到以后解決,這里先提出來,有興趣


可以自己動手分析、測試下。
? ? ? ? 好,今天就到這里為止了,后續更精彩,敬請期待。
========

揭密buffer Cache中的鏈表補遺

vage


揭密buffer Cache中的鏈表補遺:


(揭密Oracle之七種武器之四:揭密Buffer Cache中的鏈表
http://www.itpub.net/thread-1631537-1-1.html)


補充兩個問題:
1、如果一個臟塊在CKPT-Q上,當此臟塊被移到LRUW時,會從CKPT-Q上去掉嗎?
回答:不會。直到從LRUW上被寫到磁盤上后,才會從CKPT-Q上去掉。
測試過程很簡單,搞一個臟塊,然后再運行一個需要大量掃描LRU的操作,我是這樣的:
set autot trace
update a2_70m set id2=id2+0 where id1=1;
commit;
select * from a4_70m;
(測試環境和前面所述一致,Buffer Cache 100M,a4_70m 80M,但它被設為了Cache)
然后在另一會話中不停運行如下幾條語句:
alter session set events 'immediate trace name SET_TSN_P1 level 5';
set pagesize 50000
set linesize 10000
select file#,dbablk,tch,lru_flag,ba,decode(state,0,'free',1,'xcur',2,'scur',3,'cr',?


4,'read',5,'mrec',6,'irec',7,'write',8,'pi', 9,'memory',10,'mwrite',11,'donated'),
decode(bitand(flag,1), 0, 'N', 'Y') dirty,NXT_REPL,PRV_REPL,WA_NXT,WA_PRV,ts#,HLADDR from x$bh a?


where file#=4 and dbablk=20
order by ? ? ?FILE# ?, ? DBABLK;
select CNUM_SET,CNUM_REPL,ANUM_REPL,CNUM_WRITE ,ANUM_WRITE ?from x$kcbwds where cnum_set>0;
alter session set events 'immediate trace name BUFFER level 0x01000014';
在DUMP結果中,可以找到如下內容:
BH (7c3f497c) file#: 4 rdba: 0x01000014 (4/20) class: 1 ba: 7c298000
……………………(省略部分無意義內容)…………………………………………………………
? hash: [8e96e068,8e96e068] lru: [80bf9cc8,7c7efffc]
? obj-flags: object_ckpt_list
? ckptq: [7bfe8140,7dfea5d0] fileq: [8ea707ec,8ea707ec] objq: [88c3d034,88c3d034]
……………………(省略部分無意義內容)…………………………………………………………
Hex dump of block: st=0, typ_found=1
Dump of memory from 0x7C298000 to 0x7C29A000
……………………(省略部分無意義內容)…………………………………………………………
BH (7c3f497c) file#: 4 rdba: 0x01000014 (4/20) class: 1 ba: 7c298000
……………………(省略部分無意義內容)…………………………………………………………
? hash: [8e96e068,8e96e068] lru-write: [8ea63e58,7c7efffc]
? obj-flags: object_ckpt_list
? ckptq: [7bfe8140,7dfea5d0] fileq: [8ea707ec,8ea707ec] objq: [88c3d034,88c3d034]
……………………(省略部分無意義內容)…………………………………………………………


上一次DUMP的時候,LRU鏈前后塊的指針為lru: [80bf9cc8,7c7efffc],下一次DUMP時,已經變成lru-write:?


[8ea63e58,7c7efffc],但檢查點隊列相關的信息沒變,都是ckptq: [7bfe8140,7dfea5d0]。
當臟塊寫完成時,BH中信息變為這樣:


BH (7c3f497c) file#: 4 rdba: 0x01000014 (4/20) class: 1 ba: 7c298000
……………………(省略部分無意義內容)…………………………………………………………
? hash: [8e96e068,8e96e068] lru: [7c7efffc,7c3f2f18]
? lru-flags: on_auxiliary_list
? ckptq: [NULL] fileq: [NULL] objq: [88c3d02c,88c3d02c]
……………………(省略部分無意義內容)…………………………………………………………
從lru-write: [8ea63e58,7c7efffc],變為了lru: [7c7efffc,7c3f2f18],從lru-flags可以看到,已經被放到


輔助鏈表中了。同時,ckptq已經是NULL了。寫磁盤完成時,才從CKPT-Q上摘掉。


2、根據上面的測試結果,臟塊可能會同時存在于兩個鏈表:LRUW和CKPT-Q。塊從LRUW寫磁盤后,會從CKPT-Q上


摘掉。但反過來呢?從CKPT-Q中寫磁盤,寫完后會從LRUW上摘掉嗎?
答案是,會的。
如何驗證呢?我是通過Latch的獲取來驗證的。
臟塊通過CKPT-Q寫到磁盤后,其所處的LRU位置不變,這一點我在前文中已經提到過,也很容易驗證這點,從x


$BH中的NXT_REPL,PRV_REPL兩列,就可以驗證此點。也就是說,從CKPT-Q寫臟塊,是和LRU鏈表無關的,也就是


不需要獲得LRU Latch。如果從CKPT-Q寫臟塊申請了LRU Latch,哪一定和LRUW有關。
將檢查點超時參數設為很小的值,寫個簡單的DTrace腳本,跟蹤一下DBWR進程Latch的獲得情況。發現每次從


CKPT-Q寫臟塊時,DBWR都要按如下順序申請Latch:
獲得cache buffers chains Latch
? 獲得LRU Latch
? 釋放LRU Latch
釋放cache buffers chains Latch
獲得checkpoint queue latch
釋放checkpoint queue latch
獲得cache buffers lru chain
釋放cache buffers lru chain
也就是說,從CKPT-Q寫臟塊時,不但要獲得checkpoint queue latch,還要LRU Latch。根據前面的分析,從


CKPT-Q寫臟塊時,獲取LRU Latch的目的,只能是為了訪問LRUW,因為CKPT-Q寫不改變塊在LRU的位置,不必要


訪問LRU。哪么,CKPT-Q寫訪問LRUW的目的是什么,可以推論,目的是為了檢查臟塊是否在LRUW、并摘掉它。


還有一點,由于塊已經從LUR移到了LURW,從CKPT-Q寫完成后,雖然不是從LURW寫的,塊應該仍會被放入輔助


LRU,這個就是猜想了。我盡量找個測試實際驗證下。
========

總結

以上是生活随笔為你收集整理的揭密Oracle之 七种武器的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

少妇激情av一区二区 | 麻豆人妻少妇精品无码专区 | 大屁股大乳丰满人妻 | 妺妺窝人体色www在线小说 | 久久久精品人妻久久影视 | 日韩人妻系列无码专区 | 中文字幕无码免费久久9一区9 | 国产精品va在线播放 | 成人欧美一区二区三区黑人 | 中文字幕乱码亚洲无线三区 | 正在播放东北夫妻内射 | 黑森林福利视频导航 | 国产亚洲精品久久久闺蜜 | 97se亚洲精品一区 | 一本久久a久久精品vr综合 | 亚洲国产精品久久久天堂 | 一二三四在线观看免费视频 | 又大又硬又爽免费视频 | 免费人成在线观看网站 | 国产97在线 | 亚洲 | 精品厕所偷拍各类美女tp嘘嘘 | 日韩精品久久久肉伦网站 | 日本高清一区免费中文视频 | 99riav国产精品视频 | 中文字幕无码热在线视频 | 性史性农村dvd毛片 | 97精品人妻一区二区三区香蕉 | 国产精品二区一区二区aⅴ污介绍 | 国产精品视频免费播放 | 一本加勒比波多野结衣 | а√资源新版在线天堂 | 日本xxxx色视频在线观看免费 | 黑森林福利视频导航 | 欧美怡红院免费全部视频 | 日日夜夜撸啊撸 | 国产xxx69麻豆国语对白 | 乱码午夜-极国产极内射 | 欧美三级不卡在线观看 | 精品亚洲韩国一区二区三区 | 亚洲熟女一区二区三区 | 国产麻豆精品精东影业av网站 | 清纯唯美经典一区二区 | 99久久久国产精品无码免费 | 熟妇人妻激情偷爽文 | 天堂在线观看www | 5858s亚洲色大成网站www | 国产精品久久久久久无码 | 天天摸天天碰天天添 | 久久精品国产一区二区三区 | 亚洲无人区一区二区三区 | 精品国精品国产自在久国产87 | 国产精品永久免费视频 | 亚洲а∨天堂久久精品2021 | 露脸叫床粗话东北少妇 | 国产av人人夜夜澡人人爽麻豆 | 亚洲自偷自拍另类第1页 | av无码久久久久不卡免费网站 | 日韩精品a片一区二区三区妖精 | 久久精品女人天堂av免费观看 | 亚洲精品综合五月久久小说 | 久久久www成人免费毛片 | 久久天天躁夜夜躁狠狠 | 欧美人与动性行为视频 | 黑人巨大精品欧美一区二区 | 亚洲码国产精品高潮在线 | 激情人妻另类人妻伦 | 高清国产亚洲精品自在久久 | 日日噜噜噜噜夜夜爽亚洲精品 | 人人妻人人澡人人爽精品欧美 | 中文亚洲成a人片在线观看 | 中文字幕亚洲情99在线 | 日韩人妻无码一区二区三区久久99 | 欧美自拍另类欧美综合图片区 | 女高中生第一次破苞av | 国内精品九九久久久精品 | 成人欧美一区二区三区黑人 | 欧美第一黄网免费网站 | 亚洲一区二区三区无码久久 | 大肉大捧一进一出视频出来呀 | 国产精品毛片一区二区 | 亚洲人成影院在线观看 | 国产成人综合在线女婷五月99播放 | 日本xxxx色视频在线观看免费 | 久久人妻内射无码一区三区 | 成人欧美一区二区三区 | 色综合久久网 | 中文字幕无码人妻少妇免费 | 中文毛片无遮挡高清免费 | 十八禁视频网站在线观看 | 麻豆国产丝袜白领秘书在线观看 | 久久精品一区二区三区四区 | 牲欲强的熟妇农村老妇女 | 欧美人与善在线com | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 精品人妻中文字幕有码在线 | 日本一卡二卡不卡视频查询 | 国产黑色丝袜在线播放 | 特级做a爰片毛片免费69 | 久久国产精品二国产精品 | 欧洲欧美人成视频在线 | а天堂中文在线官网 | 国产人妻久久精品二区三区老狼 | 国产口爆吞精在线视频 | 亚洲男人av香蕉爽爽爽爽 | 一本久久a久久精品亚洲 | 欧美阿v高清资源不卡在线播放 | 亚洲 日韩 欧美 成人 在线观看 | 国产午夜亚洲精品不卡 | 欧美高清在线精品一区 | 亚洲最大成人网站 | 久久无码人妻影院 | 成熟女人特级毛片www免费 | 亚洲国产欧美国产综合一区 | 在线观看免费人成视频 | 国产9 9在线 | 中文 | 欧美性猛交xxxx富婆 | 少妇无码一区二区二三区 | 国产办公室秘书无码精品99 | 欧美黑人乱大交 | 久久国产自偷自偷免费一区调 | 久久97精品久久久久久久不卡 | 亚洲日韩乱码中文无码蜜桃臀网站 | 亚洲国产高清在线观看视频 | 欧美性色19p | 国产性生交xxxxx无码 | 亚洲国产欧美日韩精品一区二区三区 | 国产亚洲tv在线观看 | 老子影院午夜精品无码 | 日本一卡2卡3卡4卡无卡免费网站 国产一区二区三区影院 | 亚洲中文字幕成人无码 | 九月婷婷人人澡人人添人人爽 | 日日躁夜夜躁狠狠躁 | 亚洲精品鲁一鲁一区二区三区 | 三上悠亚人妻中文字幕在线 | 亚洲gv猛男gv无码男同 | 99久久精品日本一区二区免费 | 国产网红无码精品视频 | 永久黄网站色视频免费直播 | 伊人久久婷婷五月综合97色 | 国产免费无码一区二区视频 | 色婷婷综合中文久久一本 | 77777熟女视频在线观看 а天堂中文在线官网 | 久久精品女人天堂av免费观看 | 亚洲精品久久久久中文第一幕 | 日本一卡二卡不卡视频查询 | 特大黑人娇小亚洲女 | 理论片87福利理论电影 | 中文字幕无码乱人伦 | 男人和女人高潮免费网站 | 在线观看国产一区二区三区 | 日韩欧美中文字幕在线三区 | 76少妇精品导航 | 亚洲欧美日韩国产精品一区二区 | 欧美怡红院免费全部视频 | 亚洲色欲色欲欲www在线 | 131美女爱做视频 | 亚洲男人av香蕉爽爽爽爽 | 成人精品视频一区二区三区尤物 | 国产精品欧美成人 | 亚洲一区二区三区无码久久 | 中文字幕无码免费久久99 | 国产精品理论片在线观看 | 亚洲无人区一区二区三区 | 成年美女黄网站色大免费视频 | 免费无码的av片在线观看 | 国产熟女一区二区三区四区五区 | 中文字幕亚洲情99在线 | 国产人妻精品午夜福利免费 | 蜜臀av在线观看 在线欧美精品一区二区三区 | 欧美熟妇另类久久久久久多毛 | 亚洲 高清 成人 动漫 | 欧美人与牲动交xxxx | 99久久人妻精品免费二区 | 精品国产麻豆免费人成网站 | 色窝窝无码一区二区三区色欲 | 色欲av亚洲一区无码少妇 | 一本久久伊人热热精品中文字幕 | a在线观看免费网站大全 | 最近免费中文字幕中文高清百度 | 国产片av国语在线观看 | 国产精品鲁鲁鲁 | 国产成人综合在线女婷五月99播放 | 亚洲成熟女人毛毛耸耸多 | 精品人人妻人人澡人人爽人人 | 熟妇人妻激情偷爽文 | 成人性做爰aaa片免费看不忠 | 久久精品国产99精品亚洲 | 日本精品高清一区二区 | 丰腴饱满的极品熟妇 | 国产卡一卡二卡三 | 夜先锋av资源网站 | 波多野结衣乳巨码无在线观看 | 人妻少妇精品无码专区二区 | 撕开奶罩揉吮奶头视频 | 动漫av网站免费观看 | 久久久亚洲欧洲日产国码αv | 精品国产国产综合精品 | 亚洲一区二区三区无码久久 | 国产在线精品一区二区高清不卡 | 欧美兽交xxxx×视频 | 久久zyz资源站无码中文动漫 | 国产精品久久久久久无码 | 国产真实夫妇视频 | 国产成人一区二区三区在线观看 | 人人澡人人妻人人爽人人蜜桃 | 久9re热视频这里只有精品 | 欧美日韩一区二区三区自拍 | 天堂亚洲2017在线观看 | 国产熟妇另类久久久久 | 精品一二三区久久aaa片 | 国产免费无码一区二区视频 | 亚洲中文字幕va福利 | 人妻尝试又大又粗久久 | 成人免费视频一区二区 | 天天综合网天天综合色 | 精品久久久无码人妻字幂 | 国产成人无码av在线影院 | 成人欧美一区二区三区黑人 | 日本一区二区三区免费播放 | aⅴ亚洲 日韩 色 图网站 播放 | 乱码av麻豆丝袜熟女系列 | 国产精品久久久 | 丰满少妇人妻久久久久久 | 又大又硬又爽免费视频 | 熟女少妇人妻中文字幕 | 丰满人妻精品国产99aⅴ | 精品少妇爆乳无码av无码专区 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 无码av岛国片在线播放 | 国产亚洲日韩欧美另类第八页 | 午夜精品久久久内射近拍高清 | 丰满人妻翻云覆雨呻吟视频 | 又粗又大又硬又长又爽 | 日韩成人一区二区三区在线观看 | 秋霞成人午夜鲁丝一区二区三区 | 日本一区二区三区免费高清 | 性啪啪chinese东北女人 | 漂亮人妻洗澡被公强 日日躁 | 中文久久乱码一区二区 | 精品成在人线av无码免费看 | 亚洲色无码一区二区三区 | 自拍偷自拍亚洲精品10p | 国产人妻久久精品二区三区老狼 | 强奷人妻日本中文字幕 | 国产激情精品一区二区三区 | 激情爆乳一区二区三区 | 强伦人妻一区二区三区视频18 | 国产偷抇久久精品a片69 | 正在播放老肥熟妇露脸 | 亚洲成熟女人毛毛耸耸多 | 鲁大师影院在线观看 | 精品国产av色一区二区深夜久久 | 欧洲极品少妇 | 激情内射亚州一区二区三区爱妻 | 婷婷丁香六月激情综合啪 | 377p欧洲日本亚洲大胆 | 国产精品毛片一区二区 | 久久综合九色综合欧美狠狠 | 亚洲成av人综合在线观看 | 亚洲人成网站在线播放942 | 1000部啪啪未满十八勿入下载 | 精品人妻人人做人人爽夜夜爽 | 伊人久久大香线蕉亚洲 | 成人一在线视频日韩国产 | 中文字幕精品av一区二区五区 | 国产乱人伦偷精品视频 | 久久久久免费精品国产 | 国产一区二区三区影院 | 少妇愉情理伦片bd | 久久综合久久自在自线精品自 | 大肉大捧一进一出视频出来呀 | 天干天干啦夜天干天2017 | 亚洲国产av精品一区二区蜜芽 | 国产97在线 | 亚洲 | 动漫av一区二区在线观看 | 又粗又大又硬又长又爽 | 麻花豆传媒剧国产免费mv在线 | 欧美激情内射喷水高潮 | www一区二区www免费 | 亚洲娇小与黑人巨大交 | 中文字幕无码日韩专区 | 国产成人精品无码播放 | 欧美日本免费一区二区三区 | 人妻夜夜爽天天爽三区 | 一本久道久久综合婷婷五月 | 97资源共享在线视频 | 亚洲欧美精品伊人久久 | 久久久精品欧美一区二区免费 | 玩弄中年熟妇正在播放 | 日韩欧美成人免费观看 | 精品国偷自产在线 | 一区二区三区乱码在线 | 欧洲 | 一本久久a久久精品vr综合 | 无码任你躁久久久久久久 | 久久综合久久自在自线精品自 | 成人女人看片免费视频放人 | 少妇无码一区二区二三区 | 熟妇女人妻丰满少妇中文字幕 | 精品一区二区三区波多野结衣 | 大色综合色综合网站 | 国产精品丝袜黑色高跟鞋 | 午夜无码人妻av大片色欲 | 欧美喷潮久久久xxxxx | 99riav国产精品视频 | 国产av久久久久精东av | 国产一区二区不卡老阿姨 | 麻豆国产人妻欲求不满 | 在线天堂新版最新版在线8 | 国产成人无码午夜视频在线观看 | 国产精品高潮呻吟av久久 | 任你躁在线精品免费 | 精品久久久久久人妻无码中文字幕 | 又大又硬又爽免费视频 | 日日躁夜夜躁狠狠躁 | 国产小呦泬泬99精品 | 人人超人人超碰超国产 | 亚洲一区二区三区四区 | 少妇无码av无码专区在线观看 | 精品aⅴ一区二区三区 | 一个人看的视频www在线 | 一本大道伊人av久久综合 | 福利一区二区三区视频在线观看 | 高清不卡一区二区三区 | 欧洲精品码一区二区三区免费看 | 激情亚洲一区国产精品 | 无码av岛国片在线播放 | 久久久av男人的天堂 | 少妇无套内谢久久久久 | 天堂在线观看www | 人妻无码久久精品人妻 | 国产精品久久精品三级 | 国产亚洲人成a在线v网站 | 亚洲熟女一区二区三区 | 伊人色综合久久天天小片 | 欧洲精品码一区二区三区免费看 | 国产人妻大战黑人第1集 | 2019午夜福利不卡片在线 | 国产猛烈高潮尖叫视频免费 | 性色欲情网站iwww九文堂 | 人人爽人人澡人人高潮 | 麻豆蜜桃av蜜臀av色欲av | 成人试看120秒体验区 | 精品乱子伦一区二区三区 | 亚洲色大成网站www国产 | 波多野42部无码喷潮在线 | 野狼第一精品社区 | 精品一区二区三区无码免费视频 | 国产精品沙发午睡系列 | 影音先锋中文字幕无码 | 少妇激情av一区二区 | 高潮毛片无遮挡高清免费视频 | 在线 国产 欧美 亚洲 天堂 | 国产成人无码午夜视频在线观看 | 国产精品成人av在线观看 | 久久国产精品偷任你爽任你 | 国产无套粉嫩白浆在线 | 精品乱码久久久久久久 | 中文字幕无码免费久久99 | 亚洲精品久久久久avwww潮水 | 亚洲区小说区激情区图片区 | 偷窥日本少妇撒尿chinese | 国产精品鲁鲁鲁 | 久久久久99精品国产片 | 国产黑色丝袜在线播放 | 特大黑人娇小亚洲女 | 国产精品视频免费播放 | 日本www一道久久久免费榴莲 | 亚洲综合久久一区二区 | 在线精品国产一区二区三区 | 成人无码视频免费播放 | 亚洲欧洲日本无在线码 | 国产亚洲精品精品国产亚洲综合 | 一个人免费观看的www视频 | 成年美女黄网站色大免费全看 | 极品嫩模高潮叫床 | 最近的中文字幕在线看视频 | 国产人妻精品一区二区三区不卡 | 欧美高清在线精品一区 | 宝宝好涨水快流出来免费视频 | 国产av人人夜夜澡人人爽麻豆 | 国产莉萝无码av在线播放 | 中文精品无码中文字幕无码专区 | 中文字幕乱码中文乱码51精品 | 亚洲午夜久久久影院 | 欧美性猛交xxxx富婆 | 蜜臀av在线播放 久久综合激激的五月天 | 久久久无码中文字幕久... | 日日碰狠狠丁香久燥 | 亚洲精品国产a久久久久久 | 99久久婷婷国产综合精品青草免费 | 女人被男人爽到呻吟的视频 | 亚洲日韩av一区二区三区四区 | 国产精品对白交换视频 | 人妻少妇精品视频专区 | 亚洲色欲久久久综合网东京热 | 曰本女人与公拘交酡免费视频 | 美女黄网站人色视频免费国产 | 精品国产青草久久久久福利 | 国产综合久久久久鬼色 | 国产成人综合在线女婷五月99播放 | 久久久久成人片免费观看蜜芽 | 精品无码成人片一区二区98 | 老熟妇仑乱视频一区二区 | 亚洲阿v天堂在线 | 97资源共享在线视频 | 国产人妻精品午夜福利免费 | 亚洲综合久久一区二区 | 男女超爽视频免费播放 | 欧美日韩综合一区二区三区 | 精品人妻av区 | 好爽又高潮了毛片免费下载 | 国产乱人无码伦av在线a | 美女扒开屁股让男人桶 | 久久精品丝袜高跟鞋 | 日韩欧美中文字幕在线三区 | 丰满少妇熟乱xxxxx视频 | 性欧美疯狂xxxxbbbb | 无码人中文字幕 | 亚洲日韩av一区二区三区四区 | 国产做国产爱免费视频 | 成人av无码一区二区三区 | 曰本女人与公拘交酡免费视频 | 狠狠色噜噜狠狠狠狠7777米奇 | 欧美日韩综合一区二区三区 | 亚洲七七久久桃花影院 | 亚洲小说春色综合另类 | 色婷婷香蕉在线一区二区 | 中文字幕乱码亚洲无线三区 | 日本熟妇浓毛 | 无码人妻精品一区二区三区下载 | 国产午夜手机精彩视频 | 国产精品无码一区二区三区不卡 | 久久久国产精品无码免费专区 | 狠狠综合久久久久综合网 | 国产美女精品一区二区三区 | 男人和女人高潮免费网站 | 97精品国产97久久久久久免费 | 久久久久免费看成人影片 | 国产精品久久久午夜夜伦鲁鲁 | 色一情一乱一伦一视频免费看 | 装睡被陌生人摸出水好爽 | 毛片内射-百度 | 1000部啪啪未满十八勿入下载 | 亚洲乱码日产精品bd | 国产无遮挡吃胸膜奶免费看 | 久久99精品国产.久久久久 | 一本久道久久综合婷婷五月 | 日日麻批免费40分钟无码 | 熟妇女人妻丰满少妇中文字幕 | 老太婆性杂交欧美肥老太 | 亚洲天堂2017无码中文 | 熟妇女人妻丰满少妇中文字幕 | 少妇性l交大片欧洲热妇乱xxx | 波多野结衣av在线观看 | 无套内谢的新婚少妇国语播放 | 欧美三级a做爰在线观看 | 国产综合在线观看 | 国产精品久久久 | 日韩在线不卡免费视频一区 | 国产色在线 | 国产 | 熟妇女人妻丰满少妇中文字幕 | 国产成人综合美国十次 | 国产尤物精品视频 | 亚洲成av人在线观看网址 | 人妻无码久久精品人妻 | 激情国产av做激情国产爱 | 久久午夜夜伦鲁鲁片无码免费 | 日日摸日日碰夜夜爽av | 人妻与老人中文字幕 | 麻豆果冻传媒2021精品传媒一区下载 | 黑人大群体交免费视频 | 老熟女乱子伦 | 在线а√天堂中文官网 | 色一情一乱一伦一视频免费看 | 国产精品久久久久影院嫩草 | 丰满妇女强制高潮18xxxx | 国产欧美熟妇另类久久久 | 成人无码视频在线观看网站 | 久久亚洲国产成人精品性色 | 中文字幕人妻无码一区二区三区 | 久久精品无码一区二区三区 | 俄罗斯老熟妇色xxxx | 国产成人综合色在线观看网站 | 露脸叫床粗话东北少妇 | 成年美女黄网站色大免费视频 | 亚洲欧洲中文日韩av乱码 | 日日摸天天摸爽爽狠狠97 | 日韩av激情在线观看 | 强开小婷嫩苞又嫩又紧视频 | 国产艳妇av在线观看果冻传媒 | 中文字幕无码日韩欧毛 | 一本久道久久综合狠狠爱 | 偷窥日本少妇撒尿chinese | 亚洲另类伦春色综合小说 | 东京热男人av天堂 | 水蜜桃亚洲一二三四在线 | 国产精品va在线播放 | 久久精品视频在线看15 | 免费无码的av片在线观看 | 国产精品久久久久久无码 | 九九在线中文字幕无码 | 久久人人爽人人爽人人片av高清 | 成人aaa片一区国产精品 | 色老头在线一区二区三区 | 国内精品人妻无码久久久影院蜜桃 | 亚洲中文字幕在线观看 | 精品无码国产自产拍在线观看蜜 | 九九久久精品国产免费看小说 | 内射爽无广熟女亚洲 | 国产欧美精品一区二区三区 | 大地资源网第二页免费观看 | 男女超爽视频免费播放 | 亚洲另类伦春色综合小说 | 无套内谢老熟女 | а√天堂www在线天堂小说 | 中文字幕色婷婷在线视频 | 成人无码精品一区二区三区 | 少妇性l交大片欧洲热妇乱xxx | 亚洲日韩av一区二区三区四区 | aⅴ在线视频男人的天堂 | 国产精品-区区久久久狼 | 野外少妇愉情中文字幕 | 图片小说视频一区二区 | 国产精品无码mv在线观看 | 少妇的肉体aa片免费 | 成年美女黄网站色大免费视频 | 免费人成在线观看网站 | 美女黄网站人色视频免费国产 | 无码国产色欲xxxxx视频 | 性色欲网站人妻丰满中文久久不卡 | 图片小说视频一区二区 | 一个人看的视频www在线 | 在线a亚洲视频播放在线观看 | 天堂а√在线地址中文在线 | 丰满诱人的人妻3 | 国产激情艳情在线看视频 | 亚洲精品综合五月久久小说 | 天堂在线观看www | 亚洲熟妇色xxxxx欧美老妇 | 成年女人永久免费看片 | 国产无套内射久久久国产 | 丰满少妇熟乱xxxxx视频 | 高清无码午夜福利视频 | 色综合视频一区二区三区 | 国产av久久久久精东av | 国产99久久精品一区二区 | 无遮挡啪啪摇乳动态图 | 强辱丰满人妻hd中文字幕 | 欧美丰满熟妇xxxx | 最新国产麻豆aⅴ精品无码 | 又黄又爽又色的视频 | 亚洲精品成人福利网站 | 少妇性俱乐部纵欲狂欢电影 | 国产精品二区一区二区aⅴ污介绍 | 特黄特色大片免费播放器图片 | 欧洲精品码一区二区三区免费看 | 免费无码肉片在线观看 | 最新国产麻豆aⅴ精品无码 | а√资源新版在线天堂 | 永久免费精品精品永久-夜色 | 国产一区二区三区四区五区加勒比 | 国产欧美亚洲精品a | 国产熟女一区二区三区四区五区 | 亚洲国产精品毛片av不卡在线 | 久久久久久久久888 | 日本乱偷人妻中文字幕 | 免费中文字幕日韩欧美 | 亚洲精品国产第一综合99久久 | 国产精品久久国产精品99 | 伊人久久婷婷五月综合97色 | 免费国产黄网站在线观看 | 久久久久成人片免费观看蜜芽 | 九九在线中文字幕无码 | 3d动漫精品啪啪一区二区中 | 性史性农村dvd毛片 | 亚洲国产av精品一区二区蜜芽 | 精品人妻av区 | 大地资源中文第3页 | 精品偷拍一区二区三区在线看 | 国产精品第一国产精品 | 亚洲日韩av一区二区三区中文 | 亚洲色无码一区二区三区 | 97se亚洲精品一区 | 99精品国产综合久久久久五月天 | 国产一区二区三区日韩精品 | 国产乱人无码伦av在线a | 奇米影视7777久久精品人人爽 | 丰满护士巨好爽好大乳 | 红桃av一区二区三区在线无码av | 男人的天堂2018无码 | 欧美人与物videos另类 | 无码国产色欲xxxxx视频 | 亚洲成在人网站无码天堂 | 精品一区二区三区波多野结衣 | 亚洲精品国产a久久久久久 | 亚洲a无码综合a国产av中文 | 中文无码精品a∨在线观看不卡 | 亚洲人亚洲人成电影网站色 | 无码一区二区三区在线观看 | 国产猛烈高潮尖叫视频免费 | 久久久久成人片免费观看蜜芽 | 强伦人妻一区二区三区视频18 | 狠狠cao日日穞夜夜穞av | 亚洲乱码国产乱码精品精 | 噜噜噜亚洲色成人网站 | 天天爽夜夜爽夜夜爽 | 一本久久a久久精品亚洲 | 精品一区二区不卡无码av | 国产精品久久久午夜夜伦鲁鲁 | 一本色道婷婷久久欧美 | 1000部啪啪未满十八勿入下载 | 天堂在线观看www | 欧美精品在线观看 | 激情爆乳一区二区三区 | 天堂а√在线中文在线 | 成人精品天堂一区二区三区 | 黑人巨大精品欧美一区二区 | 色一情一乱一伦一区二区三欧美 | 日日摸日日碰夜夜爽av | 捆绑白丝粉色jk震动捧喷白浆 | 一二三四社区在线中文视频 | 亚洲精品午夜无码电影网 | 免费人成在线视频无码 | 99久久人妻精品免费二区 | 国产精品视频免费播放 | 精品久久久无码中文字幕 | 国产人妻精品一区二区三区 | 亚洲一区二区三区播放 | 欧美一区二区三区视频在线观看 | 亚洲国产精品久久久久久 | 国产精品美女久久久网av | 嫩b人妻精品一区二区三区 | 欧美亚洲日韩国产人成在线播放 | 福利一区二区三区视频在线观看 | 妺妺窝人体色www在线小说 | 国产深夜福利视频在线 | 美女黄网站人色视频免费国产 | 久久www免费人成人片 | 久久久久久久久888 | 波多野结衣aⅴ在线 | 亚洲s码欧洲m码国产av | 扒开双腿疯狂进出爽爽爽视频 | 国产av久久久久精东av | 国产精品亚洲五月天高清 | 久久人妻内射无码一区三区 | 国产色xx群视频射精 | 久久亚洲国产成人精品性色 | 伊人久久大香线焦av综合影院 | 亚洲精品一区国产 | 中文毛片无遮挡高清免费 | 亚洲一区av无码专区在线观看 | 久久人人爽人人爽人人片ⅴ | 在线观看欧美一区二区三区 | 成在人线av无码免观看麻豆 | 国产人妻精品午夜福利免费 | 红桃av一区二区三区在线无码av | 国产va免费精品观看 | 国产精品高潮呻吟av久久4虎 | 欧美精品国产综合久久 | 亚洲精品无码国产 | a片免费视频在线观看 | 色综合久久久无码中文字幕 | 无遮挡国产高潮视频免费观看 | 久久五月精品中文字幕 | 国产成人一区二区三区在线观看 | 免费无码午夜福利片69 | 亚洲乱码中文字幕在线 | 久久99热只有频精品8 | 中文字幕无码免费久久9一区9 | 日日摸日日碰夜夜爽av | 欧美成人高清在线播放 | 国产亚洲视频中文字幕97精品 | 国产精品久久久久久亚洲毛片 | 欧美成人免费全部网站 | 97久久国产亚洲精品超碰热 | 亚洲精品成人福利网站 | 国产莉萝无码av在线播放 | 日韩精品a片一区二区三区妖精 | 久久熟妇人妻午夜寂寞影院 | 最新版天堂资源中文官网 | 樱花草在线社区www | 欧美精品在线观看 | 免费中文字幕日韩欧美 | 国产综合久久久久鬼色 | 综合激情五月综合激情五月激情1 | 久久国产自偷自偷免费一区调 | 中文字幕人成乱码熟女app | 日本一本二本三区免费 | 久久精品国产一区二区三区肥胖 | 国产成人无码av在线影院 | 亚洲成av人影院在线观看 | aⅴ在线视频男人的天堂 | 国精品人妻无码一区二区三区蜜柚 | 亚洲大尺度无码无码专区 | 亚洲 日韩 欧美 成人 在线观看 | 久久精品人人做人人综合试看 | 少女韩国电视剧在线观看完整 | 四虎影视成人永久免费观看视频 | 国产亚洲精品久久久ai换 | 亚洲欧美综合区丁香五月小说 | 亚洲色欲色欲欲www在线 | 日本熟妇大屁股人妻 | 国产97色在线 | 免 | 国产亚洲tv在线观看 | 国内精品人妻无码久久久影院蜜桃 | 麻豆国产丝袜白领秘书在线观看 | 国产无遮挡又黄又爽免费视频 | 欧美性猛交xxxx富婆 | 女人被爽到呻吟gif动态图视看 | 四十如虎的丰满熟妇啪啪 | 国产人妖乱国产精品人妖 | 国产乱子伦视频在线播放 | 人人妻人人澡人人爽人人精品 | 国产在热线精品视频 | 黑人玩弄人妻中文在线 | 日韩av无码一区二区三区 | 久久精品无码一区二区三区 | 国产肉丝袜在线观看 | 国产尤物精品视频 | 99精品无人区乱码1区2区3区 | 夜先锋av资源网站 | 亚洲国产高清在线观看视频 | 亚洲综合久久一区二区 | 领导边摸边吃奶边做爽在线观看 | 99久久精品无码一区二区毛片 | 99riav国产精品视频 | 中文字幕日产无线码一区 | 高潮毛片无遮挡高清免费 | 无码一区二区三区在线观看 | 亚洲日韩av一区二区三区四区 | 日韩亚洲欧美精品综合 | 欧美日韩一区二区免费视频 | 久久久久国色av免费观看性色 | 中文精品无码中文字幕无码专区 | 国产精品二区一区二区aⅴ污介绍 | 亚无码乱人伦一区二区 | 亚洲午夜福利在线观看 | 亚洲国产午夜精品理论片 | 狠狠躁日日躁夜夜躁2020 | 在线 国产 欧美 亚洲 天堂 | 牲欲强的熟妇农村老妇女 | 狠狠cao日日穞夜夜穞av | 国产免费久久精品国产传媒 | ass日本丰满熟妇pics | 九月婷婷人人澡人人添人人爽 | 国产精品99久久精品爆乳 | 久久久久久国产精品无码下载 | 1000部夫妻午夜免费 | 天堂а√在线地址中文在线 | 国产手机在线αⅴ片无码观看 | 久久国产自偷自偷免费一区调 | 日本护士毛茸茸高潮 | 一个人看的www免费视频在线观看 | 精品无码成人片一区二区98 | 永久免费观看美女裸体的网站 | 色欲久久久天天天综合网精品 | 成年美女黄网站色大免费全看 | 国产艳妇av在线观看果冻传媒 | 色婷婷av一区二区三区之红樱桃 | 国产综合色产在线精品 | 好男人社区资源 | www国产亚洲精品久久网站 | 18无码粉嫩小泬无套在线观看 | 九九热爱视频精品 | 免费播放一区二区三区 | 亚洲国产精品久久久久久 | 六月丁香婷婷色狠狠久久 | 97资源共享在线视频 | 免费观看又污又黄的网站 | 一个人免费观看的www视频 | 国产免费久久精品国产传媒 | 欧美性黑人极品hd | 亚洲国产av美女网站 | 亚洲欧美日韩综合久久久 | 亚洲国产成人a精品不卡在线 | 国产亚洲精品久久久久久 | 亚洲欧美日韩综合久久久 | 中文字幕+乱码+中文字幕一区 | 国产精品久久久久久亚洲影视内衣 | 少妇性俱乐部纵欲狂欢电影 | 亚洲中文字幕av在天堂 | 久久精品国产亚洲精品 | 国产高清不卡无码视频 | 88国产精品欧美一区二区三区 | 国产激情精品一区二区三区 | 国产精品无码久久av | 亚洲欧美综合区丁香五月小说 | 欧美激情一区二区三区成人 | 亚洲综合在线一区二区三区 | 大地资源网第二页免费观看 | 丰腴饱满的极品熟妇 | 全黄性性激高免费视频 | 国产亚洲视频中文字幕97精品 | 久久午夜夜伦鲁鲁片无码免费 | 黄网在线观看免费网站 | 九九久久精品国产免费看小说 | 极品尤物被啪到呻吟喷水 | 国产三级久久久精品麻豆三级 | 白嫩日本少妇做爰 | 老熟妇仑乱视频一区二区 | 久久久久久久久888 | 又大又紧又粉嫩18p少妇 | 亚洲人成无码网www | 鲁一鲁av2019在线 | 国产精品久久国产精品99 | 国产精品自产拍在线观看 | 99国产欧美久久久精品 | 亚洲精品久久久久avwww潮水 | 18黄暴禁片在线观看 | 少妇高潮一区二区三区99 | 国产97在线 | 亚洲 | 亚洲熟悉妇女xxx妇女av | 国产性生大片免费观看性 | 亚洲区欧美区综合区自拍区 | 久久99精品国产麻豆蜜芽 | 狠狠色丁香久久婷婷综合五月 | 久久综合狠狠综合久久综合88 | 亚洲精品国产精品乱码不卡 | 高潮毛片无遮挡高清免费视频 | 人妻互换免费中文字幕 | 特黄特色大片免费播放器图片 | 久久久亚洲欧洲日产国码αv | 国产莉萝无码av在线播放 | 亚洲欧美国产精品专区久久 | 黑人粗大猛烈进出高潮视频 | 荫蒂被男人添的好舒服爽免费视频 | 99久久精品午夜一区二区 | 美女扒开屁股让男人桶 | 无套内射视频囯产 | 一区二区传媒有限公司 | 日产国产精品亚洲系列 | 国产极品视觉盛宴 | 一个人看的www免费视频在线观看 | 狠狠噜狠狠狠狠丁香五月 | 高中生自慰www网站 | 色综合久久网 | 精品一区二区三区波多野结衣 | 欧美日韩久久久精品a片 | 亚洲人成影院在线无码按摩店 | 久久久久99精品成人片 | 日日天日日夜日日摸 | 乌克兰少妇性做爰 | 亚洲成a人片在线观看日本 | 国产网红无码精品视频 | 欧美亚洲国产一区二区三区 | 丰满人妻精品国产99aⅴ | 国产欧美熟妇另类久久久 | 少妇无码吹潮 | 精品人妻中文字幕有码在线 | 一本久久伊人热热精品中文字幕 | 亚洲国产精华液网站w | 丰满少妇女裸体bbw | 纯爱无遮挡h肉动漫在线播放 | 国产欧美精品一区二区三区 | 999久久久国产精品消防器材 | 一个人免费观看的www视频 | 俺去俺来也在线www色官网 | 少妇被黑人到高潮喷出白浆 | 国产福利视频一区二区 | 日韩无套无码精品 | 日韩少妇白浆无码系列 | 熟妇人妻无乱码中文字幕 | 国产亚av手机在线观看 | 99视频精品全部免费免费观看 | 99riav国产精品视频 | 国产亚洲精品久久久ai换 | 日本饥渴人妻欲求不满 | 在线а√天堂中文官网 | 理论片87福利理论电影 | 日韩av无码一区二区三区不卡 | 欧洲熟妇色 欧美 | 国产va免费精品观看 | 草草网站影院白丝内射 | 久久久久久久人妻无码中文字幕爆 | 色偷偷人人澡人人爽人人模 | 波多野结衣av一区二区全免费观看 | 国产精品无码一区二区三区不卡 | 最新版天堂资源中文官网 | 国产精品人人爽人人做我的可爱 | 国产精品爱久久久久久久 | 国语自产偷拍精品视频偷 | 亚洲男女内射在线播放 | 中文字幕人成乱码熟女app | 成在人线av无码免费 | 亚洲欧美精品伊人久久 | 亚洲国产欧美在线成人 | 老头边吃奶边弄进去呻吟 | 亚洲日韩精品欧美一区二区 | 久久精品99久久香蕉国产色戒 | 狠狠色丁香久久婷婷综合五月 | 97无码免费人妻超级碰碰夜夜 | 国产精品久久国产精品99 | 激情亚洲一区国产精品 | 又大又紧又粉嫩18p少妇 | 少妇高潮喷潮久久久影院 | 乱人伦人妻中文字幕无码 | 欧美人与善在线com | 精品久久久久久亚洲精品 | 国产免费观看黄av片 | 色欲av亚洲一区无码少妇 | 色综合久久久久综合一本到桃花网 | 欧洲精品码一区二区三区免费看 | 牲欲强的熟妇农村老妇女视频 | 色五月五月丁香亚洲综合网 | а天堂中文在线官网 | 国产情侣作爱视频免费观看 | 久久精品中文闷骚内射 | 日韩亚洲欧美中文高清在线 | 国产免费无码一区二区视频 | 国产精华av午夜在线观看 | 日韩人妻无码中文字幕视频 | 牲欲强的熟妇农村老妇女 | 欧美日韩综合一区二区三区 | 人妻插b视频一区二区三区 | 国产免费久久久久久无码 | 午夜时刻免费入口 | av人摸人人人澡人人超碰下载 | 久久午夜无码鲁丝片 | 日日碰狠狠躁久久躁蜜桃 | 丰满岳乱妇在线观看中字无码 | 无码人妻少妇伦在线电影 | 久久久国产精品无码免费专区 | 亚洲欧美中文字幕5发布 | 亚洲精品国产品国语在线观看 | 久久综合久久自在自线精品自 | 久久精品人妻少妇一区二区三区 | 日日噜噜噜噜夜夜爽亚洲精品 | 免费看男女做好爽好硬视频 | 真人与拘做受免费视频 | 学生妹亚洲一区二区 | 欧美 丝袜 自拍 制服 另类 | 婷婷五月综合缴情在线视频 | 国产午夜视频在线观看 | 丰满少妇高潮惨叫视频 | 精品无码国产自产拍在线观看蜜 | 天天躁夜夜躁狠狠是什么心态 | 国产精品国产自线拍免费软件 | 精品久久久久久亚洲精品 | 国产深夜福利视频在线 | 欧美熟妇另类久久久久久多毛 | 免费观看又污又黄的网站 | 亚洲性无码av中文字幕 | 国产精品a成v人在线播放 | 国产人成高清在线视频99最全资源 | 亚洲人成人无码网www国产 | 四虎国产精品一区二区 | 白嫩日本少妇做爰 | 中文字幕无码av激情不卡 | 97夜夜澡人人双人人人喊 | 久久国产精品_国产精品 | 亚洲va欧美va天堂v国产综合 | 人人妻人人澡人人爽欧美一区 | 漂亮人妻洗澡被公强 日日躁 | 午夜无码区在线观看 | 精品亚洲韩国一区二区三区 | 曰本女人与公拘交酡免费视频 | 六月丁香婷婷色狠狠久久 | 狠狠色欧美亚洲狠狠色www | a在线亚洲男人的天堂 | 无码毛片视频一区二区本码 | 国精产品一区二区三区 | 婷婷丁香六月激情综合啪 | 精品无码av一区二区三区 | 天下第一社区视频www日本 | 亚洲一区二区观看播放 | 国产精品久久久久久亚洲影视内衣 | 天下第一社区视频www日本 | 蜜桃视频插满18在线观看 | 一本大道伊人av久久综合 | 精品一区二区三区无码免费视频 | 欧美真人作爱免费视频 | 精品无码国产一区二区三区av | 天海翼激烈高潮到腰振不止 | 精品无码一区二区三区爱欲 | 国产午夜视频在线观看 | 亚洲国产精品无码一区二区三区 | 久久国产自偷自偷免费一区调 | 久9re热视频这里只有精品 | 国产亚洲精品精品国产亚洲综合 | 免费无码肉片在线观看 | 在线 国产 欧美 亚洲 天堂 | 秋霞特色aa大片 | 精品厕所偷拍各类美女tp嘘嘘 | 曰本女人与公拘交酡免费视频 | 久久成人a毛片免费观看网站 | 18精品久久久无码午夜福利 | 日本一卡2卡3卡四卡精品网站 | 日韩人妻无码中文字幕视频 | 乱人伦中文视频在线观看 | 久激情内射婷内射蜜桃人妖 | 99久久精品国产一区二区蜜芽 | 在线精品亚洲一区二区 | 国产精品嫩草久久久久 | 岛国片人妻三上悠亚 | 国产麻豆精品精东影业av网站 | 日韩视频 中文字幕 视频一区 | 精品欧美一区二区三区久久久 | 粗大的内捧猛烈进出视频 | 欧美丰满熟妇xxxx | 人人妻人人澡人人爽人人精品 | 天堂无码人妻精品一区二区三区 | 激情内射日本一区二区三区 | 国产黑色丝袜在线播放 | 久久99国产综合精品 | 性色欲情网站iwww九文堂 | 97久久国产亚洲精品超碰热 | 中文字幕 人妻熟女 | 亚洲一区二区三区偷拍女厕 | 国产sm调教视频在线观看 | 成人免费视频一区二区 | 人人妻人人澡人人爽欧美一区 | 国内精品人妻无码久久久影院蜜桃 | 天堂亚洲免费视频 | 蜜臀av无码人妻精品 | 97无码免费人妻超级碰碰夜夜 | 久久精品一区二区三区四区 | 任你躁国产自任一区二区三区 | 日韩在线不卡免费视频一区 | 夜夜影院未满十八勿进 | 天天躁夜夜躁狠狠是什么心态 | 思思久久99热只有频精品66 | 少妇无码一区二区二三区 | 久久 国产 尿 小便 嘘嘘 | 国产色xx群视频射精 | 鲁一鲁av2019在线 | 成在人线av无码免费 | 狂野欧美激情性xxxx | 麻豆av传媒蜜桃天美传媒 | 久久久久se色偷偷亚洲精品av | 98国产精品综合一区二区三区 | 小泽玛莉亚一区二区视频在线 | 国产综合在线观看 | 国精产品一区二区三区 | 国产精品久免费的黄网站 | 免费观看黄网站 | 久久精品99久久香蕉国产色戒 | 精品欧美一区二区三区久久久 | 国产免费久久久久久无码 | 88国产精品欧美一区二区三区 | 成人欧美一区二区三区黑人 | 国产超级va在线观看视频 | 少妇性l交大片 | 亚洲日本在线电影 | 少妇厨房愉情理9仑片视频 | 丰满肥臀大屁股熟妇激情视频 | 久久人人爽人人人人片 | 4hu四虎永久在线观看 | 亚洲一区二区三区含羞草 | 天干天干啦夜天干天2017 | 国产精品18久久久久久麻辣 | 久久久久久国产精品无码下载 | 精品国产福利一区二区 | 亚洲性无码av中文字幕 | 无码av免费一区二区三区试看 | 人妻中文无码久热丝袜 | 香港三级日本三级妇三级 | 天海翼激烈高潮到腰振不止 | 精品人妻中文字幕有码在线 | 国产精品亚洲综合色区韩国 | 丰满少妇女裸体bbw | 国产香蕉97碰碰久久人人 | 丰满少妇人妻久久久久久 | 日本精品少妇一区二区三区 | 少妇无码av无码专区在线观看 | 国产精品久久久久无码av色戒 | 亚洲人成影院在线观看 | 特级做a爰片毛片免费69 | 中文字幕日韩精品一区二区三区 | 亚洲国产精品美女久久久久 | 国产午夜亚洲精品不卡 | 欧美性猛交内射兽交老熟妇 | 最近免费中文字幕中文高清百度 | 日韩视频 中文字幕 视频一区 | 最近免费中文字幕中文高清百度 | 色婷婷久久一区二区三区麻豆 | 久久久中文久久久无码 | 久久五月精品中文字幕 | 欧美野外疯狂做受xxxx高潮 | 日韩成人一区二区三区在线观看 | 久久久久成人精品免费播放动漫 | 少妇一晚三次一区二区三区 | 亚洲精品久久久久中文第一幕 | 国产在线精品一区二区三区直播 | 欧美黑人性暴力猛交喷水 | 久久久久国色av免费观看性色 | 国产舌乚八伦偷品w中 | 女人被男人躁得好爽免费视频 | 99精品国产综合久久久久五月天 | 国产午夜精品一区二区三区嫩草 | 亚洲日本va午夜在线电影 | 国产亚洲人成a在线v网站 | 亚洲自偷自拍另类第1页 | 亚洲 激情 小说 另类 欧美 | 亚洲男人av天堂午夜在 | 亚洲精品久久久久久久久久久 | 亚洲色成人中文字幕网站 | 久久亚洲精品中文字幕无男同 | 夜夜夜高潮夜夜爽夜夜爰爰 | 丝袜人妻一区二区三区 | 国产成人无码a区在线观看视频app | 精品久久久久香蕉网 | 香港三级日本三级妇三级 | 曰本女人与公拘交酡免费视频 | 国产av剧情md精品麻豆 | 国产精品人妻一区二区三区四 | 男女作爱免费网站 | 一个人看的视频www在线 | 国产精品久久久久久久9999 | 亚洲自偷自偷在线制服 | 国产亲子乱弄免费视频 | 大地资源中文第3页 | 波多野结衣av在线观看 | 国产人成高清在线视频99最全资源 | 377p欧洲日本亚洲大胆 | 樱花草在线播放免费中文 | 特黄特色大片免费播放器图片 | 欧美老妇交乱视频在线观看 | 日韩人妻无码中文字幕视频 | 2019午夜福利不卡片在线 | 毛片内射-百度 | 亚洲精品欧美二区三区中文字幕 | 一本大道伊人av久久综合 | 成 人影片 免费观看 | 无码av中文字幕免费放 | 欧美成人午夜精品久久久 | 久久99精品久久久久婷婷 | 国产精品资源一区二区 | 欧美大屁股xxxxhd黑色 | 婷婷六月久久综合丁香 | 樱花草在线播放免费中文 | 国产九九九九九九九a片 | 国产色xx群视频射精 | 又大又紧又粉嫩18p少妇 | 亚洲一区二区三区在线观看网站 | 欧美国产亚洲日韩在线二区 | 色欲人妻aaaaaaa无码 | 亚洲色无码一区二区三区 | 亚洲国产精品无码一区二区三区 | 天天躁日日躁狠狠躁免费麻豆 | 青草视频在线播放 | 99精品久久毛片a片 | 日本爽爽爽爽爽爽在线观看免 | 骚片av蜜桃精品一区 | 国产精品亚洲综合色区韩国 | 无码国内精品人妻少妇 | 欧美精品在线观看 | 午夜理论片yy44880影院 | 啦啦啦www在线观看免费视频 | 亚洲精品无码国产 | 日韩无套无码精品 | 国产真实夫妇视频 | 日韩少妇内射免费播放 | 久久精品国产99精品亚洲 | 亚洲欧美综合区丁香五月小说 | 人人澡人人妻人人爽人人蜜桃 | 成在人线av无码免费 | 欧美丰满熟妇xxxx | 人人妻人人澡人人爽人人精品 | 嫩b人妻精品一区二区三区 | 狠狠cao日日穞夜夜穞av | 国产9 9在线 | 中文 | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 娇妻被黑人粗大高潮白浆 | 图片区 小说区 区 亚洲五月 | 成人无码视频在线观看网站 | 久久zyz资源站无码中文动漫 | 自拍偷自拍亚洲精品10p | 婷婷五月综合激情中文字幕 | 国产在线精品一区二区三区直播 | 亚洲精品午夜无码电影网 | 久久久久久亚洲精品a片成人 | 精品一区二区三区波多野结衣 | √8天堂资源地址中文在线 | 日日橹狠狠爱欧美视频 | 天堂在线观看www | 男女超爽视频免费播放 | 在教室伦流澡到高潮hnp视频 | 亚洲欧美国产精品专区久久 | 无码帝国www无码专区色综合 | 人妻少妇精品视频专区 | 波多野结衣高清一区二区三区 | 亚洲熟女一区二区三区 | 久久人人97超碰a片精品 | 无套内谢的新婚少妇国语播放 | 国产福利视频一区二区 | 国产精品无码成人午夜电影 | 色婷婷香蕉在线一区二区 | 国产性猛交╳xxx乱大交 国产精品久久久久久无码 欧洲欧美人成视频在线 | 国产美女极度色诱视频www | 国产69精品久久久久app下载 | 无码人妻久久一区二区三区不卡 | 亚洲欧美日韩综合久久久 | 国产特级毛片aaaaaaa高清 | 亚洲另类伦春色综合小说 | 在线播放亚洲第一字幕 | 成人精品视频一区二区 | 亚洲娇小与黑人巨大交 | 激情内射日本一区二区三区 | 国产精品久久福利网站 | 亚洲国产精品无码久久久久高潮 | 在线a亚洲视频播放在线观看 | 久久亚洲日韩精品一区二区三区 | 思思久久99热只有频精品66 | 人妻少妇精品无码专区二区 | 人妻无码久久精品人妻 | 久久人人爽人人人人片 | 偷窥日本少妇撒尿chinese | 国产精品无码mv在线观看 | 亚洲人成网站在线播放942 | 18禁黄网站男男禁片免费观看 | 天天综合网天天综合色 | 成人无码精品1区2区3区免费看 | 精品一二三区久久aaa片 | 少妇邻居内射在线 | 亚洲熟妇自偷自拍另类 | 亚洲中文字幕乱码av波多ji | 国产人妻精品一区二区三区不卡 | √天堂资源地址中文在线 | 欧美午夜特黄aaaaaa片 | 噜噜噜亚洲色成人网站 | 人妻天天爽夜夜爽一区二区 | 国产精品久久久久久久9999 | 国产精品爱久久久久久久 | 成人精品视频一区二区三区尤物 | 欧美精品无码一区二区三区 | 粉嫩少妇内射浓精videos | 狠狠色噜噜狠狠狠7777奇米 | 日产精品高潮呻吟av久久 | 日韩精品无码一本二本三本色 | 亚洲一区av无码专区在线观看 | 国产成人精品无码播放 | 男人的天堂av网站 | 亚洲中文字幕无码中字 | 色综合久久久无码网中文 | 亚洲aⅴ无码成人网站国产app | 中文字幕+乱码+中文字幕一区 | 高清无码午夜福利视频 | 国产口爆吞精在线视频 | 亚洲天堂2017无码中文 | 国产熟女一区二区三区四区五区 | 日本精品人妻无码免费大全 | 中文字幕人成乱码熟女app | 国产在线一区二区三区四区五区 | 亚洲精品国偷拍自产在线麻豆 | 国产内射老熟女aaaa | 1000部啪啪未满十八勿入下载 | 捆绑白丝粉色jk震动捧喷白浆 | 国产精品亚洲lv粉色 | 亚洲欧美精品伊人久久 | 国产suv精品一区二区五 | 永久免费精品精品永久-夜色 | 精品一区二区不卡无码av | 人妻天天爽夜夜爽一区二区 | 亚洲 日韩 欧美 成人 在线观看 | 日本大香伊一区二区三区 | 少妇人妻大乳在线视频 | 日本高清一区免费中文视频 | 国产成人无码一二三区视频 | 亚洲の无码国产の无码步美 | 久久久久人妻一区精品色欧美 | 亚洲人成人无码网www国产 | 国模大胆一区二区三区 | 中文字幕 亚洲精品 第1页 | 老子影院午夜伦不卡 | 久久国产精品精品国产色婷婷 | 中文字幕无码视频专区 | 中文字幕 人妻熟女 | 国产内射爽爽大片视频社区在线 | 成人免费视频视频在线观看 免费 | 内射爽无广熟女亚洲 | 5858s亚洲色大成网站www | 日韩成人一区二区三区在线观看 | 午夜精品一区二区三区在线观看 | 一本久道高清无码视频 | 久久人人爽人人人人片 | 欧美 日韩 亚洲 在线 | 夜精品a片一区二区三区无码白浆 | 国产无遮挡又黄又爽免费视频 | 人妻少妇精品无码专区动漫 | 人妻夜夜爽天天爽三区 | a在线观看免费网站大全 | 图片区 小说区 区 亚洲五月 | 六十路熟妇乱子伦 | 人妻尝试又大又粗久久 | 人人妻人人澡人人爽欧美一区 | 九九综合va免费看 | 日韩人妻无码一区二区三区久久99 | 亚洲精品成人福利网站 | 亚洲国产成人av在线观看 | 动漫av网站免费观看 | 久久久久免费看成人影片 | 久久久久人妻一区精品色欧美 | 国产精品久久久久9999小说 | 亚洲色偷偷偷综合网 | 久久人人爽人人爽人人片ⅴ | 色综合久久久久综合一本到桃花网 | 东京一本一道一二三区 | 美女黄网站人色视频免费国产 | 日本精品高清一区二区 | 亚洲高清偷拍一区二区三区 | 色欲久久久天天天综合网精品 | 4hu四虎永久在线观看 | 蜜桃视频韩日免费播放 | 天天燥日日燥 | 国产一精品一av一免费 | 欧美激情综合亚洲一二区 | 秋霞成人午夜鲁丝一区二区三区 | 精品午夜福利在线观看 | 国产成人无码专区 | 性生交大片免费看女人按摩摩 | 午夜精品一区二区三区的区别 | 免费视频欧美无人区码 | 蜜桃臀无码内射一区二区三区 | 中文无码精品a∨在线观看不卡 | 图片小说视频一区二区 | 天海翼激烈高潮到腰振不止 | 欧洲美熟女乱又伦 | 国产疯狂伦交大片 | 乱码av麻豆丝袜熟女系列 | 国产成人无码午夜视频在线观看 | 色偷偷人人澡人人爽人人模 | 99久久无码一区人妻 | 午夜性刺激在线视频免费 | 日韩精品无码一本二本三本色 | 欧美大屁股xxxxhd黑色 | 欧美变态另类xxxx | 51国偷自产一区二区三区 | 四虎4hu永久免费 | 装睡被陌生人摸出水好爽 | 国精产品一区二区三区 | 东京热男人av天堂 | 人人妻人人澡人人爽人人精品浪潮 | 装睡被陌生人摸出水好爽 | 成人欧美一区二区三区黑人 | 国产av一区二区精品久久凹凸 | 天天躁日日躁狠狠躁免费麻豆 | 色欲久久久天天天综合网精品 | 麻豆md0077饥渴少妇 | 领导边摸边吃奶边做爽在线观看 | 四虎国产精品免费久久 | 又湿又紧又大又爽a视频国产 | 欧美兽交xxxx×视频 | 国产一区二区三区四区五区加勒比 | 欧洲美熟女乱又伦 | 天堂亚洲2017在线观看 | 日韩精品成人一区二区三区 | 老太婆性杂交欧美肥老太 | 国产乱人伦av在线无码 | 欧美 日韩 人妻 高清 中文 | 日本肉体xxxx裸交 | 国产乱人无码伦av在线a | 色欲久久久天天天综合网精品 | 无码福利日韩神码福利片 | 亚洲 另类 在线 欧美 制服 | 久久精品国产99久久6动漫 | 国产精品igao视频网 | 日日躁夜夜躁狠狠躁 | 学生妹亚洲一区二区 | 亚洲国产精品一区二区美利坚 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 女人被男人躁得好爽免费视频 | 东京热一精品无码av | 国产成人无码区免费内射一片色欲 | 内射欧美老妇wbb | 青春草在线视频免费观看 | 国产精品国产自线拍免费软件 | 天天拍夜夜添久久精品大 | 亚洲午夜久久久影院 | 老头边吃奶边弄进去呻吟 | 国产精品多人p群无码 | 大乳丰满人妻中文字幕日本 | 国产精品久久久久无码av色戒 | 狠狠躁日日躁夜夜躁2020 | 精品厕所偷拍各类美女tp嘘嘘 | 亚洲国产欧美国产综合一区 | 老司机亚洲精品影院 | 久久精品人人做人人综合 | 欧美喷潮久久久xxxxx | 俺去俺来也www色官网 | 国产xxx69麻豆国语对白 | 亚洲日韩av一区二区三区中文 | 久久久久成人精品免费播放动漫 | 精品日本一区二区三区在线观看 | 国产一区二区三区影院 | 精品一区二区三区无码免费视频 | 国产无套粉嫩白浆在线 | 中文无码成人免费视频在线观看 | 欧美精品无码一区二区三区 | 国产人成高清在线视频99最全资源 | 无码免费一区二区三区 | 丰满护士巨好爽好大乳 | 十八禁视频网站在线观看 | www国产亚洲精品久久久日本 | 欧美日韩在线亚洲综合国产人 | 熟妇人妻中文av无码 | 97夜夜澡人人爽人人喊中国片 | 无码av中文字幕免费放 | 最近中文2019字幕第二页 | 色五月丁香五月综合五月 | 免费观看激色视频网站 | 玩弄中年熟妇正在播放 | 亚洲色欲久久久综合网东京热 | 日韩精品乱码av一区二区 | 在线精品亚洲一区二区 | 亚洲性无码av中文字幕 | 亚洲人成网站在线播放942 | 日本www一道久久久免费榴莲 | 精品偷拍一区二区三区在线看 | 亚洲乱码中文字幕在线 | 内射爽无广熟女亚洲 | 亚洲性无码av中文字幕 | 亚洲精品成人av在线 | 人人妻人人澡人人爽人人精品浪潮 | 欧美日韩在线亚洲综合国产人 | 又粗又大又硬毛片免费看 | 国产口爆吞精在线视频 | 一本久久a久久精品亚洲 | 久久zyz资源站无码中文动漫 | 久久这里只有精品视频9 | 国产无套内射久久久国产 | 四十如虎的丰满熟妇啪啪 | 熟妇人妻无乱码中文字幕 | 乱人伦人妻中文字幕无码 | 女高中生第一次破苞av | 亚洲精品综合五月久久小说 | 狠狠cao日日穞夜夜穞av | 欧美自拍另类欧美综合图片区 | 国产成人综合在线女婷五月99播放 | 精品水蜜桃久久久久久久 | 性生交片免费无码看人 | 老子影院午夜精品无码 | 国产亚洲欧美日韩亚洲中文色 | 亚洲啪av永久无码精品放毛片 | 乌克兰少妇性做爰 | 久久亚洲国产成人精品性色 | 国产乱人伦app精品久久 国产在线无码精品电影网 国产国产精品人在线视 | 亚洲日本一区二区三区在线 | 国产精品久久精品三级 | 粉嫩少妇内射浓精videos | 亚洲人交乣女bbw | 久久国语露脸国产精品电影 | 欧美肥老太牲交大战 | 欧美日韩色另类综合 | 在线视频网站www色 | 国产欧美熟妇另类久久久 | 精品午夜福利在线观看 | 美女黄网站人色视频免费国产 | 国产亚洲精品久久久久久久久动漫 | 国产性生大片免费观看性 | 午夜福利试看120秒体验区 | 色妞www精品免费视频 | 久久人人爽人人爽人人片av高清 | 男人扒开女人内裤强吻桶进去 | 特级做a爰片毛片免费69 | 丝袜 中出 制服 人妻 美腿 | 东北女人啪啪对白 | 正在播放东北夫妻内射 | 97夜夜澡人人双人人人喊 | 亚洲国产日韩a在线播放 | 99精品无人区乱码1区2区3区 | 国产精品人妻一区二区三区四 | 日韩精品成人一区二区三区 | 麻豆成人精品国产免费 | 久激情内射婷内射蜜桃人妖 | 欧美性生交活xxxxxdddd | 97精品人妻一区二区三区香蕉 | 亚洲精品一区二区三区在线 | 少妇性荡欲午夜性开放视频剧场 | 狠狠色噜噜狠狠狠狠7777米奇 | 国产另类ts人妖一区二区 | 成 人 免费观看网站 | 无码人妻黑人中文字幕 | 亚洲色欲色欲天天天www | 在线观看国产午夜福利片 | 男人的天堂av网站 | 强伦人妻一区二区三区视频18 | 亚洲欧美色中文字幕在线 | 天堂а√在线中文在线 | 亚洲精品久久久久久久久久久 | 无码国模国产在线观看 | 午夜肉伦伦影院 | 国内老熟妇对白xxxxhd | 国产精品久免费的黄网站 | 国产精品久免费的黄网站 | 久久www免费人成人片 | 亚洲色www成人永久网址 | 狠狠色色综合网站 | 亚洲七七久久桃花影院 | 97精品人妻一区二区三区香蕉 | 国产精品无套呻吟在线 | 少妇高潮喷潮久久久影院 | 丝袜足控一区二区三区 | 中文字幕日韩精品一区二区三区 | 免费国产成人高清在线观看网站 | 久久久久av无码免费网 | 久久天天躁狠狠躁夜夜免费观看 | 亚洲一区二区三区偷拍女厕 | 成人毛片一区二区 | 国产亲子乱弄免费视频 | 国产色视频一区二区三区 | 国产电影无码午夜在线播放 | 小鲜肉自慰网站xnxx | 亚洲中文字幕乱码av波多ji | 国产舌乚八伦偷品w中 | 精品国产麻豆免费人成网站 | 精品日本一区二区三区在线观看 | 午夜精品一区二区三区的区别 | 国产精品理论片在线观看 | 欧洲vodafone精品性 | 欧美性生交xxxxx久久久 | 欧美亚洲日韩国产人成在线播放 | 丰满人妻一区二区三区免费视频 | 狠狠cao日日穞夜夜穞av | 俺去俺来也在线www色官网 | 色偷偷人人澡人人爽人人模 | 国产猛烈高潮尖叫视频免费 | 成人亚洲精品久久久久软件 | 亚洲s色大片在线观看 | 久9re热视频这里只有精品 | 国产九九九九九九九a片 | 亚洲国产午夜精品理论片 | 亚洲熟妇色xxxxx欧美老妇y | 曰本女人与公拘交酡免费视频 | 无码免费一区二区三区 | 成人精品视频一区二区 | av在线亚洲欧洲日产一区二区 | 夜夜影院未满十八勿进 | 久久www免费人成人片 | 特大黑人娇小亚洲女 | 99久久人妻精品免费一区 | 亚洲精品久久久久avwww潮水 | 中文无码精品a∨在线观看不卡 | 欧美一区二区三区 | 国产亚洲人成a在线v网站 | 玩弄少妇高潮ⅹxxxyw | 亚洲国产av精品一区二区蜜芽 | 四虎影视成人永久免费观看视频 | v一区无码内射国产 | 国产97色在线 | 免 | 色一情一乱一伦 | 日本免费一区二区三区最新 | 国产av久久久久精东av | 白嫩日本少妇做爰 | 狠狠躁日日躁夜夜躁2020 | 夜精品a片一区二区三区无码白浆 | 亚洲精品一区二区三区四区五区 | 欧美性猛交内射兽交老熟妇 | 精品人人妻人人澡人人爽人人 | 国产人妻精品午夜福利免费 | 一本色道久久综合狠狠躁 | 人妻少妇精品无码专区二区 | 人人妻人人澡人人爽精品欧美 | 亚洲精品成人av在线 | 伦伦影院午夜理论片 | 久久99精品久久久久久 | 国产一区二区三区影院 | 在线а√天堂中文官网 | 奇米影视7777久久精品人人爽 | 亚洲精品久久久久久久久久久 | 亚洲无人区午夜福利码高清完整版 | 久久久国产一区二区三区 | 初尝人妻少妇中文字幕 | 国产免费久久精品国产传媒 | 久久久久亚洲精品男人的天堂 | 久久人妻内射无码一区三区 | 久热国产vs视频在线观看 | 国产乱子伦视频在线播放 | 国产精品毛片一区二区 | 日本精品人妻无码77777 天堂一区人妻无码 | 人人爽人人澡人人高潮 | 久久久久99精品成人片 | 四虎影视成人永久免费观看视频 | a在线亚洲男人的天堂 | 欧美老熟妇乱xxxxx | 97久久精品无码一区二区 | 强奷人妻日本中文字幕 | 人妻少妇精品无码专区二区 | 99久久精品无码一区二区毛片 | 欧美国产日韩亚洲中文 | 精品国产av色一区二区深夜久久 | 亚洲欧洲日本综合aⅴ在线 | 天天做天天爱天天爽综合网 | 蜜桃av蜜臀av色欲av麻 999久久久国产精品消防器材 | 无码人妻出轨黑人中文字幕 | 欧美刺激性大交 | 国产乱人伦av在线无码 | 野狼第一精品社区 | 精品无码国产自产拍在线观看蜜 | av无码久久久久不卡免费网站 | 国产欧美熟妇另类久久久 | 四虎影视成人永久免费观看视频 | www一区二区www免费 | 精品国产青草久久久久福利 | 麻豆蜜桃av蜜臀av色欲av | 中国女人内谢69xxxx | 人人妻人人澡人人爽人人精品 | 久久久久久九九精品久 | 色综合久久网 | 内射巨臀欧美在线视频 | 久久精品国产大片免费观看 | 熟妇人妻中文av无码 | 亚洲中文字幕无码一久久区 | 欧美性猛交内射兽交老熟妇 | 男女猛烈xx00免费视频试看 | 捆绑白丝粉色jk震动捧喷白浆 | 99麻豆久久久国产精品免费 | a在线亚洲男人的天堂 | 国产精品久久久久9999小说 | 久久精品成人欧美大片 | 亚洲成av人在线观看网址 | 久久精品人妻少妇一区二区三区 | 少妇的肉体aa片免费 | 日韩精品成人一区二区三区 | 中文字幕无码av激情不卡 | 九月婷婷人人澡人人添人人爽 | 国内精品久久毛片一区二区 | 乌克兰少妇xxxx做受 | 国产99久久精品一区二区 | 亚洲一区二区三区偷拍女厕 | 中文字幕日韩精品一区二区三区 | 中文字幕精品av一区二区五区 | 荫蒂添的好舒服视频囗交 | 久久久久久国产精品无码下载 | 性生交大片免费看女人按摩摩 | 亚洲人成网站色7799 | 亚洲天堂2017无码中文 | 性色欲网站人妻丰满中文久久不卡 | 一二三四在线观看免费视频 | 纯爱无遮挡h肉动漫在线播放 | 久久综合香蕉国产蜜臀av | 九九在线中文字幕无码 | 国产熟妇高潮叫床视频播放 | 国产熟妇高潮叫床视频播放 | 欧美日本日韩 | 亚洲欧美精品伊人久久 | 国产成人无码av在线影院 | 国产成人亚洲综合无码 | 日产精品高潮呻吟av久久 | 亚洲爆乳无码专区 | 少妇性荡欲午夜性开放视频剧场 | 国产人妻人伦精品1国产丝袜 | 无码人妻丰满熟妇区五十路百度 | 中文字幕无码免费久久9一区9 | 国产精品对白交换视频 | 亚洲色欲色欲欲www在线 | 夜夜影院未满十八勿进 | 欧美日本精品一区二区三区 | 国产疯狂伦交大片 | 无码纯肉视频在线观看 | 久久精品人人做人人综合 | 国产亚av手机在线观看 | 国产人妻精品一区二区三区 | 亚洲精品国偷拍自产在线观看蜜桃 | 玩弄人妻少妇500系列视频 | 日日鲁鲁鲁夜夜爽爽狠狠 | 男女超爽视频免费播放 | 午夜免费福利小电影 | 色偷偷av老熟女 久久精品人妻少妇一区二区三区 | 亚洲精品国产第一综合99久久 | 波多野结衣乳巨码无在线观看 | 丰满肥臀大屁股熟妇激情视频 | 大肉大捧一进一出好爽视频 | 夜精品a片一区二区三区无码白浆 | 亚洲精品国产品国语在线观看 | 无码免费一区二区三区 | 中文字幕无码乱人伦 | 久久99精品久久久久久 | 99久久婷婷国产综合精品青草免费 | 久久久无码中文字幕久... | 国产极品视觉盛宴 | 人妻熟女一区 | 高清国产亚洲精品自在久久 | 荡女精品导航 | 国产精品怡红院永久免费 | 秋霞成人午夜鲁丝一区二区三区 | 男人扒开女人内裤强吻桶进去 |