国产秋霞理论久久久电影-婷婷色九月综合激情丁香-欧美在线观看乱妇视频-精品国avA久久久久久久-国产乱码精品一区二区三区亚洲人-欧美熟妇一区二区三区蜜桃视频

有了這款 Linux 網(wǎng)絡(luò)延遲排查方法,再也不用加班了

共 7709字,需瀏覽 16分鐘

 ·

2022-06-09 15:30

在 Linux 服務(wù)器中,可以通過內(nèi)核調(diào)優(yōu)、DPDK 以及 XDP 等多種方式提高服務(wù)器的抗攻擊能力,降低 DDoS 對(duì)正常服務(wù)的影響。在應(yīng)用程序中,可以使用各級(jí)緩存、WAF、CDN 等來緩解 DDoS 對(duì)應(yīng)用程序的影響。

但是需要注意的是,如果 DDoS 流量已經(jīng)到達(dá) Linux 服務(wù)器,那么即使應(yīng)用層做了各種優(yōu)化,網(wǎng)絡(luò)服務(wù)延遲一般也會(huì)比平時(shí)大很多。

因此,在實(shí)際應(yīng)用中,我們通常使用 Linux 服務(wù)器,配合專業(yè)的流量清洗和網(wǎng)絡(luò)防火墻設(shè)備,來緩解這個(gè)問題。

除了 DDoS 導(dǎo)致的網(wǎng)絡(luò)延遲增加,我想你一定見過很多其他原因?qū)е碌木W(wǎng)絡(luò)延遲,例如:

  • 網(wǎng)絡(luò)傳輸慢導(dǎo)致的延遲。
  • Linux 內(nèi)核協(xié)議棧數(shù)據(jù)包處理速度慢導(dǎo)致的延遲。
  • 應(yīng)用程序數(shù)據(jù)處理速度慢造成的延遲等。

那么當(dāng)我們遇到這些原因造成的延誤時(shí),我們?cè)撛趺崔k呢?如何定位網(wǎng)絡(luò)延遲的根本原因?讓我們?cè)诒疚闹杏懻摼W(wǎng)絡(luò)延遲。

Linux 網(wǎng)絡(luò)延遲

談到網(wǎng)絡(luò)延遲(Network Latency),人們通常認(rèn)為它是指網(wǎng)絡(luò)數(shù)據(jù)傳輸所需的時(shí)間。但是,這里的“時(shí)間”是指雙向流量,即數(shù)據(jù)從源發(fā)送到目的地,然后從目的地地址返回響應(yīng)的往返時(shí)間:RTT(Round-Trip Time)。

除了網(wǎng)絡(luò)延遲之外,另一個(gè)常用的指標(biāo)是應(yīng)用延遲(Application Latency),它是指應(yīng)用接收請(qǐng)求并返回響應(yīng)所需的時(shí)間。通常,應(yīng)用延遲也稱為往返延遲,它是網(wǎng)絡(luò)數(shù)據(jù)傳輸時(shí)間加上數(shù)據(jù)處理時(shí)間的總和。

通常人們使用?ping?命令來測(cè)試網(wǎng)絡(luò)延遲,ping?是基于 ICMP 協(xié)議的,它通過計(jì)算 ICMP 發(fā)出的響應(yīng)報(bào)文和 ICMP 發(fā)出的請(qǐng)求報(bào)文之間的時(shí)間差來獲得往返延遲時(shí)間。這個(gè)過程不需要特殊的認(rèn)證,從而經(jīng)常被很多網(wǎng)絡(luò)攻擊所利用,如,端口掃描工具?nmap、分組工具?hping3?等。

因此,為了避免這些問題,很多網(wǎng)絡(luò)服務(wù)都會(huì)禁用 ICMP,這使得我們無法使用 ping 來測(cè)試網(wǎng)絡(luò)服務(wù)的可用性和往返延遲。在這種情況下,您可以使用?traceroute?或?hping3?的 TCP 和 UDP 模式來獲取網(wǎng)絡(luò)延遲。

例如:

#?-c:?3?requests??
#?-S:?Set?TCP?SYN??
#?-p:?Set?port?to?80??
$?hping3?-c?3?-S?-p?80?google.com??
HPING?google.com?(eth0?142.250.64.110):?S?set,?40?headers?+?0?data?bytes??
len=46?ip=142.250.64.110?ttl=51?id=47908?sport=80?flags=SA?seq=0?win=8192?rtt=9.3?ms??
len=46?ip=142.250.64.110?ttl=51?id=6788??sport=80?flags=SA?seq=1?win=8192?rtt=10.9?ms??
len=46?ip=142.250.64.110?ttl=51?id=37699?sport=80?flags=SA?seq=2?win=8192?rtt=11.9?ms??
---?baidu.com?hping?statistic?---??
3?packets?transmitted,?3?packets?received,?0%?packet?loss??
round-trip?min/avg/max?=?9.3/10.9/11.9?ms??

當(dāng)然,你也可以使用?traceroute

$?traceroute?--tcp?-p?80?-n?google.com??
traceroute?to?google.com?(142.250.190.110),?30?hops?max,?60?byte?packets??
?1??*?*?*??
?2??240.1.236.34??0.198?ms?*?*??
?3??*?*?243.254.11.5??0.189?ms??
?4??*?240.1.236.17??0.216?ms?240.1.236.24??0.175?ms??
?5??241.0.12.76??0.181?ms?108.166.244.15??0.234?ms?241.0.12.76??0.219?ms??
?...??
24??142.250.190.110??17.465?ms?108.170.244.1??18.532?ms?142.251.60.207??18.595?ms??

traceroute?會(huì)在路由的每一跳(hop)發(fā)送三個(gè)數(shù)據(jù)包,并在收到響應(yīng)后輸出往返延遲。如果沒有響應(yīng)或響應(yīng)超時(shí)(默認(rèn) 5s),將輸出一個(gè)星號(hào)?*。

案例展示

我們需要在此演示中托管 host1 和 host2 兩個(gè)主機(jī):

  • host1 (192.168.0.30):托管兩個(gè) Nginx Web 應(yīng)用程序(正常和延遲)
  • host2 (192.168.0.2):分析主機(jī)

host1 準(zhǔn)備

在 host1 上,讓我們運(yùn)行啟動(dòng)兩個(gè)容器,它們分別是官方 Nginx 和具有延遲版本的 Nginx:

#?Official?nginx??
$?docker?run?--network=host?--name=good?-itd?nginx??
fb4ed7cb9177d10e270f8320a7fb64717eac3451114c9fab3c50e02be2e88ba2??
#?Latency?version?of?nginx??
??
$?docker?run?--name?nginx?--network=host?-itd?feisky/nginx:latency??
b99bd136dcfd907747d9c803fdc0255e578bad6d66f4e9c32b826d75b6812724??

運(yùn)行以下命令以驗(yàn)證兩個(gè)容器都在為流量提供服務(wù):

$?curl?http://127.0.0.1??
??
??
...??

Thank?you?for?using?nginx.

??
??
??
$?curl?http://127.0.0.1:8080??
...??

Thank?you?for?using?nginx.

??
??
??

host2 準(zhǔn)備

現(xiàn)在讓我們用上面提到的?hping3?來測(cè)試它們的延遲,看看有什么區(qū)別。在 host2 中,執(zhí)行以下命令分別測(cè)試案例機(jī)的 8080 端口和 80 端口的延遲:

80 端口:

$?hping3?-c?3?-S?-p?80?192.168.0.30??
HPING?192.168.0.30?(eth0?192.168.0.30):?S?set,?40?headers?+?0?data?bytes??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=80?flags=SA?seq=0?win=29200?rtt=7.8?ms??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=80?flags=SA?seq=1?win=29200?rtt=7.7?ms??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=80?flags=SA?seq=2?win=29200?rtt=7.6?ms??
---?192.168.0.30?hping?statistic?---??
3?packets?transmitted,?3?packets?received,?0%?packet?loss??
round-trip?min/avg/max?=?7.6/7.7/7.8?ms??

8080 端口:

#?測(cè)試8080端口延遲??
$?hping3?-c?3?-S?-p?8080?192.168.0.30??
HPING?192.168.0.30?(eth0?192.168.0.30):?S?set,?40?headers?+?0?data?bytes??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=8080?flags=SA?seq=0?win=29200?rtt=7.7?ms??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=8080?flags=SA?seq=1?win=29200?rtt=7.6?ms??
len=44?ip=192.168.0.30?ttl=64?DF?id=0?sport=8080?flags=SA?seq=2?win=29200?rtt=7.3?ms??
---?192.168.0.30?hping?statistic?---??
3?packets?transmitted,?3?packets?received,?0%?packet?loss??
round-trip?min/avg/max?=?7.3/7.6/7.7?ms??

從這個(gè)輸出中您可以看到兩個(gè)端口的延遲大致相同,均為 7 毫秒。但這僅適用于單個(gè)請(qǐng)求。如果換成并發(fā)請(qǐng)求怎么辦?接下來,讓我們用?wrk?(https://github.com/wg/wrk) 試試。

80 端口:

$?wrk?--latency?-c?100?-t?2?--timeout?2?http://192.168.0.30/??
Running?10s?test?@?http://192.168.0.30/??
??2?threads?and?100?connections??
??Thread?Stats???Avg??????Stdev?????Max???+/-?Stdev??
????Latency?????9.19ms???12.32ms?319.61ms???97.80%??
????Req/Sec?????6.20k???426.80?????8.25k????85.50%??
??Latency?Distribution??
?????50%????7.78ms??
?????75%????8.22ms??
?????90%????9.14ms??
?????99%???50.53ms??
??123558?requests?in?10.01s,?100.15MB?read??
Requests/sec:??12340.91??
Transfer/sec:?????10.00MB??

8080 端口:

$?wrk?--latency?-c?100?-t?2?--timeout?2?http://192.168.0.30:8080/??
Running?10s?test?@?http://192.168.0.30:8080/??
??2?threads?and?100?connections??
??Thread?Stats???Avg??????Stdev?????Max???+/-?Stdev??
????Latency????43.60ms????6.41ms??56.58ms???97.06%??
????Req/Sec?????1.15k???120.29?????1.92k????88.50%??
??Latency?Distribution??
?????50%???44.02ms??
?????75%???44.33ms??
?????90%???47.62ms??
?????99%???48.88ms??
??22853?requests?in?10.01s,?18.55MB?read??
Requests/sec:???2283.31??
Transfer/sec:??????1.85MB??

從以上兩個(gè)輸出可以看出,官方 Nginx(監(jiān)聽 80 端口)的平均延遲為 9.19ms,而案例 Nginx(監(jiān)聽 8080 端口)的平均延遲為 43.6ms。從延遲分布上來看,官方 Nginx 可以在 9ms 內(nèi)完成 90% 的請(qǐng)求;對(duì)于案例 Nginx,50% 的請(qǐng)求已經(jīng)達(dá)到 44ms。

那么這里發(fā)生了什么呢?我們來做一些分析:

在 host1 中,讓我們使用?tcpdump?捕獲一些網(wǎng)絡(luò)數(shù)據(jù)包:

$?tcpdump?-nn?tcp?port?8080?-w?nginx.pcap??

現(xiàn)在,在 host2 上重新運(yùn)行?wrk?命令

$?wrk?--latency?-c?100?-t?2?--timeout?2?http://192.168.0.30:8080/??

當(dāng)?wrk?命令完成后,再次切換回 Terminal 1(host1 的終端)并按 Ctrl+C 結(jié)束?tcpdump?命令。然后,用?Wireshark?把抓到的?nginx.pcap?復(fù)制到本機(jī)(如果 VM1(host1 的虛擬機(jī))已經(jīng)有圖形界面,可以跳過復(fù)制步驟),用?Wireshark?打開。

由于網(wǎng)絡(luò)包的數(shù)量很多,我們可以先過濾一下。例如,選中一個(gè)包后,可以右鍵選擇 “Follow”->“TCP Stream”,如下圖:

然后,關(guān)閉彈出的對(duì)話框并返回?Wireshark?主窗口。這時(shí)你會(huì)發(fā)現(xiàn)?Wireshark?已經(jīng)自動(dòng)為你設(shè)置了一個(gè)過濾表達(dá)式?tcp.stream eq 24。如下圖所示(圖中省略了源 IP 和目的 IP):

從這里,您可以看到從三次握手開始,此 TCP 連接的每個(gè)請(qǐng)求和響應(yīng)。當(dāng)然,這可能不夠直觀,可以繼續(xù)點(diǎn)擊菜單欄中的?Statistics -> Flow Graph,選擇 “Limit to display filter”,將 Flow type 設(shè)置為 “TCP Flows”:

請(qǐng)注意,此圖的左側(cè)是客戶端,而右側(cè)是 Nginx 服務(wù)器。從這個(gè)圖中可以看出,前三次握手和第一次 HTTP 請(qǐng)求和響應(yīng)都相當(dāng)快,但是第二次 HTTP 請(qǐng)求就比較慢了,尤其是客戶端收到服務(wù)器的第一個(gè)數(shù)據(jù)包后,該 ACK 響應(yīng)(圖中的藍(lán)線)在 40ms 后才被發(fā)送。

看到 40ms 的值,你有沒有想到什么?事實(shí)上,這是?TCP 延遲 ACK?的最小超時(shí)。這是 TCP ACK 的一種優(yōu)化機(jī)制,即不是每次請(qǐng)求都發(fā)送一個(gè) ACK,而是等待一段時(shí)間(比如 40ms),看看有沒有“搭車”的數(shù)據(jù)包。如果在此期間還有其他數(shù)據(jù)包需要發(fā)送,它們將與 ACK 一起被發(fā)送。當(dāng)然,如果等不及其他數(shù)據(jù)包,超時(shí)后會(huì)單獨(dú)發(fā)送 ACK。

由于案例中的客戶端發(fā)生了 40ms 延遲,我們有理由懷疑客戶端開啟了延遲確認(rèn)機(jī)制(Delayed Acknowledgment Mechanism)。這里的客戶端其實(shí)就是之前運(yùn)行的?wrk

根據(jù) TCP 文檔,只有在 TCP 套接字專門設(shè)置了?TCP_QUICKACK?時(shí)才會(huì)啟用快速確認(rèn)模式(Fast Acknowledgment Mode);否則,默認(rèn)使用延遲確認(rèn)機(jī)制

TCP_QUICKACK?(since?Linux?2.4.4)??
??????????????Enable??quickack?mode?if?set?or?disable?quickack?mode?if?cleared.??In?quickack?mode,?acks?are?sent?imme‐??
??????????????diately,?rather?than?delayed?if?needed?in?accordance?to?normal?TCP?operation.??This?flag?is??not??perma‐??
??????????????nent,??it?only?enables?a?switch?to?or?from?quickack?mode.??Subsequent?operation?of?the?TCP?protocol?will??
??????????????once?again?enter/leave?quickack?mode?depending?on?internal??protocol??processing??and??factors??such??as??
??????????????delayed?ack?timeouts?occurring?and?data?transfer.??This?option?should?not?be?used?in?code?intended?to?be??
??????????????portable.??

讓我們測(cè)試一下我們的質(zhì)疑:

$?strace?-f?wrk?--latency?-c?100?-t?2?--timeout?2?http://192.168.0.30:8080/??
...??
setsockopt(52,?SOL_TCP,?TCP_NODELAY,?[1],?4)?=?0??
...??

可以看到?wrk?只設(shè)置了?TCP_NODELAY?選項(xiàng),沒有設(shè)置?TCP_QUICKACK?,F(xiàn)在您可以看到為什么延遲 Nginx(案例 Nginx)響應(yīng)會(huì)出現(xiàn)一個(gè)延遲。

結(jié)論

在本文中,我們向您展示如何分析增加的網(wǎng)絡(luò)延遲。網(wǎng)絡(luò)延遲是核心網(wǎng)絡(luò)性能指標(biāo)。由于網(wǎng)絡(luò)傳輸、網(wǎng)絡(luò)報(bào)文處理等多種因素的影響,網(wǎng)絡(luò)延遲是不可避免的。但過多的網(wǎng)絡(luò)延遲會(huì)直接影響用戶體驗(yàn)。

  • 使用?hping3?和?wrk?等工具確認(rèn)單個(gè)請(qǐng)求和并發(fā)請(qǐng)求的網(wǎng)絡(luò)延遲是否正常。
  • 使用?traceroute,確認(rèn)路由正確,并查看路由中每個(gè)網(wǎng)關(guān)跳躍點(diǎn)的延遲。
  • 使用?tcpdump?和?Wireshark?確認(rèn)網(wǎng)絡(luò)數(shù)據(jù)包是否正常收發(fā)。
  • 使用?strace?等觀察應(yīng)用程序?qū)W(wǎng)絡(luò) socket 的調(diào)用是否正常。

來源:https://blog.devgenius.io/linux-troubleshoot-network-latency-a6da740f5cb8

10T 技術(shù)資源大放送!包括但不限于:Linux、虛擬化、容器、云計(jì)算、網(wǎng)絡(luò)、Python、Go 等。在公眾號(hào)內(nèi)回復(fù)「10T」,即可免費(fèi)獲!

推薦閱讀:

shell編程100例(附PDF下載)
IPv6技術(shù)白皮書(附PDF下載)
Linux主流發(fā)行版本配置IP總結(jié)(Ubuntu、CentOS、Redhat、Suse)
批量安裝Windows系統(tǒng)
無人值守批量安裝服務(wù)器
運(yùn)維必備的《網(wǎng)絡(luò)端口大全》,看這一份就夠了。
收藏:服務(wù)器和存儲(chǔ)知識(shí)入門
什么叫SSH?原理詳解,看這一篇就夠了!
Nginx面試40問(收藏吃灰)
20 個(gè) Linux 服務(wù)器性能調(diào)優(yōu)技巧
超詳細(xì)!一文帶你了解LVS四層負(fù)載均衡企業(yè)級(jí)實(shí)踐!
收藏 | Linux系統(tǒng)日志位置及包含的日志內(nèi)容介紹
100 道 Linux 常見面試題,建議收藏,慢慢讀~
服務(wù)器12種基本故障+排查方法
IT運(yùn)維管理常用工具大全,讓你成為真正的高手
什么是QoS?

Linux學(xué)習(xí)指南

有收獲,點(diǎn)個(gè)在看?

瀏覽 92
點(diǎn)贊
評(píng)論
收藏
分享

手機(jī)掃一掃分享

分享
舉報(bào)
評(píng)論
圖片
表情
推薦
點(diǎn)贊
評(píng)論
收藏
分享

手機(jī)掃一掃分享

分享
舉報(bào)

感谢您访问我们的网站,您可能还对以下资源感兴趣:

国产秋霞理论久久久电影-婷婷色九月综合激情丁香-欧美在线观看乱妇视频-精品国avA久久久久久久-国产乱码精品一区二区三区亚洲人-欧美熟妇一区二区三区蜜桃视频 久久天天拍| 翔田千里一区二区三区| 日韩av中文| 91在线成人电影| 亚洲欧洲久久| 国产精品日韩欧美| 最近日韩中文字幕中文翻译歌词| 国产无码激情视频| 免费网站观看www在线观看| 高h网站| 中文字幕在线一区二区a| 亚洲免费观看在线观看| 波多野结衣网| 人人爱人人妻人人操| 中文在线视频| 欧美日本亚洲| 欧美日韩在线免费| 丁香五月婷婷六月| 久久一区二区三区四区五区| 欧美一级成人| 亚洲高清无码视频大全| 天天视频亚洲| 国产AV网| 色香蕉视频在线观看| 久久黄色网| 国产一区二区三区免费播放| 亚洲精品国产成人综合久久久久久久久 | 久久久久久久久久久成人| 久久久久久免费毛片精品| 久久波多野结衣一区二区| 99re88| 思思热在线视频播放| 秋霞精品一区二区三区| 高清无码一区| 欧美色图88| 狠狠撸狠狠干| 国产成人AV网站| 操网站| 2025av天堂网| 无码av一区| 成人黄色性爱视频| 一本道综合网| 亚洲无码av在线观看| av官网| 婷婷丁香五月网| 91视频电影| 欧美亚洲小说| 亚洲中文字幕播放| 竹菊影视一区二区三区| 男女操逼视频网站免费观看| 无码乱伦| 最新中文字幕在线观看| 超碰9| 影音先锋自拍| 内射学生妹| 在线中文字幕视频| 欧美在线一区二区三区| 专区无日本视频高清8| 91在线日韩| 欧美成人精品欧美一级私黄| 精品1区| 深夜福利18| 九九精品视频在线播放| 国产成人性爱| 午夜福利1000| 日韩欧美国产成人| 国产精品播放| 家庭乱伦av| 五月丁香六月婷婷综合| 喷潮视频| 黄色电影网站在线观看| 国产精品不卡在线观看| 欧美成人性爱图片| 激情内射网站| 国产精品久久久久无码| 特级西西444www大精品| 亚洲一区二区精品| 特级艺体西西444WWw| 成人精品一区二区三区中文字幕| 可以免费看AV的网站| 五月丁香六月婷婷综合| 青青草手机在线观看| 韩国中文无码| 色综合天天综合成人网| 激情国产视频| 91干| 日韩人妻在线观看| 东京热视频一区| 久久成人毛片| 亚洲欧美国产精品专区久久| 中文字幕二区| 另类一区| 欧美日韩成人| 大香蕉av一区二区三区在线观看 | 操操网站| 无码三| 成人免看一级a一片A片| 国产精品二区高清在线苍井空| 青草精品| 国产伦乱| 日韩十八禁| 国产福利在线播放| 五月丁香| 激情五月天婷婷| 在线不卡免费Av| 色色网站免费| 在线观看国产欧美| WW免费视频| 欧美性爱第四页| 久久久精品在线| 18禁看网站| 亚洲手机在线播放| 一级免费黄色视频| 成人视频你懂的| 欧美日韩一级电影| 91在线网址| 一区二区三区成人电影| 国产毛片在线看| 首页-91n| 亚洲无码视频在线播放| 中文字幕乱码免费综合久久| 国产小视频免费在线观看| 亚洲视频99| 中文免费高清在线| 自拍偷拍激情视频| 人妻天天操| 大茄子熟女AV导航| 99久久精| 午夜激情视频在线观看| 亚洲精品一区二区三区在线观看 | 欧美伊人大香蕉| 欧美成人网站在线| 韩国久久久| 欧美色图第一页| 午夜大香蕉| 一级艹逼| 欧美一级性爱在线观看| www,久久久| 欧美精产国品一二三产品价格| 蜜臀AV在线播放| 亚洲色在线观看| 欧美亚洲天堂网| 欧美日韩国产一区| 色婷婷五月天| A级视频网| 18禁无码网站| 午夜福利电影AV| 亚洲激情欧美| 日韩三级在线观看| 超碰成人在线观看| 在线观看亚洲| 日韩资源网| 无码激情18激情视频| 久草在| 成人大片在线观看| 亚洲欧美精品在线| 91色欲| 久久手机电影| 操逼操逼操逼操逼操逼操逼| www国产在线| 欧美激情影院| 色天堂网站| 安徽妇女BBBWBBBwm| 国产又爽又黄免费视频免费观看| 青青操人人操| 在线观看无码高清视频| 人人妻人人插| 成人亚洲AV日韩AV无码| 狠狠干狠狠干| 伊人综合久久| 天堂网中文字幕| 91香蕉网| www.91国产| 日韩高清无码一区二区| 浮力影院久久| 国产伦精品一区二区三区妓女下载| 成人精品一区日本无码网站suv | 天堂中文在线观看| 四虎激情影院| 先锋AV资源在线| 夜色视频网| 国产又爽又黄免费网站在线看 | 久久久久久久毛片| 超碰人妻人人操| 久久久久久久久久久国产| 成人做爰100片免费观看视频 | 国产艹逼视频| 久久一级片| 一道本视频在线| 韩国gogogo高清在线完整版| 人妻丝袜无码视频专区| 狠狠干狠狠撸| 久久久桃色| 亚洲日韩精品欧美一区二区yw | 五月婷婷导航| 欧美aaa视频| 波多野结衣视频在线| 亚洲操逼网| 亚洲jizzjizz| 无码人妻一区二区三区在线视频不卡 | 天天做天天爱天天高潮| 夏目あきら被续侵犯7天| 亚洲AV成人片色在线观看高潮| 成人综合网站| 东方av在线观看| 天天玩夜夜玩天天玩国产99| 午夜成人无码视频| 精品无码视频在线观看| 黄片二区| 日韩美女免费性爱视频| 国产视频久久| 黄色视频免费在线看| 88无码| 天天插天天狠天天透| 激情六月天| 国产免费激情视频| 囯产精品一区二区三区AV做线 | 欧美深夜福利| 东方av在线观看| 免费黄色大片网站| 香蕉视频日韩| 午夜成人网站| 欧美日韩中文字幕无码| 色片网| 99久久夜色精品国产亚洲| 亚洲男人天堂av| 胖老板办公室沙发无套爆秘书| 无码国产精品一区二区性色AV| 色欲五月天| 亚洲精品中文字幕无码| 久草网大香蕉| 黄色av免费网站| 欧美日韩第一页| 亚洲无码视频在线播放| 91麻豆国产视频| 欧美丁香五月| 国产乱码一区二区三区的解决方法 | 九九成人精品| 国产精品福利小视频| 欧美久久久| 日本少妇中文字幕| 免费18禁网站| 国产成人AV在线| 黄色视频网站亚洲| 亚洲三级片无码| 日韩精品成人无码| 黄网在线观看视频| 狠狠狠狠狠狠狠狠| 欧美强开小嫩苞| 黄色网址av| 91久久久青青青青草| 国产一级aa| 丁香婷婷色五月激情综合三级三级片欧美日韩国 | 国产毛片18水真多18精品| 三p视频| 自拍偷拍视频网站| 久久6热| 中文字幕AV一区| 亚洲AV男人天堂| 无套免费视频欧美| 婷婷午夜精品久久久久久性色| 99热香蕉| 性爱一级视频| 国产精品久久久久久精| 水蜜桃一曲二区| 国产高清在线免费观看AV片| 一二区免费视频| 亚洲日韩中文字幕| 日韩无码乱码| av天堂中文在线| 搡BBB搡BBBB搡BBBB-百度| 欧美MV日韩MV国产网站| 2014AV天堂网| 在线中文字幕在线观看| 老师搡BBBB搡BBB| 操大香蕉| JIZZJIZZ国产精品喷水| 处破女初破全过免费看| 99国产在线观看| 特黄特色免费视频| 色色777| aaa少妇| 黄色一级视频在线观看| 婷婷五月精品中文字幕| 51一区二区三区| 久久99国产乱子伦...| 亚洲高清免费视频| 国产精品久久一区二区三区影音先锋 | 秘亚洲国产精品成人网站| 亚洲无码福利| 日韩AⅤ无码一区二区三区| 久热福利视频| 极品美女扒开粉嫩小泬高潮一| 婷婷五月天丁香在线| 日本黄色中文字幕| 国产毛片18水真多18精品| 91超碰久久在线| 无码视频播放| 人妻啪啪| 五月丁香伊人| 全部在线A片免费播放| 蜜桃av无码一区二区三区| 91成人情欲影视网| 91A视频| 爱爱91| 18禁无码网站| 日韩久久免费视频| 成人黄网在线观看| 九九久久99| 九七影院第二页| 国产色色网| 国产高清无码视频在线观看| 蜜桃精品无码| 三级片91| 在线日韩| 西西4444WWW无码精品| 国内自拍激情视频| 四虎成人无码| 久久福利| H片免费在线观看| 久久er| AV五月| 天天干天天撸| 亚洲中文无码AV在线| 日韩成人在线免费观看| 一级A片久久久免费直播间| 国产精品免费观看视频| 亚洲国产精品成人网站| 日本三级黄色| 欧美性爱香蕉视频| 日韩精品人妻中文字幕有| 色就是色欧美| 又黄又爽的视频| 亚洲中文字幕第一页| 艹逼91| 激情五月天成人| 久久另类TS人妖一区二区免费| h片免费观看| XX熟女HD| 亚洲av高清无码| 久久综合伊人7777777| 最近2019中文字幕mv第三季歌词 | 亚洲第一AV| 黄网站欧美内射| 91精品视频网站| 国产高清AV无码| 三级片在线网站| 亚洲视频在线观看播放| 91人人妻人人澡| 欧美精品欧美精品系列| 伊人成人小说| 特一级黄A片| 亚洲成人网在线观看| 免费无遮挡视频网站视频| 99久在线精品99re8热| 91在线成人视频| 92丨九色丨偷拍老熟女| 嫩草视频在线播放| 91网站在线看| 草逼综合网| 日韩动态图| 91人妻中文字幕| 江苏妇搡BBBB搡BBB| 三级在线网站| 九九99久久| 色网站操逼| 无码视频在线播放| 一本色道久久综合无码人妻软件| 国产性交网站| 久久久WWW成人免费精品| 精品人妻中文字幕视频| 成人激情在线视频| 无码视频日韩| 久操视频在线播放| 搡BBB搡BBBB搡BBBB'| 成人免费无码| 成人毛片av| 麻豆久久| 777超碰| 欧美日p| aa久久| 国产夫妻av| 欧美午夜福利在线观看| 欧美国产中文| a√天堂中文8| 超碰人人操人人摸| 亚洲成人性爱av| 午夜成人鲁丝片午夜精品| 超碰在线最新| 亚洲激情av| 狠狠色五月| 天天干天天做| 91视频在| 午夜成人福利在线观看| 国产夫妻精品| 国产思思99re99在线观看| www.高清无码| 国产丰满| 91视频美女模特| 无码一区二区在线观看| 炮友五月天| 久操视频网| 翔田千里中文字幕无码| 亚洲午夜久久久久久久久久久| 九七人妻| 久久日韩无码| 2025国产精品| 性爱视频网页| 淫乱人妻| 91亚洲精品久久久久久久久久久久 | 亚洲无码视频免费在线观看| 欧洲性爱视频在线观看| 国产黄色AV| 搡女人视频国产一级午夜片| 国产无码乱伦内射| 尻屄网站| 国内精品内射| 成人在线91| 国产精品色8| 天堂色播| 欧美日韩成人| 国产福利91| 亚洲秘无码一区二区| 天天干天天草| 欧美丁香五月| 亚洲日韩精品在线视频| 日韩精品人妻中文字幕蜜乳| 亚洲精品成人一二三区| 在线观看三级网址| 国产色无码网站www色视频| 激情另类视频| 久久久桃色| 丰满老妇高潮一级A片| 久久久久亚洲精品| 在线观看免费黄片| 能看的AV网站| 内射视频网| 欧美性爱在线观看| 91福利视频网站| 欧美国产另类| 77Q视频| 日韩欧美国产成人| 日韩无码黄色视频| 99re视频| a4yy午夜福利| 爱爱视频天天操| 亚洲中字幕新| 国产精品视频免费看| 99热播在线| 乱伦无码高清麻豆视频一区二区| 国产一区二区三区视频在线观看| 欧美高清另类| 奶头和荫蒂添的好舒服囗交漫画| 国产精品视频久久久| 激情色色| 好吊视频一区二区三区红桃视频you| 欧美亚洲天堂网| 爆乳乱伦| 大香蕉第一页| 成人网站视频在线观看| 亚洲AV中文无码| 亚洲成人视频一区二区| 免费看成人747474九号视频在线观看 | 少妇搡BBBB搡BBB搡HD(| 在线观看黄片网站| 91在线无码| 97亚洲精品| 中文字幕无码一区二区三区一本久 | 九九九亚洲| 懂色AV一区二区三区国产中文在线| 亚洲视频在线观看中文字幕| 欧美精产国品一二三| 国产精品婷婷午夜在线观看| 在线a视频免费观看| 日本AI高清无码在线观看网址| 中文字幕精品亚洲熟女| 翔田千里无码播放| 亚洲精品三级在线观看| 黄色片网站在线观看| 最好看的MV中文字幕国语电影| 精品久久一区二区| 国产高清免费视频| 成人网站www污污污网站公司| 色伊人网| 亚洲天堂无码视频| 无码人妻丰满熟妇区蜜桃| 亚洲一区二区三区免费视频| 国产成人a| 北条麻妃人妻中文字幕91影视| 午夜精品久久久久久久99热精东| 少妇精品| 日韩高清无码一区二区三区| 狼友视频免费在线观看| 久草蜜臀| 翔田千里一区二区| 国产精品国产三级国产专区53 | 狠狠无码| 久久视频在线| 91亚洲国产| a4yy午夜福利| 久久国产精品99久久人人澡| 亚洲福利一区二区| 91亚洲电影| 国产成人性爱| 国产精品福利在线播放| 米奇7777狠狠狠狠| 久久久久大香蕉| 伊人影院久久| 人人弄人人| 亚洲国产高清在线观看视频| 亚洲日韩Av无码中文字幕美国| 成人aV无码精品国产一区二区| 免费69视频| 色婷婷亚洲| 中文在线高清字幕| 日韩成人免费观看| 人人操天天| 亚洲AV电影在线观看| 无码毛片一区二区三区人口| 亚洲AV成人无码精品区| 欧美成人福利视频| 在线观看免费黄色视频| 夜夜爽天天爽| 人人操人人干人人看| 凸凹翔田千里无码| 乳揉みま痴汉电车羽月希免费观看| 国产黄色视频在线免费观看| 午夜AV在线免费观看| 欧美a片在线看| 午夜艹| 九色精品| 国产色呦呦| 淫香淫色天天影视| 蜜桃av久久久亚洲精品| 中文字幕在线字幕中文乱码区别| 人妻碰碰| 大鷄巴成人A片视频| 国产婬片lA片www777| 久久久久久三级电影| 国产人妖视频| 亚洲国产婷婷香蕉A片| 中文无码在线观看中文字幕av中文| 六月婷婷七月丁香| 午夜福利高清在线观看| 黄色资源在线观看| 亚洲成人高清在线| 国产激情免费| 一区二区三区日韩| 一级a片在线观看| 91人人视频| 91视频在| 亚洲最大网站| 日韩性爱网址| 精品国产乱子伦一区二区三区,小小扐 | 广东BBW搡BBBB搡| 天天日天天射天天操| 熟女少妇一区二区三区| 51精品日本| 91在线无码精品入口电车| 俺来也俺去也www色| 亚洲AV网站| 日本无码视频在线观看| 精品资源成人| 一级片免费网站| 中文字幕在线乱| 动漫av网站| 西西西444www无码视频| 乌克兰xxxx| 久久久一区二区| 丁香五月天视频| 黄色影院在线观看| 日韩欧美操逼视频| а中文在线天堂精品| 撸一撸免费视频| 国产AV综合网| 欧美亚洲综合在线观看| 午夜福利干B在线免费小视频| av在线无码| 久久无码一区二区三区| AV在线免费观看网址| 97人妻精品一区二区三区图片 | 国产欧美一区二区三区视频| 99视频免费看| 欧美黄色免费看| 91丨国产丨精品丨丝袜| Chinese搡老女人| 国产18毛片18水多精品| 狠狠色噜噜狠狠狠7777| 国产无码电影在线观看| 国产男女无套免费| 69堂在线观看| 人人看人人搞人人摸| 国产性爱网站| 日韩人妻精品中文字幕| 女人的天堂av| 一级a一级a免费观看视频Al明星| 色色777| 北条麻妃在线一区| 91天堂在线| 久久怡春院| 青青草原在线视频免费观看| 久久久久亚洲精品| 天天日天天综合| 国产精品黑人ThePorn| 波多野结衣成人网站| 白虎高清无码大尺度免费在线观看 | 男人的天堂视频在线观看| 亚洲第一香蕉视频| 国产精品果冻传媒| 美女黄网站| 波多野结衣不卡| 国产精品久久久久久久久久王安宇 | 无码欧精品亚洲日韩一区| 国产性播放| 国产极品久久久| 欧美成人色| 久久黄色免费看| 日本高清色清di免费观看| 国产激情视频在线| 日本a在线| 国产黄色自拍视频| AV无码高清| 伊人网在线视频观看| 午夜性视频| 婷婷丁香五月激情| 中文字幕免费视频在线观看| 亚洲AV秘无码苍井空| 日韩在线视频91| 中日韩在线| 久久视频国产| 亚洲视频黄色| 日本大香蕉伊人| 黄片视频国产| 黄片51| 亚洲男人天堂视频| 久久狼人| 亚洲黄色电影网| 亚洲无码视频看看| 香蕉视频毛片| 久操免费观看| 99er在线| 国产精品99视频| 免费无码一级A片大黄在线观看| 开心五月激情网| 韩国人妻无码| 嫩草久久| 北条麻纪无码视频| 亚洲九区| 国产三级片在线观看视频| 大香蕉1024| 伊人69| 天堂AV在线免费观看| 亚洲欧美成人在线观看| 国产精品一级a毛一级a| 久久久久久久麻豆| 欧美黄色免费网站| 国产亚洲日韩在线| 51av在线| 337p大胆色噜噜噜噜噜| 亚洲超碰在线| 免费一级做a爱片毛片A片小说| 亚州精品人妻一二三区| 最近中文字幕免费MV第一季歌词怀孕 | 亚洲欧美色图| 國產美女AV操逼網站| 国产成人AV免费观看| 2012天天夜夜| 国产在线久久久| 日韩va亚洲va欧美va高清| 久久狠狠干| 六月婷婷七月丁香| 波多野结衣av一区| 99re在线精品| 国产91在线一区| 亚洲精品18禁| ww免费视频| 天天干天天色| 亚洲日本黄色视频| 欧美综合精品| 色五月网| 91黄色电影| 婷婷五月在线视频| 涩婷婷| 欧美,日韩,日| 天天躁狠狠躁夜躁2024| AⅤ视频在线观看| 91久久性奴调教| 欧美成人在线免费| 午夜试看120秒体验区的特点| 欧美aaa在线| 一区二区在线免费观看| 欧美精品福利| 家庭乱伦av| 亚洲欧洲成人在线| 狼友在线观看| 91豆花视频| 嫩草人人精品免费| 一本大道香蕉av久久精东影业 | 中文字幕你懂的在线三级| 91国产精品视频在线| 国产亚洲综合无码| 欧美成人69| 青娱乐精品在线视频| 三级无码片| 喷潮视频| 操日韩| 五月丁香综合激情| www.蜜桃| 4444操| 丰满人妻一区二区三区Av猛交| 国产精品欧美激情| 蜜臀精品色无码蜜臀AV| 亚洲成人无码视频在线观看| 成人黄色免费看| 男人的天堂亚洲| 精品国产AⅤ麻豆| 免费人妻视频| 91免费在线视频| 先锋影音一区二区三区| 亚洲AV片一区二区三区| 日韩加勒比在线| 日韩久久久久| 国产成人无码精品久在线观看| 久久久久久高清毛片一级| 亚洲无码中文字幕在线播放| 天天做天天爱| 美女一级变态毛片| 亚洲成人免费在线视频| 三级乱伦视频| 国产精品无码激情| 草草国产| 无码精品视频在线观看| 国产粉嫩| 性感欧美美女| 青娱乐国产精品| 精品尤物在线| 99国产在线观看免费视频| 一区二区无码免费| 蜜桃av色偷偷av老熟女| 在线视频91| 兔子先生和優奈玩游戲脫衣服,運氣報表優奈輸到脫精光 | 精品久久精品| 国产一级大片| 中文字幕乱伦性爱| 成人影片在线观看18| 色资源在线观看| 国产av一区二区三区四区| 亚洲激情黄色| 久久成人毛片| 成人免费观看的毛视频| 亚洲人妻免费视频| 国产第页| 91成人在线电影| 亚洲欧美激情小说| 在线观看日本vs欧洲vs美洲| 黄色一区二区三区| 日韩无码二级| 国产天堂在线观看| 97久久一区二区| 免费乱伦视频| 性BBwBBwBBwBBw禽| 特黄AAAAAAAA片视频| 奇米色播| 色鬼综合网| 亚洲爱| 亚洲视频播放| 免费黄色小视频| 影音先锋女人资源| 第一福利导航大全| 黑人猛躁白人BBBBBBBBB| 性久久久久久久| 国产操B视频| 久久国产精品影院| 在线观看精品视频| 波多野结衣视频一区| 91成人视频在线播放| 成人视频18| 亚洲插逼视频| 一个人看的视频www| 婷婷精品在线| 日韩精品一区二区三区使用方法| 黄频免费观看| 一区二区三区四区在线视频| 亚洲午夜久久久久久久久| 91人人爱| 日韩欧美国产高清91| 俺来也俺去啦欧美www| 99热官方网站| 日韩无码视频网站| 91人妻无码精品一区二区| 亚洲麻豆| 国产成人综合亚洲| 国产色色网| 91网站免费观看| 欧美日屄| 人人插人人澡| 亚洲A∨无码无在线观看| 爱爱视频h| 天天日天天舔| 4080yy午夜理论片成人| jlzz18| 国产精品无码ThePorn| 黄色免费在线观看视频| 狠狠色一区| 欧洲无码精品| 一级A片亲子乱中文| 四川少扫搡BBw搡BBBB| 4虎亚洲人成人网www| 99视频+国产日韩欧美| 男人的天堂手机在线| AV一级片| 久青操| 九一成人网| 欧美成人高清视频| 人人操人人插| 在线观看视频日韩| 国产亚洲精品午夜福利巨大软件| 操逼网国产| 婷婷五月天视频| 天天爱夜夜爱| 日韩久久网站| 青青草精品视频| 欧美日韩逼| 一级AV在线| 欧美久久精品| 国产成人高清| 成人一区二区电影| 97AV人妻无码视频二区| 日韩成人一区| 欧美综合网在线观看| 色琪琪在线视频| 亚洲av男人天堂| 日韩三级电影| 欧美在线视频你懂的| 91九色91蝌蚪91成人| 久久人妻熟女中文字幕av蜜芽| 夜夜爽夜夜高潮夜夜爽| 久久9视频| 九九九成人网| 中出欧美亚洲| 精品1区2区| 亚洲欧美日本在线观看| 精品无码一区二区三区四区| 婷婷五月天成人社区| 婷婷丁香六月天| 日韩在线视频播放| 黄色18禁| 黄视频免费| 九九九精品视频| 久久久久久成人无码| 美女靠逼视频| 国产日皮视频| 中文字幕播放| 99做爱| www.黄色在线观看| 国产精品三级在线| 日韩第1页| 国产无码高潮在线| 色久悠悠综合网| 久久中文字幕视频| 久久伊| 国产无码乱伦内射| 青青草成人电影| 欧美不卡| 不卡无码av| 黄色在线免费观看网站| 中文字字幕在线中文乱码电影| 人妻丰满熟妇| 久久久精品午夜人成欧洲亚洲韩国| 欧美A片视频| 操逼操逼操| 久久国产精品一区二区三区| 人成视频在线观看| 欧美日韩免费观看视频| 操逼视频欧美| 日本熟女视频| 欧美午夜影院| 北条麻妃日B视频| 欧美曰皮免费看| 亚洲射色| 九九综合久久| 91免费在线视频观看| 天堂a在线| AV在线免费播放| 成人网站一区二区| 日本三区| 久久R5| 91麻豆精品在线观看| 91成人视频在线播放| 亚洲一级婬片A片AAAA网址| 超碰免费91| 精品无码视频| 人妻综合第一页| 日韩精品中文字幕无码| 偷拍视频网站北条麻妃| 国产成人精品免费看视频| 无码视频免费看| 婷婷五月激情小说| 九九精品视频在线播放| 亚洲无码在线观看视频|