久久久久久免费观看av,久久久久久免费观看av,大香蕉在线免费看点av,91久久精品中文字幕第一页,天天干夜夜操时时干,78m成人在线视频,99久久人妻精品二区,熟女少妇av一区二区三区,社区av五月天第一页

當(dāng)前位置: 首頁 >滾動 > 正文

世界快資訊:2萬字解讀:人工智能這么聰明,為何還不會閱讀?

2023-06-28 08:07:34 來源:虎嗅網(wǎng)

本文來自微信公眾號:騰訊研究院 (ID:cyberlawrc),作者:蓋瑞·馬庫斯、歐內(nèi)斯特·戴維斯,編譯:龍志勇,題圖來自:《梅根》

薩曼莎:我能幫你做什么?


(資料圖片)

西奧多:嗯,就是覺得一堆東西亂七八糟的,沒別的。

薩曼莎:要不我?guī)湍憧纯从脖P?

西奧多:嗯……好吧。

薩曼莎:好的,咱們先從電子郵件開始。你有幾千封《洛杉磯周報(bào)》的郵件,但是你好像很多年前就不在那里工作了。

西奧多:嗯,是呀。我想,之所以留著那些郵件沒刪,是因?yàn)槲矣X得以前可能寫過幾句特別幽默的話。但是……

薩曼莎:是的,的確有些挺幽默的。我看大概有86封應(yīng)該存下來的。我們可以把剩下這些郵件都刪除掉。

——編劇兼導(dǎo)演,斯派克·瓊斯,《她》,2013年

如果機(jī)器都能像科幻電影《她》中由斯嘉麗·約翰遜配音的“操作系統(tǒng)”薩曼莎理解西奧多那樣理解我們,那該有多好。如果機(jī)器能在眨眼間整理好我們所有的電子郵件,選我們需要的那些,將剩余的清除干凈,那該有多好。

如果我們能賦予計(jì)算機(jī)一個(gè)它們不具備的能力,那么首當(dāng)其沖的就該是理解語言的能力。因?yàn)檎Z言理解不僅能讓計(jì)算機(jī)幫助我們安排日常的生活和工作,而且還能幫助人類去直面那些最大的挑戰(zhàn),比如對大量的科學(xué)文獻(xiàn)進(jìn)行精煉和總結(jié)。無論是誰,僅憑自己的力量,都不可能緊跟科學(xué)界的發(fā)展速度。

舉例來說,在醫(yī)學(xué)領(lǐng)域,每天都有數(shù)千篇論文發(fā)表于世。沒有哪個(gè)醫(yī)生或研究人員能將這些論文都讀一個(gè)遍。讀不到這些論文,就無法將最新理論應(yīng)用于實(shí)踐,拖了進(jìn)步的后腿。藥物研發(fā)之所以進(jìn)展緩慢,一部分原因就在于許多信息都封鎖在那些沒人能抽出時(shí)間閱讀的文獻(xiàn)中。有時(shí),全新的治療手段無法得到應(yīng)用,是因?yàn)獒t(yī)生沒時(shí)間去閱讀相關(guān)內(nèi)容,根本不知道有新手段的存在。如果有一個(gè)能對大量醫(yī)學(xué)文獻(xiàn)進(jìn)行自動合成的AI程序,就會掀起一場真正的革命。

能像博士生一樣從專業(yè)角度出發(fā)去閱讀的計(jì)算機(jī),再配備上谷歌強(qiáng)大的計(jì)算馬力,同樣會在科學(xué)界掀起一場革命。從數(shù)學(xué)到氣候科學(xué)再到材料科學(xué),我們會看到每個(gè)領(lǐng)域因此而發(fā)生的重大進(jìn)展。而且,不僅科學(xué)能獲得變革,歷史學(xué)家和傳記作者也能迅速找到關(guān)于某個(gè)非著名人物、地點(diǎn)和事件的所有文字記錄。作家還能利用自動查詢功能,去檢索作品中情節(jié)的前后矛盾、邏輯缺陷和時(shí)代錯誤。

就連比上述功能簡單得多的能力也能發(fā)揮巨大的幫助作用?,F(xiàn)在iPhone有個(gè)功能,當(dāng)你收到一封提到約見時(shí)間地點(diǎn)的電子郵件,你只要點(diǎn)擊一下,iPhone就能將此事加進(jìn)日程安排之中。如果能在整個(gè)過程中不出錯,那還真是非常方便。但很多時(shí)候,iPhone做不到不出錯,很可能加入日程的不是你所想的日子,而是郵件中提到的另外一個(gè)日子。如果你不能在iPhone犯錯的時(shí)候及時(shí)發(fā)現(xiàn),就只能自認(rèn)倒霉。

等到機(jī)器真正可以閱讀的那一天,我們的后人一定會猜想,當(dāng)年的這幫人是如何在沒有合成閱讀器的情況下工作生活的,就像我們有時(shí)會猜想古人如何在沒有電力的情況下工作生活一樣。

Talk to Books無法回答一切問題

2018年初的TED大會上,現(xiàn)就職于谷歌的著名未來學(xué)家兼發(fā)明家雷·庫茲韋爾將他新近推出的項(xiàng)目——谷歌“Talk to Books”公之于世,并承諾利用自然語言理解來“提供讀書的全新方式”。1Quartz網(wǎng)站照例將這個(gè)新產(chǎn)品捧上天,鼓吹“谷歌推出震驚世界的全新搜索工具,將能通過閱讀成千上萬的書籍來回答一切問題”。

我們頭腦中閃現(xiàn)的第一個(gè)問題,就是:“這個(gè)項(xiàng)目實(shí)際上是做什么的?”答案是,谷歌對10萬本圖書中的句子添加了索引,這些圖書包羅萬象,從《大學(xué)成長手冊》(Thriving at College)到《編程入門傻瓜書》(Beginning Programming for Dummies)再到《托爾金的福音》(The Gospel According To Tolkien),什么都有。在此基礎(chǔ)之上,谷歌還開發(fā)了一種對句子意義進(jìn)行編碼的高效手段,可以將其轉(zhuǎn)化為被稱作“向量”的數(shù)字集合。當(dāng)你提問時(shí),程序會利用這些向量,在數(shù)據(jù)庫中找到擁有最相近向量的20個(gè)句子。而系統(tǒng)本身并不知道你問的問題是什么意思。

只需對系統(tǒng)的輸入有所了解,我們就能立刻明白,Quartz網(wǎng)站文章中所稱的Talk to Books“將能回答一切問題”的說法,不能按字面意思去理解。10萬本書聽起來很多,但只不過是迄今為止出版過的1億本圖書中的一個(gè)零頭而已。在本書之前的內(nèi)容中我們曾講過,深度學(xué)習(xí)是靠相關(guān)性而非真實(shí)的理解來工作的。所以當(dāng)我們看到Talk to Books給出的許多答案都不太靠譜時(shí),也一點(diǎn)兒不覺得奇怪。如果你的問題是關(guān)于某部小說中的具體細(xì)節(jié),那么你應(yīng)該能得到一個(gè)比較可靠的答案。但是,當(dāng)我們提問“哈利·波特和赫敏·格蘭杰是在哪里相遇的”,系統(tǒng)給出的20個(gè)答案中,沒有一個(gè)是出自《哈利·波特與魔法石》,也沒有一個(gè)答案是針對問題而給出的。當(dāng)我們問到“第一次世界大戰(zhàn)后協(xié)約國繼續(xù)對德國進(jìn)行封鎖的行為是否合理”,系統(tǒng)給出的結(jié)果中,竟然沒有一條提到封鎖。Talk to Books能回答“一切問題”的說法,也真是夸張得有點(diǎn)太過了。

而當(dāng)答案不能從索引文本的句子中直接引用時(shí),許多內(nèi)容就會被忽略掉。當(dāng)我們問到“《哈利·波特》中提到的七魂器是什么”,我們根本得不到一個(gè)七魂器的列表,可能是因?yàn)樵谒羞@些討論哈利·波特的著作中,沒有一本將七魂器同時(shí)列舉出來。當(dāng)我們提問“1980年時(shí),美國最高法院最年長的法官是誰”,系統(tǒng)就徹底傻眼了。然而我們只需上網(wǎng)找到最高法院的法官列表,幾分鐘時(shí)間就能查詢到答案是威廉·布倫南(William Brennan)。Talk to Books在這里之所以遇到了挫折,就是因?yàn)樗袝卸颊也坏揭痪淠芙o出完整答案的話來。這10萬本書中,沒有一本書寫過“1980年最高法院最年長的法官是威廉·布倫南”這樣一句話。就算有10萬本書在手,系統(tǒng)也無法從海量的書面文字中進(jìn)行提煉和推斷。

而最能說明Talk to Books存在問題的是,只要對提問方式稍加改變,就會得到完全不同的答案。當(dāng)我們問Talk to Books“誰為了30塊銀錢背叛了自己的老師”,雖然這是一段非常著名的故事中的一個(gè)眾所周知的情節(jié),但在系統(tǒng)給出的20個(gè)答案中,只有6個(gè)答案正確地提到了猶大。而如果我們沒有用上“銀錢”這個(gè)特定的說法,答案就會變得更加五花八門。

當(dāng)我們以不那么確切的方式向Talk to Books提問:“誰為了30個(gè)硬幣背叛了自己的老師?”猶大只出現(xiàn)在10%的答案中。排名最靠前的答案,既與問題毫不關(guān)聯(lián),也不能提供任何信息:“不清楚靜婉的老師是誰?!碑?dāng)我們再次對問題進(jìn)行調(diào)整,將“背叛”改成“出賣”,形成“誰為了30個(gè)硬幣出賣了自己的老師”,猶大的答案便從前20個(gè)結(jié)果中徹底消失了。

這個(gè)系統(tǒng)比較適合處理文本序列精確匹配的問題,一旦問題脫離了這個(gè)范疇,系統(tǒng)就會一籌莫展。

人是怎樣閱讀的

有朝一日,當(dāng)夢想中的機(jī)器閱讀系統(tǒng)成為現(xiàn)實(shí),就將能夠回答關(guān)于其讀到內(nèi)容的所有合理問題。機(jī)器將能夠把多份文件的信息整合為一體,而且其答案不會僅僅是從原文中原封不動摘取的一段話,而是通過信息的合成來呈現(xiàn)。從未同時(shí)出現(xiàn)在一個(gè)段落之中的七魂器列表也好,律師從多個(gè)案件中收集判例的精煉概括也好,科學(xué)家通過多篇論文心得而總結(jié)出的理論也好,都不在話下。就連一年級小學(xué)生都能將系列繪本中的好人和壞人逐一列出。為了寫學(xué)期論文,大學(xué)生能從多個(gè)出處搜集思想,并將這些思想整合為一體,進(jìn)行交叉驗(yàn)證,并得出全新的結(jié)論。同樣,擁有閱讀能力的機(jī)器也應(yīng)該能做到這一點(diǎn)。

機(jī)器需要具備信息合成能力,而非單純的鸚鵡學(xué)舌。但在此之前,我們還需要達(dá)到一個(gè)更簡單的目標(biāo):讓機(jī)器能可靠地理解最基礎(chǔ)的文本。

時(shí)至今日,就算社會上對AI的呼聲再高,我們都還沒有達(dá)到這個(gè)簡單目標(biāo)。若想弄明白為什么魯棒的機(jī)器閱讀能力目前依然遙不可及,我們首先要具體搞清楚理解相對簡單的文本所需經(jīng)過的步驟。

舉例來說,假設(shè)你讀到了下面這段文字。這段文字引自勞拉·英格斯·懷德(Laura Ingalls Wilder)創(chuàng)作的兒童讀物《農(nóng)莊男孩》(Farmer Boy)。阿曼佐是個(gè)9歲男孩。他在街上撿了個(gè)塞滿了錢的錢包,當(dāng)時(shí)還叫“錢袋子”。阿曼佐的父親猜想,這個(gè)“錢袋子”可能是湯普森先生的。阿曼佐在城中的一個(gè)商店里找到了湯普森先生。

阿曼佐轉(zhuǎn)向湯普森先生,問道:“你的錢袋子有沒有丟?”

湯普森先生跳了起來。他用手拍了拍自己的口袋,大聲喊著:

“是的,我的錢袋子丟了!里面還有1500美元!我的錢袋子呢?你都知道些什么?”

“是這個(gè)嗎?”阿曼佐問道。

“是的,是的,就是這個(gè)!”湯普森先生說道,一把奪走錢袋子。他將錢袋子打開,匆匆忙忙地?cái)?shù)錢。把所有的鈔票全部清點(diǎn)了兩遍。

之后他長長地舒了一口氣,放松了下來,說道:“嗯,看來這個(gè)傻孩子一分錢也沒偷?!?/p>

一個(gè)優(yōu)秀的閱讀系統(tǒng),應(yīng)該有能力回答下列問題:

1. 湯普森先生為什么用手拍自己的口袋?

2. 在阿曼佐說話之前,湯普森先生是否知道自己丟了錢包?

3. 阿曼佐問“是這個(gè)嗎”時(shí),指的是何物?

4. 誰差點(diǎn)丟了1500美元?

5. 所有的錢是否還都在錢包里?

對于人類來說,所有這些問題都很簡單。但迄今為止開發(fā)出來的所有AI系統(tǒng)中,無一能可靠地處理此種類型的問題。(想象一下Talk to Books會給出怎樣的答案)

從本質(zhì)來看,上述每一個(gè)問題都需要讀者(無論是人類還是機(jī)器)去跟隨一條推論鏈,而這些推論都隱藏在故事之中。以第1題為例。在阿曼佐說話之前,湯普森先生并不知道自己丟了錢包,以為錢包還在口袋里。當(dāng)阿曼佐問他是不是丟了錢包,湯普森才意識到他真的可能丟了錢包。就是為了驗(yàn)證錢包丟了的可能性,湯普森才去拍自己的口袋。因?yàn)闆]有在平時(shí)放錢包的地方找到錢包,所以湯普森才意識到自己丟了錢包。

目前的AI完全沒有能力對復(fù)雜推理鏈條進(jìn)行處理。這類推理鏈條通常要求讀者將大量關(guān)于人和物的背景信息整合在一起,需要對這個(gè)世界的基本運(yùn)轉(zhuǎn)規(guī)律有所把握,而目前的系統(tǒng)并不具備足夠廣泛的通用知識去做到這一點(diǎn)。?在你閱讀這個(gè)阿曼佐與錢包的故事時(shí),你很可能會無意識地用到許多相關(guān)知識,比如:

人們可能在不知情的情況下丟東西。這屬于人的心智狀態(tài)與事件之間關(guān)系的知識。

人們常常將錢包放在口袋里。這是有關(guān)于人們在通常情況下如何使用某物的例子。

人們經(jīng)常在錢包里裝錢。錢對人們來說很重要,因?yàn)槿藗兛梢杂缅X來買東西。這是有關(guān)于人、習(xí)俗和經(jīng)濟(jì)學(xué)知識的例子。

如果人們假設(shè)某些對他們很重要的事是事實(shí),而他們又發(fā)現(xiàn)此事可能并非事實(shí),就會很著急地去加以證實(shí)。這是關(guān)于對人在心理上極其重要的事情的知識。

你能通過從外部觸摸一下口袋,來感覺到某物是不是在口袋里。這是有關(guān)于不同類型的知識如何結(jié)合為一體的例子,在這里,也是有關(guān)于不同的物體(手、口袋、錢包)彼此互動的知識與感官如何發(fā)揮作用的知識相結(jié)合的例子。

其他問題所需的推理和知識也同樣豐富多樣。若想回答第3題:“阿曼佐問‘這個(gè)是它嗎’時(shí),指的是何物?”讀者必須要明白有關(guān)語言、人物和物體的相關(guān)知識,并從中領(lǐng)會出,“這個(gè)”和“它”的合理先行詞可能是錢包,但更加微妙的是,“這個(gè)”指的是阿曼佐手里拿著的錢包,而“它”指的是湯普森先生丟的錢包。所幸,這兩個(gè)錢包原來是同一個(gè)錢包。

哪怕是應(yīng)對如此簡單的段落,我們關(guān)于人物、物體和語言的知識都需要達(dá)到深刻、廣泛和靈活的水平;如果環(huán)境稍有變化,我們就要去適應(yīng)。我們不能指望湯普森先生在聽到阿曼佐說找到了自家外婆的錢包時(shí)還能表現(xiàn)出同樣的激動狀態(tài)。從文中我們領(lǐng)會到,湯普森先生是在不知情的情況下丟了錢包,而如果他是在持刀歹徒實(shí)施搶劫的情況下,還不知道自己的錢包被拿走了,那我們就會覺得非常奇怪。至今尚無人能想出辦法,讓機(jī)器能以如此靈活的方式進(jìn)行推理。我們并不認(rèn)為這一目標(biāo)不可能達(dá)成,隨后我們會設(shè)計(jì)出向前發(fā)展所需邁出的幾個(gè)步驟,但當(dāng)下的現(xiàn)實(shí)問題就是,達(dá)到目標(biāo)所需的能力遠(yuǎn)遠(yuǎn)超出了AI界的專業(yè)水平。Talk to Books還差得太遠(yuǎn),本書開篇提及的微軟和阿里巴巴的閱讀器也同樣如此。

從根本上說,現(xiàn)在的機(jī)器所擅長的工作(將事物按不同的類別進(jìn)行分類),與獲取上述平凡但不可或缺的能力以及理解真實(shí)世界的能力之間,還對不上號。

懷德的這段文字并沒有什么特別之處。我們平日閱讀到的每一個(gè)段落,都存在類似的挑戰(zhàn)。以下是引自2017年4月25日《紐約時(shí)報(bào)》的簡短例子。

今天本應(yīng)是埃拉·菲茨杰拉德(Ella Fitzgerald)的百歲壽辰。

洛倫·舍恩伯格(Loren Schoenberg)這位紐約客,在1990年時(shí)為“爵士樂第一夫人”做薩克斯伴奏。此時(shí)已接近她職業(yè)生涯的終點(diǎn)。他將她比喻成“一瓶陳年紅酒”……

無論是人還是機(jī)器,都可以回答從文字中能直接找到答案的問題,比如:“洛倫·舍恩伯格演奏的是什么樂器?”但許多問題都需要在文字的基礎(chǔ)上做一點(diǎn)點(diǎn)引申,而這點(diǎn)引申,就會讓目前的AI系統(tǒng)望而卻步。

1. 埃拉·菲茨杰拉德1990年時(shí)是否健在?

2. 1960年時(shí)她是否健在?

3. 1860年時(shí)她是否健在?

4. 洛倫·舍恩伯格和埃拉·菲茨杰拉德是否見過面?

5. 舍恩伯格是否認(rèn)為菲茨杰拉德是一瓶酒精飲料?

若想回答第1題、第2題、第3題,就需要推理出埃拉·菲茨杰拉德生于1917年4月25日這個(gè)事實(shí),因?yàn)?017年4月25日應(yīng)該是她的百歲壽辰。在此基礎(chǔ)之上,還要具備一些關(guān)于如下事實(shí)的知識:

人在職業(yè)生涯過程中是活著的,因此她在1990年時(shí)還健在。

人在出生之后、死亡之前,是一直活著的,而在出生之前、死亡之后,并不活在這個(gè)世界上。因此菲茨杰拉德在1960年肯定活著,而在1860年時(shí)還沒出生。

回答第4題,需要能通過推理得知為某人的歌唱進(jìn)行伴奏需要與其見面,并需要在文中沒有直接表明的情況下,引申出埃拉·菲茨杰拉德是“爵士樂第一夫人”。

回答第5題,需要能通過推理得知人們在進(jìn)行類比時(shí)頭腦中有著怎樣一幅畫面,并知道埃拉·菲茨杰拉德是一個(gè)人,人不能變成飲料。

隨手拿來一份報(bào)紙、一則故事、一篇小說,無論長短,你都能從里面找到類似的內(nèi)容。技巧嫻熟的作家并不會將每一件事都清楚無疑地向讀者闡明,而是只將你需要知道的事情講給你聽,并依賴于人與人之間所共有的知識來填補(bǔ)其余的空缺。想象一下,如果懷德在故事中事無巨細(xì)地寫下來人們將錢包放在口袋里,人們有時(shí)會通過用手摸口袋的方式來察覺小物件的存在與否,這個(gè)故事將會變得多么枯燥。

想當(dāng)年,有一群AI研究人員曾嘗試解決這些問題?,F(xiàn)任谷歌研究總監(jiān)的彼得·諾維格(Peter Norvig),當(dāng)時(shí)曾寫過一篇頗具爭議的博士論文,主題就是如何應(yīng)對讓機(jī)器理解故事的挑戰(zhàn)。更為知名的是羅杰·尚克(Roger Schank),當(dāng)時(shí)還在耶魯大學(xué)工作的他,提出了一系列頗具深度的案例,指出在客人走進(jìn)餐廳時(shí),機(jī)器可以利用“腳本”來理解當(dāng)時(shí)發(fā)生的事情。但是,對故事的理解需要更加復(fù)雜的知識結(jié)構(gòu),以及比腳本要多得多的知識形式,而形成并收集所有這些知識所需的工程量巨大到令人無法下手。隨著時(shí)間的推移,這條思路逐漸被擱置了下來,研究人員也開始轉(zhuǎn)向更容易上手的領(lǐng)域,比如網(wǎng)絡(luò)搜索和推薦引擎。誰也沒能讓我們距離通用人工智能更近一步。

搜索引擎和語音虛擬助手的困惑

盡管如此,網(wǎng)絡(luò)搜索還是掀起了翻天覆地的變革。這是AI最為顯赫的成功案例之一。谷歌、必應(yīng)等,都是基于極為強(qiáng)大而且極富實(shí)效的工程力量,以AI為動力,在數(shù)十億網(wǎng)絡(luò)文件中以接近實(shí)時(shí)的速度找到匹配的結(jié)果。

令人驚訝的是,雖然這些工具都以AI為動力,但卻幾乎不涉及我們盼望的那種自動化合成機(jī)器閱讀的能力。我們希望機(jī)器能理解它們讀到的內(nèi)容。而搜索引擎卻做不到理解。

以谷歌搜索為例。谷歌算法中有兩個(gè)基本思想,一個(gè)思想是自古有之,另一個(gè)思想是谷歌首先提出來的,但無論哪個(gè)思想都不需要系統(tǒng)擁有理解文件的能力。第一個(gè)古老思想,遠(yuǎn)在谷歌和互聯(lián)網(wǎng)誕生之前,自從20世紀(jì)60年代早期就被用在文件檢索程序之中。這一思想是將問題中的詞與文件中的詞進(jìn)行匹配。

想要搜索包括小豆蔻的菜譜嗎?沒問題,只要找到所有包含“菜譜”和“小豆蔻”這兩個(gè)詞的網(wǎng)站就可以了。根本無須理解小豆蔻是一種香料,無須搞明白這種香料聞起來是什么香味,吃起來是什么味道,也無須知道此種香料是如何從豆莢中提取而成,哪種風(fēng)味的菜肴更傾向于使用這種香料。想要找到飛機(jī)模型指南嗎?只要匹配上諸如“模型”“飛機(jī)”和“如何”幾個(gè)詞,就能找到許多有用的鏈接,就算機(jī)器根本不知道飛機(jī)為何物也無所謂,更無須搞明白什么是升力,什么是阻力,無須理解你為什么一定要乘坐商業(yè)航空公司的航班,而不愿駕著一比一的飛機(jī)模型遨游天空。

第二個(gè)更富創(chuàng)新意識的思想就是著名的“網(wǎng)頁排名”(PageRank)算法。該思想認(rèn)為,程序可以利用網(wǎng)絡(luò)的集體智慧,通過查看哪些網(wǎng)頁擁有更多外鏈(特別是來自其他高質(zhì)量網(wǎng)頁的鏈接)來判斷網(wǎng)頁質(zhì)量的高下。這一思想令谷歌迅速崛起,將其他搜索引擎遠(yuǎn)遠(yuǎn)拋在了后面。但是,詞匯匹配與文本理解之間并沒有太大關(guān)系,計(jì)算源于其他網(wǎng)頁的鏈接也與真正的理解有著天壤之別。

谷歌搜索之所以在沒有任何復(fù)雜閱讀能力的情況下也能取得非常好的效果,是因?yàn)樗阉鬟^程對精度的要求很低。搜索引擎無須進(jìn)行深度閱讀去分辨網(wǎng)絡(luò)上關(guān)于總統(tǒng)權(quán)力的論述是偏左派還是右派,這是用戶要去做的事情。谷歌搜索需要搞定的,就是判斷給定文檔是否與正確的通用主題有關(guān)。人們從文檔中的只言片語就能大概搞清楚此文的主題。如果有“總統(tǒng)”和“行政特權(quán)”等詞,用戶很可能會因?yàn)檎业搅诉@個(gè)鏈接而歡欣雀躍;而如果是關(guān)于卡戴珊家族的,那么很可能不在用戶的興趣范圍之內(nèi)。如果文檔中提到了“喬治” “瑪莎” “約克鎮(zhèn)戰(zhàn)役”,谷歌搜索就能猜出來此文與喬治·華盛頓有關(guān),雖然它對婚姻和革命戰(zhàn)爭一無所知。

其實(shí),谷歌并不膚淺。有時(shí),谷歌有能力對用戶查詢的問題進(jìn)行理解,并給出整理好的答案,而不僅僅是一長串鏈接。這就與閱讀能力更為接近,但只是接近了一點(diǎn)點(diǎn),因?yàn)楣雀柰ǔG闆r下只會閱讀用戶查詢的問題,而不會閱讀文件本身。如果你問:“密西西比州的首府是哪里?”谷歌就會正確地對問題進(jìn)行解析,并在預(yù)先設(shè)定的表格中找到答案:杰克遜城。如果你問:“1.36歐元等于多少盧比?”谷歌同樣會給出正確的解析,在參考另一份匯率表格后,正確地計(jì)算出“1.36歐元=110.14印度盧比”。

絕大多數(shù)情況下,當(dāng)谷歌反饋出這類答案時(shí),基本都是可靠的(估計(jì)谷歌的系統(tǒng)只在其指標(biāo)表明答案正確率很高時(shí)才會給出此類反饋),但距離完美還有很長一段路要走,而我們也能從它犯下的錯誤中,猜出它背后的工作原理。舉例來說,2018年4月,我們在谷歌搜索中提問:“目前誰是最高法院的法官?”得到了一個(gè)并不完整的答案:“約翰·羅伯茨(John Roberts)?!倍_伯茨只是九位法官中的一位。在答案后面,谷歌還在“人們也在搜索”部分給出了其他七位法官的名字:安東尼·肯尼迪(Anthony Kennedy)、塞繆爾·阿利托(Samuel Alito)、克拉倫斯·托馬斯(Clarence Thomas)、斯蒂芬·布雷耶(Stephen Breyer)、魯思·巴德·金斯伯格(Ruth Bader Ginsburg)和安東寧·斯卡利亞(Antonin Scalia)。上述所有人的確都曾就任于最高法院,但斯卡利亞已經(jīng)故去,而斯卡利亞的繼任者尼爾·戈薩奇(Neil Gorsuch)以及新近任命的埃琳娜·卡根(Elena Kagan)和索尼婭·索托馬約爾(Sonia Sotomayor)都沒有在這份名單中出現(xiàn)。看得出來,似乎谷歌完全忽略掉了“目前”這個(gè)詞。

回到我們之前講到的“合成”這個(gè)話題上,終極機(jī)器閱讀系統(tǒng)將能夠通過閱讀谷歌新聞來編寫問題的答案,并在發(fā)生變化時(shí)對清單進(jìn)行調(diào)整,或者至少應(yīng)該能通過參考用戶會頻繁更新的維基百科來提取出目前法官的名字。谷歌似乎不會這樣做。根據(jù)我們的推測,谷歌只不過是查詢了統(tǒng)計(jì)規(guī)律——阿利托和斯卡利亞在許多關(guān)于司法制度的搜索中都有出現(xiàn),而沒有對其來源進(jìn)行真正的閱讀理解。

舉另外一個(gè)例子,我們問谷歌:“第一座橋梁是何時(shí)建成的?”得到了如下置頂答案:

如今世界上絕大多數(shù)地方都利用鋼鐵建筑橋梁,主要河流上橫跨的橋梁都屬于此種類型。圖中所示是世界上第一座鐵橋。此橋由亞伯拉罕·達(dá)比三世(Abraham Darby III)于1779年建成,是歷史上第一座用鐵建成的大型建筑。

“第一座”和“橋梁”這兩個(gè)詞與我們的查詢相匹配,但有史以來建成的第一座橋并非鐵橋,因此“第一座鐵橋”并不等同于“第一座橋梁”。谷歌給出的答案與正確答案相差了數(shù)千年。在谷歌開發(fā)出此功能十幾年之后的今天,能通過閱讀問題并給出直接答案的搜索依然只占極少數(shù)。當(dāng)你用谷歌搜索得出的是鏈接而非答案時(shí),就說明谷歌只是依賴于關(guān)鍵詞和鏈接計(jì)數(shù)之類的能力,而非真正的理解。

當(dāng)然,像谷歌和亞馬遜這樣的公司一定會不斷對產(chǎn)品進(jìn)行改進(jìn)。對于像最高法院法官這樣的問題,也很容易通過人工編程的方式給出正確的名單。小規(guī)模的循序漸進(jìn)肯定會繼續(xù)下去,但當(dāng)我們展望未來時(shí),并沒有看到針對我們提出的許多類型挑戰(zhàn)的通用解決辦法。

幾年前,我們在Facebook上看到了一個(gè)特別搞笑的表情包。這是一張奧巴馬的照片,上面寫著:“去年你告訴我們你50歲了;現(xiàn)在你說你51歲了。奧巴馬你到底幾歲了?”兩種不同的說法,放在不同的時(shí)間,可能都是正確的。如果你是人類,就能理解這個(gè)笑話。但如果你是只會做關(guān)鍵字匹配的機(jī)器,到這里就徹底抓不住笑點(diǎn)了。

Siri、Cortana、谷歌助手和Alexa這類靠語音驅(qū)動的“虛擬助手”,又有著怎樣的情況呢?先看優(yōu)點(diǎn)。這些虛擬助手會采取實(shí)際行動,而不是拋給你一個(gè)鏈接列表。與谷歌搜索不同,虛擬助手一開始的設(shè)計(jì)方案就是將用戶的查詢從實(shí)際問題的角度加以理解,而不是將其視為隨機(jī)的關(guān)鍵詞集合。但幾年之后,這些虛擬助手都成了“偏科生”,在某些方面很好用,而在其他方面則很薄弱。舉例來說,幾個(gè)虛擬助手都很擅長“事實(shí)陳述”的問題,比如“誰贏得了1957年的世界大賽”,但它們每一個(gè)又有各自的獨(dú)門絕技。谷歌助手擅長指路和買電影票。Siri擅長指路和預(yù)訂餐廳座位。Alexa擅長數(shù)學(xué),講事先寫好的笑話,而且尤其擅長從亞馬遜網(wǎng)站上買東西——這一點(diǎn)兒也不稀奇。

但在它們擅長的領(lǐng)域之外,你永遠(yuǎn)也不知道這些助手會在什么時(shí)候突然語出驚人。不久前,作家莫娜·布什內(nèi)爾(Mona Bushnell)做了個(gè)小實(shí)驗(yàn),向所有4個(gè)程序詢問通往最近機(jī)場的路線。谷歌助手給了她一份旅行社的名單。Siri給她指了一條去往水上飛機(jī)基地的路。Cortana給了她一個(gè)Expedia等機(jī)票網(wǎng)站的列表。我們其中一人在最近一次駕車出行的途中和Alexa聊天,在某些問題得到了完全正確的答案,比如:特朗普是人嗎?奧迪是車嗎?Edsel是車嗎?但在另一些問題上則徹底迷失了,比如:奧迪能用汽油嗎?奧迪能從紐約開到加州嗎?鯊魚是一種交通工具嗎?

再舉個(gè)例子,最近有人在Twitter上發(fā)給馬庫斯這么個(gè)段子:這是一個(gè)手機(jī)截屏,向Siri詢問“最近一家不是麥當(dāng)勞的快餐店”,Siri老老實(shí)實(shí)地列出了附近三家餐廳的名單,而且還都是提供快餐的餐廳,但每一家都是雷·克羅克(Ray Kroc)蓋的房子?!安皇恰边@個(gè)詞被Siri完全忽視掉了。

2009年問世的Wolfram Alpha被大宣傳為“世界上第一個(gè)計(jì)算知識引擎”,實(shí)際上也好不到哪里去。WolframAlpha擁有囊括各類科學(xué)、技術(shù)、數(shù)學(xué)、人口普查和社會學(xué)信息的巨大的內(nèi)置數(shù)據(jù)庫,還擁有利用這些信息回答問題的一系列技術(shù),但依然不具備將所有這些信息整合為一體的能力。

WolframAlpha的強(qiáng)項(xiàng)是數(shù)學(xué)問題,比如:“1立方英尺(30)黃金的重量是多少?” “密西西比州的比洛克西距離加爾各答有多遠(yuǎn)?” “一個(gè)邊長為2.3米的二十面體的體積是多少?”(答案分別為“547千克” “14132千米” “26.5立方米”)

但它的理解能力的局限性很強(qiáng)。如果你問“墨西哥邊境離圣地亞哥有多遠(yuǎn)”,你會得到“1841千米”的答案,而這個(gè)答案是完全錯誤的。WolframAlpha忽略了“邊境”這個(gè)詞,而是計(jì)算從圣地亞哥到墨西哥地理中心點(diǎn)的距離。如果你對二十面體的問題稍加調(diào)整,用“邊的長度為2.3米”替換“邊長2.3米”,它就不再認(rèn)為這是關(guān)于體積的問題,而是告訴你二十面體有30條邊、20個(gè)頂點(diǎn)、12個(gè)面,根本不提體積的事。WolframAlpha能告訴你埃拉·菲茨杰拉德什么時(shí)候出生,什么時(shí)候去世;但如果你問“埃拉·菲茨杰拉德1960年時(shí)是否健在”,系統(tǒng)就會錯誤地理解為“埃拉·菲茨杰拉德是否健在”并給出“不”的答案。

可能讀者會說:但是,請稍等,沃森呢?就是那個(gè)打敗了Jeopardy!節(jié)目中兩位人類冠軍的沃森,它不是特別會回答問題嗎?沒錯,但可惜的是,沃森并不像表面看上去那么無所不能。原來,Jeopardy!節(jié)目中95%的問題答案都是維基百科頁面的標(biāo)題。在Jeopardy!中獲勝,只要能找到合適的文章標(biāo)題即可。從這種水平的信息檢索要發(fā)展到能夠真正思考和推理的系統(tǒng),還有著十分漫長的道路。到目前為止,IBM甚至還未能將沃森打造成為魯棒的虛擬助手。我們最近在IBM的網(wǎng)頁上試圖尋找這樣一款產(chǎn)品,但能找到的只是一個(gè)過時(shí)的沃森助手演示版,只會處理模擬汽車(simulated cars)相關(guān)的事情,根本無法與蘋果、谷歌、微軟或亞馬遜的那些多功能產(chǎn)品相提并論。

我們相信,Siri和Alexa等虛擬助手一定會變得越來越好用,但它們還有很長的路要走。而且,關(guān)鍵問題在于,就像谷歌搜索一樣,真正的合成是十分稀罕的。據(jù)我們所知,目前很少有公司嘗試以靈活的方式將多個(gè)來源的信息組合為一體。甚至源自包含多個(gè)句子的同一個(gè)來源時(shí),其內(nèi)容也被拆散得七零八落,就像我們之前讀到的關(guān)于阿曼佐和埃拉·菲茨杰拉德的段落一樣。

現(xiàn)實(shí)情況是,目前的AI系統(tǒng)無法對你在這些情況下所做的事情進(jìn)行復(fù)制,無法對一系列句子進(jìn)行整合,無法對段落中說了什么和沒說什么進(jìn)行事實(shí)重建。如果你能看懂我們的話,那你就是人,而不是機(jī)器?;蛟S有一天,你可以讓Alexa將《華爾街日報(bào)》與《華盛頓郵報(bào)》對總統(tǒng)的報(bào)道進(jìn)行比較,或者讓Alexa問問你的家庭醫(yī)生,最近的體檢報(bào)告中是否漏掉了什么信息。但就目前而言,這還只是幻想。還是繼續(xù)跟Alexa聊聊天氣吧。

我們所擁有的就是一個(gè)虛擬助手的大雜燴,通常很有用,但永遠(yuǎn)都做不到完全可靠——沒有一個(gè)能做我們?nèi)祟愖x書時(shí)所做的事情。無論我們曾經(jīng)懷著多么遠(yuǎn)大的理想和目標(biāo),現(xiàn)實(shí)情況就是,AI出現(xiàn)已經(jīng)60多年了,從功能上講計(jì)算機(jī)依然與文盲無異。

計(jì)算機(jī)不會閱讀的三大原因

深度學(xué)習(xí)解決不了這個(gè)問題,與其緊密相關(guān)的“端到端”學(xué)習(xí)也解決不了這個(gè)問題。在“端到端”學(xué)習(xí)中,研究者訓(xùn)練AI將輸入直接轉(zhuǎn)換為輸出,無須通過任何中間子系統(tǒng)。舉例來說,傳統(tǒng)的駕駛方法將整體分解成感知、預(yù)測和決策等子系統(tǒng)(也許在某些子系統(tǒng)中利用深度學(xué)習(xí)作為其中的一個(gè)手段),而端到端的汽車駕駛系統(tǒng)則不經(jīng)過子系統(tǒng),是將攝像頭圖像作為輸入,并將加速或轉(zhuǎn)向等調(diào)整動作返回作為輸出,沒有中間子系統(tǒng)來確定視野中有哪些物體位于什么地方,如何移動,其他司機(jī)可能會做什么、不可能做什么,等等。

端到端系統(tǒng)發(fā)揮的作用有可能極為有效,而且比更加結(jié)構(gòu)化的替代方案更容易實(shí)現(xiàn)。端到端系統(tǒng)需要的人力投入也相對較少。有時(shí),這就是最好的解決方案。正如《紐約時(shí)報(bào)》關(guān)于谷歌翻譯的文章所說,端到端深度學(xué)習(xí)系統(tǒng)已經(jīng)極大提高了機(jī)器翻譯的技術(shù)水平,取代了以前的方法?,F(xiàn)在,如果你想做一個(gè)英法互譯的程序,那么首先就要收集一個(gè)規(guī)模巨大的英法雙語對照的語料庫,比如法律規(guī)定加拿大議會的議事錄必須同時(shí)以英法雙語出版,這就是很好的語料。從此類數(shù)據(jù)中,谷歌翻譯可以自動學(xué)習(xí)英語單詞短語與法語對應(yīng)詞之間的相互關(guān)系,而無須事先掌握關(guān)于法語或英語的知識,也不需要事先了解法語語法的復(fù)雜性。即便是我們這樣的懷疑論者也為此而贊嘆不已。

問題是,一個(gè)藥方治不了所有的病。事實(shí)證明,端到端的方法非常適合機(jī)器翻譯,一部分原因在于可以隨時(shí)獲得大量相關(guān)數(shù)據(jù),還有一部分原因在于,幾乎所有英語單詞和法語單詞之間都存在或多或少的清晰對應(yīng)關(guān)系。絕大多數(shù)情況下,你可以在英法詞典中找到精確對應(yīng)的法語單詞,而且兩種語言中單詞順序之間的關(guān)系遵循相當(dāng)標(biāo)準(zhǔn)的模式。但關(guān)于語言理解的許多其他方面都不太適用端到端方法。

比如屬于開放式場景的回答問題就不太適用,一部分原因在于正確答案中所使用的單詞可能與文本中的單詞并沒有明顯的關(guān)系,而且,我們也找不到規(guī)??氨扔⒎p語議事錄文件的問答數(shù)據(jù)庫。即使有這樣一個(gè)數(shù)據(jù)庫,由于各種問題和答案的潛在變化空間極為龐大,無論怎樣的數(shù)據(jù)庫都只能覆蓋全部可能性之中的一小部分。如前所述,這就給深度學(xué)習(xí)帶來了嚴(yán)重的問題:深度學(xué)習(xí)在應(yīng)用場景中偏離其訓(xùn)練集越遠(yuǎn),遇到的麻煩就會越多。

而且說實(shí)話,即使在機(jī)器翻譯中,端到端方法也有局限性。它們通常(雖然并不總是)能夠很好地傳達(dá)要點(diǎn),但單詞和短語的匹配有時(shí)還不夠。當(dāng)正確的翻譯取決于更深層次的理解時(shí),系統(tǒng)便無法招架。如果你讓谷歌翻譯一個(gè)法語句子“Je mange un avocat pour le dejeuner”,正確的意思是“我午餐吃了一個(gè)鱷梨”,但你得到的翻譯是“我午餐吃了一個(gè)律師”,法語單詞avocat有“鱷梨”和“律師”兩個(gè)意思。而且因?yàn)閷懧蓭煹奈恼卤葘戺{梨的文章要多(尤其是在加拿大議會的議事錄上),所以谷歌翻譯從統(tǒng)計(jì)角度出發(fā)自動選擇了那個(gè)更為常見的意思,而付出了違背常識的代價(jià)。

侯世達(dá)(Douglas Hofstadter)在《大西洋月刊》上發(fā)表的一篇精彩文章中,生動地描述了谷歌翻譯的局限性:

我們?nèi)祟悓Ψ蚱?、房子、個(gè)人財(cái)產(chǎn)、驕傲、競爭、嫉妒、隱私等許多無形之物了如指掌,并由此產(chǎn)生一些看似古怪的行為,比如一對已婚夫婦在毛巾上繡著“他”和“她”。谷歌翻譯并不了解這種情形。谷歌翻譯對所有的情形都一無所知。它唯一熟悉的就是由字母組成的單詞以及由單詞串起來的句子。它唯一擅長的就是關(guān)于文本片段的超高速處理,而不是思考、想象、記憶或理解。它甚至不知道單詞代表的是什么東西。

雖然科技的進(jìn)步有目共睹,但對于我們來說,世界上絕大部分文字知識依然無法獲取,就算是以數(shù)字化的在線形式存在也改變不了這樣的現(xiàn)實(shí),因?yàn)檫@些知識是以機(jī)器無法理解的形式存在的。電子醫(yī)療記錄中充滿了所謂的“非結(jié)構(gòu)化文本”,比如病歷、電子郵件、新聞文章和word文檔等,無法整齊排列在表格之中。而真正的機(jī)器閱讀系統(tǒng)將能夠深入到所有這些內(nèi)容之內(nèi),從病歷中搜尋線索,再從血液檢測和入院記錄中捕捉到重要信息。但這一問題遠(yuǎn)遠(yuǎn)超出了目前AI的能力所及,很多病歷從未得到過細(xì)致閱讀。舉例來說,人們正在開發(fā)用于放射醫(yī)療的AI工具。這些工具能夠讀取圖像,對腫瘤與健康組織進(jìn)行區(qū)分。但是,目前還沒有辦法對真正的放射科醫(yī)生所做的另一部分工作進(jìn)行自動化,這部分工作,就是將圖像與病人的病史相聯(lián)系。

在大量擁有潛在商業(yè)價(jià)值的AI應(yīng)用中,理解非結(jié)構(gòu)化文本的能力是一個(gè)重要的瓶頸。我們現(xiàn)在還不具備自動化閱讀法律合同、科學(xué)文章或財(cái)務(wù)報(bào)告的能力,因?yàn)樯鲜雒恳活愇募卸及薃I無法理解的文本。雖然目前的工具有能力從最晦澀的文本中提取基本信息,但通常也會遺漏掉許多內(nèi)容。市面上花樣迭出的文本匹配和鏈接計(jì)數(shù)工具的確提供了一點(diǎn)幫助,但這些工具根本無法讓我們距離擁有真正閱讀和理解能力的程序更近一步。

口語理解(也稱為對話理解)的情況也沒好到哪去。對于將口語轉(zhuǎn)換成醫(yī)學(xué)病歷的計(jì)算機(jī)醫(yī)生助手來說,面臨的挑戰(zhàn)更加艱巨―—有了這樣一個(gè)工具,醫(yī)生就可以將坐在電腦前的時(shí)間節(jié)約下來,把更多的時(shí)間用來和病人相處。來看看維克·莫哈爾醫(yī)生(Dr. Vik Moharir)發(fā)給我們的這段簡單對話:

醫(yī)生:你在體力勞動時(shí)會感到胸痛嗎?

病人:上周我在修剪院子里的草坪時(shí),感覺就像一頭大象坐在了我身上。(指著胸口)

從“人”的角度來看,醫(yī)生問題的答案顯然是“是”。修剪草坪屬于體力勞動的范疇,而且我們能推斷出病人感覺到了痛苦,因?yàn)槲覀冎来笙蠛苤?,而被重物壓到是很痛苦的。我們還能自動推斷出,鑒于一頭真正的大象可能造成的巨大傷害,“感覺”這個(gè)詞在這里是個(gè)比喻,不能從字面意義去理解。而從“機(jī)器”的角度來看,除非之前有過很多關(guān)于大象的具體討論,否則機(jī)器很可能認(rèn)為這只是關(guān)于大型哺乳動物和庭院雜務(wù)的無意義閑扯。

我們是怎么陷入這一灘渾水之中的呢?

計(jì)算機(jī)不會閱讀的第一個(gè)原因是不會建立認(rèn)知模型。

深度學(xué)習(xí)在學(xué)習(xí)相關(guān)性時(shí)非常有效,比如圖像、聲音和標(biāo)簽之間的相關(guān)性。但是,當(dāng)涉及理解客體與其組成部分之間的關(guān)系時(shí),比如句子與單詞和短語的關(guān)系,深度學(xué)習(xí)就犯了難。為什么?因?yàn)樯疃葘W(xué)習(xí)缺少語言學(xué)家所說的“組合性”,也就是從復(fù)雜句子各個(gè)成分的意義來構(gòu)建其整體意義的途徑。舉例來說,在這句“月亮離地球380000千米”中,“月亮”這個(gè)詞意味著一個(gè)特定的天體,而“地球”則意味著另一個(gè)天體,千米意味著距離的單位,“380000”表示一個(gè)數(shù)字,鑒于漢語中短語和句子的特定組合結(jié)構(gòu),“380000千米”意味著一個(gè)特定的長度,而“月亮離地球380000千米”這句話,就是為了說明兩個(gè)天體之間的距離是這個(gè)特定的長度。

令人驚訝的是,深度學(xué)習(xí)并沒有處理組合性的直接方法,有的只是浩如煙海的孤立特征,而其間并不存在任何結(jié)構(gòu)。深度學(xué)習(xí)可以知道狗有尾巴和腿,但并不知道尾巴和腿與狗的生命周期有什么關(guān)系。深度學(xué)習(xí)并不知道狗是由一個(gè)頭、一條尾巴、四條腿組成的動物,甚至不知道動物是什么,不知道頭是什么,更不知道青蛙、狗和人的頭在概念上有所不同,不知道這些頭在細(xì)節(jié)上存在差異,但與其所在的軀體都保持著同樣的關(guān)系。深度學(xué)習(xí)也不能認(rèn)識到,像“月亮離地球380000千米”這樣的句子,其中包含了關(guān)于兩個(gè)天體和一個(gè)距離長度的短語。

再舉個(gè)例子,我們讓谷歌翻譯將“The electrician whom we called to fix the telephone works on Sundays”(我們叫來修理電話的那個(gè)電工在星期天上班)這句話翻譯成法語,得到的答案是“L’électricien que nous avondes appelé pour réparer le téléphone fonctionne le dimanche”。如果你懂法語,就能看出來這個(gè)翻譯不太對。特別需要指出的是,work(上班)這個(gè)詞在法語中有兩種翻譯:travaille意為“工作”,fonctionne意為“正常運(yùn)轉(zhuǎn)”。谷歌使用了fonctionne這個(gè)詞,而不是travaille,和我們的理解有所不同。“星期天上班”在語境中指的是電工,如果你說到一個(gè)正在工作的人,你應(yīng)該使用動詞travaille(不定式:travailler)。從語法上講,此處動詞“work”(上班)的主語是電工,而不是電話。句子的整體意義是各個(gè)成分組合在一起所表達(dá)出來的,而谷歌并沒有真正理解這一點(diǎn)。谷歌翻譯在許多情況下取得了成功,而這些成功讓我們高估了系統(tǒng)所知的范圍,但事實(shí)證明,谷歌翻譯的確缺乏深度。由此我們也能看出關(guān)于AI的錯覺與現(xiàn)實(shí)之間的距離。

還有一個(gè)與此相關(guān)的重要問題是,深度學(xué)習(xí)并不具備整合背景知識的好辦法,這一點(diǎn)我們在前面的第3章中也有提到。如果要學(xué)習(xí)在圖片和標(biāo)簽之間建立聯(lián)系,怎么做到的并不重要,只要能給出正確的結(jié)果,就沒人會關(guān)心系統(tǒng)的內(nèi)部細(xì)節(jié),因?yàn)樽畛踉O(shè)定的目標(biāo)就是為給定的圖像匹配正確的標(biāo)簽,這一任務(wù)與我們所了解的絕大部分常識都搭不上關(guān)系。而語言遠(yuǎn)非如此。事實(shí)上,我們看到或聽到的每一句話,都要求我們在大量的背景知識的基礎(chǔ)之上推斷出這些背景知識與所讀內(nèi)容之間的相關(guān)性。深度學(xué)習(xí)缺乏表達(dá)這類知識的直接方法,更不可能在理解句子的過程中以背景知識為基礎(chǔ)進(jìn)行推理。

最后,深度學(xué)習(xí)是靜態(tài)地將輸入匹配到標(biāo)簽,比如把貓的圖片匹配到貓的標(biāo)簽,但閱讀是一個(gè)動態(tài)的過程。當(dāng)你利用統(tǒng)計(jì)方法對故事開篇的文字進(jìn)行翻譯,將“Je mange une pomme”翻譯成“我吃一個(gè)蘋果”,你不需要知道這兩句話的意思,只要你能根據(jù)之前的雙語語料庫識別出“je”和“我”相匹配,“mange”和“吃”相匹配,“une”和“一個(gè)”相匹配,“pomme”和“蘋果”相匹配。

許多時(shí)候,機(jī)器翻譯程序可以給出一些有參考價(jià)值的東西,但一次只翻譯一個(gè)句子,并不能理解整篇文章的意思。

當(dāng)你在閱讀故事或文章時(shí),你做的是與機(jī)器完全不同的事情。你的目標(biāo)不是去構(gòu)造統(tǒng)計(jì)學(xué)上的合理匹配,而是去重建一個(gè)作家用文字與你分享的世界。當(dāng)你讀到阿曼佐的故事時(shí),首先會發(fā)現(xiàn)故事包含三個(gè)主要人物:阿曼佐、他的父親、湯普森先生。隨后你會對這些人物的細(xì)節(jié)進(jìn)行填充,比如阿曼佐是個(gè)男孩,他的父親是個(gè)成年人等。你還會對一些事件的發(fā)生進(jìn)行把握,比如阿曼佐發(fā)現(xiàn)了一個(gè)錢包,阿曼佐問湯普森先生這個(gè)錢包是不是他的等。同樣,當(dāng)你每次走進(jìn)房間,每次去看電影或讀故事時(shí),都會無意識地做類似的事情。你會判斷此處有哪些實(shí)體,它們之間的關(guān)系是什么。

用認(rèn)知心理學(xué)的話來講,你在閱讀文本時(shí)所做的,就是建立一個(gè)關(guān)于文本表達(dá)意義的認(rèn)知模型。這可以很簡單,比如對丹尼爾·卡尼曼(Daniel Kahneman)和已故的安妮·特里斯曼(Anne Treisman)所講的“對象文件”進(jìn)行編譯(對象文件是關(guān)于個(gè)體對象及其屬性的記錄);也可以很復(fù)雜,比如對復(fù)雜場景的透徹理解。

舉例來說,當(dāng)你讀《農(nóng)莊男孩》時(shí),會逐步在腦海中對故事中所有的人物、東西和事件及其之間的關(guān)系建立起形象:阿曼佐、錢包和湯普森先生,阿曼佐與湯普森先生對話的事件,湯普森先生大喊大叫、拍打口袋,湯普森先生從阿曼佐手中搶過錢包,等等。只有在你讀過文本并構(gòu)建起認(rèn)知模型之后,你才有能力完成與這段故事有關(guān)的任務(wù),包括回答相關(guān)問題,將段落翻譯成俄語,總結(jié),模仿,演繹,解釋,或者僅僅是在腦海中留下記憶。

谷歌翻譯是狹義AI的典型代表,回避了認(rèn)知模型的構(gòu)建與使用的全過程。谷歌翻譯從不需要對事件進(jìn)行推理或跟進(jìn)事件的進(jìn)展。在其擅長的領(lǐng)域,谷歌翻譯做得還算不錯,但其擅長的領(lǐng)域只涵蓋了閱讀的極小一部分。谷歌翻譯從來不會為故事建立認(rèn)知模型,因?yàn)樗霾坏?。你不能向深度學(xué)習(xí)提問“如果湯普森先生摸了摸他的口袋,發(fā)現(xiàn)在放錢包的地方有一個(gè)鼓包,那么會發(fā)生什么”,因?yàn)檫@種問題根本不屬于深度學(xué)習(xí)范式中應(yīng)有的部分。

統(tǒng)計(jì)數(shù)字不能代替對現(xiàn)實(shí)世界的理解。問題不僅僅是偶爾出現(xiàn)隨機(jī)誤差而已,而是在目前翻譯工具所使用的統(tǒng)計(jì)分析與真正的閱讀理解所需的認(rèn)知模型構(gòu)建之間存在本質(zhì)上的不匹配。

計(jì)算機(jī)不會閱讀的第二個(gè)原因是不理解“不”的含義。

深度學(xué)習(xí)面臨的一個(gè)令人意想不到的難題,就是對“不”這個(gè)詞的理解,而經(jīng)典AI方法則不會遇到同樣的問題。還記得Siri在遇到“找一家不是麥當(dāng)勞的快餐店”這個(gè)指令時(shí)給出的錯誤回復(fù)嗎?提出這個(gè)問題的人,大概想要得到一個(gè)類似“榆樹街321號的漢堡王,緬因街57號的溫蒂漢堡,以及春街523號的IHOP”這樣的答案。但是,溫蒂漢堡、漢堡王或IHOP并沒有與“不”這個(gè)詞聯(lián)系在一起的特征,而且人們也不會特別頻繁地將這些餐廳稱作“不是麥當(dāng)勞”。所以冰冷的統(tǒng)計(jì)數(shù)據(jù)并不能將這些餐廳與“不是麥當(dāng)勞”聯(lián)系起來,盡管同樣的方法可以將“國王”與“王后”聯(lián)系起來。人們可以想出一些統(tǒng)計(jì)技巧來解決識別餐廳這一特定問題,但是想要對所有涉及“不”字的場景進(jìn)行全面處理,則遠(yuǎn)遠(yuǎn)超出了深度學(xué)習(xí)的現(xiàn)有能力。

你真正需要的,是一套傳統(tǒng)的曾用于構(gòu)建數(shù)據(jù)庫和經(jīng)典AI的計(jì)算操作方法:構(gòu)建一個(gè)列表,比如某個(gè)位置附近的快餐店,然后排除屬于另一個(gè)列表的元素,比如各家麥當(dāng)勞特許經(jīng)營店的列表。

但深度學(xué)習(xí)的構(gòu)建原理從最一開始就避開了這類計(jì)算。列表在計(jì)算機(jī)程序中是最基本、最普遍的存在,已有50多年的歷史(第一個(gè)主要的AI編程語言LISP就是圍繞這一基礎(chǔ)構(gòu)建起來的),卻完全被深度學(xué)習(xí)排除在外。于是,要讓深度學(xué)習(xí)理解一個(gè)包含“不”字的查詢,就如同要將方釘打入圓孔一樣困難。

計(jì)算機(jī)不會閱讀的第三個(gè)原因是無法應(yīng)對模糊性。

人類語言充滿了模棱兩可的描述。許多單詞都有多種含義:作為動詞的work既有工作的意思,也有發(fā)揮作用的意思;作為名詞的bat既是一種會飛的哺乳動物,也是棒球運(yùn)動中使用的木棒。這些還算相對能說清楚的。若想將in或者take等詞匯的全部不同意義都一一列舉出來,能寫滿一部詞典。事實(shí)上,除了非常專業(yè)的詞匯外,大多數(shù)詞匯都有多重含義。而短語的語法結(jié)構(gòu)也不甚清晰?!癙eople can fish”這句話,是指人們可以去釣魚,還是說人們把沙丁魚和金槍魚之類的魚裝進(jìn)罐頭里,就像在約翰·斯坦貝克(John Steinbeck)的小說《罐頭廠街》(Cannery Row)里寫的那樣?代詞之類的詞常常會引出更多的歧義。如果你說,薩姆抱不動哈利是因?yàn)樗亓?,那么從原則上講,“他”既可以是薩姆,也可以是哈利。

我們?nèi)祟愖x者的神奇之處就在于,99%的時(shí)候甚至都注意不到這些不清晰的地方。我們不會感到困惑,而是會在無意識的情況下,迅速地、毫不費(fèi)力地找到正確的解釋方法―—如果存在正確解釋的話。

假設(shè)你聽到這樣一句話:Elsie tried to reach her aunt on the phone,but she didn’t answer。雖然這句話在邏輯上模棱兩可,但意思卻很清楚。在你的意識里,根本不會有所疑慮,去想tried在這里是不是指法庭訴訟,或reach是否意味著親身到達(dá)目的地,或on the phone是不是在說阿姨站在電話上面搖晃著保持平衡,或者短語she didn’t answer中的單詞she是否指的是埃爾茜(Elsie)本人。相反,你立刻就會把注意力集中在正確的解釋上:埃爾茜想通過打電話聯(lián)系阿姨,但阿姨沒有接。

現(xiàn)在試一試用機(jī)器來實(shí)現(xiàn)上述所有這些能力。在某些情況下,簡單的統(tǒng)計(jì)就能發(fā)揮作用。tried這個(gè)詞表達(dá)“嘗試”這個(gè)意思的次數(shù)要比表達(dá)“提起訴訟”的次數(shù)多得多。on the phone這個(gè)短語表達(dá)“用電話進(jìn)行交流”這個(gè)意思的頻率也要比表達(dá)“坐在電話上”的頻率高,即便會存在例外情況。當(dāng)動詞reach后面跟著一個(gè)人,而句子附近能找到單詞phone時(shí),reach這個(gè)詞的意思很可能是“成功實(shí)現(xiàn)了溝通”。

但在很多情況下,統(tǒng)計(jì)方法并不能幫你得到正確的答案。如果不能真正理解發(fā)生了什么,是沒有辦法解決模糊性這個(gè)問題的。在“Elsie tried to reach her aunt on the phone, but she didn’t answer”這句話中,最重要的是背景知識與推理的配合。背景知識能讓讀者一目了然地知道埃爾茜不可能接她自己打的電話。通過邏輯分析,你知道she肯定指的是她的阿姨。學(xué)校里沒人教我們?nèi)绾芜M(jìn)行這類推理,因?yàn)槲覀儽灸芫椭缿?yīng)該怎么做。從我們最初開始對這個(gè)世界進(jìn)行理解時(shí),這種推理能力就自然而然地形成了。而在這類問題面前,深度學(xué)習(xí)完全無從下手。

常識很重要

遺憾的是,到目前為止,也沒人找到真正有效的替代思路。經(jīng)典AI技術(shù),也就是在深度學(xué)習(xí)流行起來之前比較常見的方法,在組合性方面有更好的表現(xiàn),也是構(gòu)建認(rèn)知模型的有用工具,但經(jīng)典AI方法不善于從數(shù)據(jù)中學(xué)習(xí),目前在這方面根本不能與深度學(xué)習(xí)相比,而且經(jīng)典方法要對語言進(jìn)行人工編碼,實(shí)在太過復(fù)雜煩瑣。經(jīng)典AI系統(tǒng)通常使用模板,例如,模板[位置一離位置二有距離]可以與“月球離地球有380000千米”這句話進(jìn)行匹配,被用來識別指明兩個(gè)位置之間距離的句子。但是,每個(gè)模板都必須通過人工進(jìn)行編碼,每次遇到一個(gè)與以往不同的新句子時(shí),比如,“月球位于地球約380000千米開外”,或者“月球在380000千米之外圍繞地球沿軌道運(yùn)轉(zhuǎn)”,系統(tǒng)就會無所適從。而且,僅靠模板本身也很難實(shí)現(xiàn)關(guān)于世界的知識與語言知識的結(jié)合,從而難以解決語言模糊性的問題。

目前,自然語言理解領(lǐng)域落于兩種不同的思路之間:一種是深度學(xué)習(xí)。深度學(xué)習(xí)非常善于學(xué)習(xí),但在組合性和認(rèn)知模型構(gòu)建方面很弱。另一種是經(jīng)典AI。經(jīng)典AI將組合性和認(rèn)知模型的構(gòu)建囊括了進(jìn)來,但在學(xué)習(xí)方面表現(xiàn)平平。

而兩者都忽略了我們在本章中始終強(qiáng)調(diào)的主要內(nèi)容:常識。

除非你非常了解世界是怎么運(yùn)轉(zhuǎn)的,了解人物、地點(diǎn)、物體及其彼此之間的相互作用,否則根本無法為復(fù)雜文本建立可靠的認(rèn)知模型。如果沒有常識,你讀到的絕大多數(shù)內(nèi)容都將毫無意義。計(jì)算機(jī)之所以做不到有效閱讀,真正原因就在于它們對世界的運(yùn)行方式缺乏基本理解。

可惜,掌握常識這件事遠(yuǎn)比人們想象的要難上許多。我們隨后還會了解到,讓機(jī)器獲得常識的這一需求,也遠(yuǎn)比人們想象的要更加普遍。如果說常識對語言領(lǐng)域來說是個(gè)不容忽視的問題,那么,在機(jī)器人領(lǐng)域則更為緊迫。

作者簡介:

蓋瑞·馬庫斯(Gary Marcus),新硅谷機(jī)器人創(chuàng)業(yè)公司AI首席執(zhí)行官兼創(chuàng)始人。機(jī)器學(xué)習(xí)公司“幾何智能”首席執(zhí)行官兼創(chuàng)始人,該公司于2016年被優(yōu)步收購,隨后馬庫斯在優(yōu)步創(chuàng)立了人工智能實(shí)驗(yàn)室。紐約大學(xué)心理學(xué)和神經(jīng)科學(xué)教授。研究方向跨越人類和動物的行為,涉及神經(jīng)科學(xué)、心理學(xué)、人工智能等多個(gè)領(lǐng)域。1994年于麻省理工學(xué)院博士畢業(yè),師從心理學(xué)大師史蒂芬·平克。

歐內(nèi)斯特·戴維斯(Ernest Davis),紐約大學(xué)柯朗數(shù)學(xué)科學(xué)研究所計(jì)算機(jī)科學(xué)教授,人工智能領(lǐng)域科學(xué)家。

本文經(jīng)授權(quán)節(jié)選自《如何創(chuàng)造可信的AI》   作者:[美] 蓋瑞·馬庫斯 / [美] 歐內(nèi)斯特·戴維斯   出版社:浙江教育出版社   原作名:Rebooting AI: Building Artificial Intelligence We Can Trust   譯者:龍志勇   出版年:2020-5-31

本文來自微信公眾號:騰訊研究院 (ID:cyberlawrc),作者:蓋瑞·馬庫斯、歐內(nèi)斯特·戴維斯,編譯:龍志勇

標(biāo)簽:

返回頂部
偷拍欧美日韩另类图片| 黑鸡巴肏少妇逼视频| 亚洲无码专区中文字幕专区| 五月天色婷婷狠狠爱| 欧美日韩综合精品无人区| 国产成人91色精品免费看片| 欧美成人短视频在线播放| 久久久亚洲熟女一区二区| 一区二区三区四区 在线播放| 久久av色噜噜ai换脸| 国产成人在线观看视频播放| 日日夜夜免费视频精品| 亚洲第一区av中文字幕| 九九九九九久久久国产| 五月天色婷婷狠狠爱| 国产乱码有码一区二区三区| av天堂hezyo| 2021国产剧情麻豆| 性色蜜桃臀x88av天美传媒| 亚洲美女a级黄色在线播放| 亚洲国产综合久久精品| 天天操天天搞天天操| av一区二区三区四区五区在线 | 三区美女视频在线观看| 久久久视频在线播放| 精品欧美黑人一区二区三区| 91亚洲精品久久蜜桃| 38av一区二区三区| 中文字幕麻绳捆绑的人妻| 大屁股熟女一区二区视频 | av 资源在线播放| 亚洲午夜国产末满十八岁勿进网站| 亚洲一区二区三区国产精品电影| 亚洲中文字幕在线av| 亚洲成a人77777| 亚洲美女色www色| 天天日 天天舔 天天射| 99久久国产精品免费热| 亚洲成人五月婷婷久久综合| 九九九九九久久久国产 | av在线免费在线观看| 夜夜操夜夜爱夜夜摸| 一区二区三区不卡免费视频网站| 国产精品美女免费视频观看 | 亚洲av手机免费在线| 69精品互换人妻4p| 无码人妻丰满熟妇区五路| 9久re热视频在线精品| 啊~插得好快别揉我胸了视频| 97人妻av人人澡人人爽| 9久re热视频在线精品 | 第一福利视频在线观看| 亚洲成人三级黄色片| 欧美日韩精品aaa| 午夜国产免费视频亚洲| 天天曰天天摸天天爽| 2019年中文字幕在线播放视频| 最新激情中文字幕视频| 99久久99九九九99九| 国产精品性感美女视频| 黄色av日韩在线观看| 亚洲中文字幕无线乱码人妻精品| 亚洲国产精品一区二区第二页| 欧美一级aaaaaaa片| av在线中文字幕在线| 少妇熟女天堂网av| 夜夜操天天干夜夜操| 不卡高清一区二区三区| 91久久久精品成人国产| 欧美亚洲国产一区二区| 欧美成人一二三在线网| 69国产精品成人aaaaa片| 亚洲欧美国产人成在线| 日韩女同与成人用品电影免费看| 午夜福利国产精品久久久久| 绿巨人浩克在线视频观看| 欧美日韩成人高清中文网| 在线免费观看视频18| 亚洲国产精品自拍偷拍视频在线| xxxx69在线观看视频| 亚洲精品国产99999| 亚洲国产精品久久久久久无码| 中文字幕在线观看av观看| 夫妻黄色一级性生活片| 欧美日本国产一区二区| 日本成人福利电影网| 可在线免费观看av| 超碰在线免费观看视频97| 亚洲一区二区三区无码在线| 老司国产精品视频免费观看| 68视频在线免费观看| 自拍偷拍亚洲综合第一页| 天天日天天亲天天操| 99久久久久久亚洲精品免费| 大香焦一道本一区二区三区| 国产三级自拍视频在线观看网站| 上床啪啪啪免费视频| 2018中文字字幕人妻| 日韩激情文学在线视频| 亚成区一区二区人妻熟女| 内地精品毛片在线观看| 日本欧美视频在线免费| 亚洲av毛片在在线播放| 国产福利一区二区三区在线观看| 天天碰天天摸天天搞| 午夜福利午夜福利影院| 三区美女视频在线观看| 人人妻人人爽人人摸| 欧美日本在线免费视频| 久久99精品久久久久久三级| av毛片在线观看网址| 国产白丝一区二区三区av| 国产激情视频在线观看的| 中文字幕丰满子伦无码专区| 精品免费一区二区三区四区视频| 日韩一级视频一区二区三区| 国产精品亚洲精品亚洲| 女同大尺度视频网站在线观看| 夫妻黄色一级性生活片| 最新国产精品综合网高清| 97精品久久久久久无码人妻| 69xx精品久久久久| 国产成人在线观看hd| 亚洲熟女一区二区六区| 顶级欧美色妇4khd| 在线观看免费啪啪啪| 日韩A级毛片免费视频| 国产熟女五十路一区二区三区 | 熟妇精品午夜久久久久| 91系列视频在线播放| 鸡巴插进美女的嫩小穴视频| 青青在线免费手机播放视频| 狂操鸡巴小骚逼视频免费观看| 午夜久久久久欠久久久久| 国产女人18毛片水真多精选| 视频自拍偷拍视频自拍| 亚洲激情噜噜噜久久久| 亚洲免费午夜污福利| 女人的天堂av在线网| 亚洲熟女少妇中文字幕系列| 不卡视频在线 欧美日韩| 日韩女同与成人用品电影免费看| 夜色17s精品人妻熟女av| 青青操久久综合激情| 中文字幕免费啪啪啪| 91精品国产91久久久久久密臀| 日日躁夜夜躁狠狠操| 天天干天天日天天弄| 黄在线看片免费人成视频| 色网站在线观看免费| 午夜夫妻性生活视频| 宅男噜噜噜66国产在线观看| 91中文字幕视频网站| 五月的婷婷综合视频| —区二区三区女厕偷拍| 人妻激情偷乱一区二区三区av| 久久精品久久久久观看99水蜜桃| 精品欧美黑人一区二区三区| 性色蜜桃臀x88av天美传媒| 一区二区在线观看视频网站| 女同大尺度视频网站在线观看| 欧美强奸视频在线观看 | 老司机伊人99久久精品| 中文字幕中文字幕在线中…一区 | 50熟妇一区二区三区| 天天爱天天日天天爽| 国产福利小视频在线观看网站| 亚洲av综合av一去二区三区| 天天操天天舔天天做| 东京热日韩av影片| 色狠狠色综合久久久绯色| 中日韩又粗又硬又大精品| 3344永久在线观看视频下载| 国产精品午夜无码AV体验区| 女生抠逼自慰啊啊啊啊啊啊啊下载| 美女妩媚午夜诱惑网站| 看女人大BB群伦交| 青青青青午夜手机国产视频| 欧美性受黑人猛交裸体视频| 在线免费观看欧美小视频| 天天干夜夜撸天天操| 不卡视频在线 欧美日韩| 精品日本少妇久久久| 51精品视频在线免费观看| 麻豆午夜激情在线观看| 免费中文字幕a级激情| 干逼又爽又黄又免费的视频| av 一区二区三区 熟女| 国产肥胖熟女又色又爽免费视频| 亚洲熟妇在线视频观看| 欧美啪啪一区二区三区| 日本福利片在线播放| 精品国产污污污免费入口| 我爱搞在线观看视频| 日本福利视频网站导航| 久久综合狠狠综合久久综| 欧美熟女xx00视频| 中文字幕在线免费观看成人| 国产 少妇 一区二区| 亚洲黄色免费在线观看网站| 视频免费在线观看网站| 大秀成年人国产精品视频 | 日韩黄色在线观看网站上| 欧美色区国产日韩亚洲区| 欧洲精品在线免费观看| 亚洲熟女在线免费观看| 制服丝袜中文字幕熟女人妻| 亚洲宅男噜噜噜66在线观看| 日韩最近中文在线观看| 日韩少妇免费在线播放| 川上优所有中文字幕在线| 人妻免费视频黄片在线视频| 日本不卡 中文字幕| 91精品夜夜夜一区二区| 亚洲中文字幕无线乱码人妻精品| 成人大片男人的天堂| 午夜福利在线不卡视频| 91大神在线免费观看视频| 91精品91久久久久| 老鸭窝在线毛片观看免费播放 | 亚洲国产精品自产拍在线观看| 亚洲成人三级黄色片| 少妇被粗大的猛进69视频| 免费在线观看亚洲福利| 夜色17s精品人妻熟女av| 久久久国产精品免费视频网| 在线观看中文字幕少妇av| 人妻少妇的va视频| 亚洲制服丝袜资源网| 国产亚洲综合5388| 国产福利一区二区三区在线观看| 最近最新最好看的中文字幕| 国际精品熟女一区二区| 亚洲男人天堂最新网址大全| 亚洲中文字幕无线乱码人妻精品| 50熟妇一区二区三区| a级片特黄免费看| 美女福利视频一区二区三区四区| 99999久久久精品| 一区二区三区四区视频精品免费 | 欧美一级特黄大片在线| 午夜国产成人精品视频观看| 熟妇高潮久久久久久久| 精品国模一区二区三区欧美| 中文字幕免费啪啪啪| 桃色成人开心激情网| 熟女人妻少妇一区二区| 大尺度av毛片在线网址| 涩涩黄片在线免费观看| 成人免费视频现网站99在线观看| 97cao在线视频| 黑人3p日本女优中出| 国产视频成人一区二区| 亚洲激情视频在线观看免费| 亚洲av三级电影在线观看| 日本熟妇乱妇熟色视频| 亚洲国产综合久久精品| 午夜92福利1000| 色噜噜噜噜色噜噜色合久一| 性色蜜桃臀x88av天美传媒| 大香蕉伊人97在线| 亚洲制服丝袜美腿在线| 综合久久伊人久久88| 九色porny91国产| 好看的日本中文字幕在线观看二区| 麻豆白洁少妇在线播放| 国产精品网站的黄色| 欧美成人一二三在线网| 在线 激情 亚洲 视频| 久久精品国产亚洲av热软件| 久久中文字幕av一区二区 | 亚洲美女露隐私av一区二区精品 | 68视频在线免费观看| 18福利视频在线观看| 中文字幕在线字幕乱码怎么设置| 亚洲欧美不卡专业视频| 60路70路日本熟妇| 成年男女免费视频网站无毒| 国产清纯一区二区在线观看| 亚洲在线观看中文字幕av| 日本人妻少妇xxxxxxx| 亚洲女人自熨在线视频| 香港日本台湾经典三级| 人妻视频网站快射视频网站| 日韩最近中文在线观看| 91九色尤物无套内射| 日韩欧美一区二区三区免费看| 干逼又爽又黄又免费的视频| 最新日韩中文字幕免费在线观看| 交换的一天中文字幕在线视频| 久久内射天天玩天天懂色| 中日韩又粗又硬又大精品| 午夜精品老牛av一区二区三区| 日本不卡视频一二三区| 亚洲综合在线视频在线播放| 午夜美女福利视频在线| 亚洲一区二区精品在线播放| 在线免费观看欧美小视频| 亚洲 自拍 激情 另类| 精久久久久久久久久久久| 色老头一区二区三区四区五区| 在线成人教育平台排名| 国产亚洲精品啪啪视频| 韩国资源视频一区二区三区 | 国产精品性感美女视频| 熟女人妻精品视频一区| 国产剧情av在线免费观看| 放荡人妻极品少妇全集| 女生抠逼自慰啊啊啊啊啊啊啊下载| 2020国产激情视频在线观看| 亚洲制服丝袜在线看| 成人精品动漫一区二区| 男女啪啪啪网站在线观看免费| 日本东京热最新中文字幕| 男人的天堂av中文字幕| 老熟女 露脸 嗷嗷叫| 大香蕉尹人在线最新| 骚穴被阴茎插免费视频| 69国产精品成人aaaaa片| 美女妩媚午夜诱惑网站| 国际日韩日韩日韩日韩日韩| 97精品视频,全部免费| 51精品视频在线免费观看| 欧美人与动欧交视频| 成人大片男人的天堂| 奇米网首页神马久久| 亚洲最大的自拍偷拍网| 伊人网国产在线播放| 黑人大巨屌操美女逼| 一区二区三区 国产日韩欧美| 国产精品久久久久精品三级18| 天天综合久久无人区| 55夜色66夜色亚洲精品| 亚洲一区二区三区国产精品电影| 国产成人在线观看hd| 伊人网国产在线播放| 99精品久久99久久久久一| 特级aaaaa黄色片| 中文字幕 中文字幕 亚洲| 女生裸体视频免费网站| 在线观看免费啪啪啪| 熟女国内精品一区二区三区| 九九六视频,这里只有精品| 亚洲人成大片在线观看| 伊人网在线免费观看| 亚洲欧洲一区二区三区在线| 污视频在线观看地址| 午夜久久久久久av五月| 国产做A爱免费视频在线观看| 91超碰国产在线观看| 欧美视频免费观看777| av 一区二区三区 熟女| 国产又粗又长又大视频| 国产欧美福利在线观看| 青青操91美女国产| 天天碰天天摸天天搞| 亚洲三级综合在线观看| 亚洲中文字幕最新地址| 日韩av水蜜桃一区二区三区| av在线免费在线观看| 松本菜奈实最新av在线| 亚洲天堂av最新在线| 国产精品igao为爱寻找激情| 69视频在线精品国自产拍| 猫咪亚洲中文在线中文字幕| 五月婷婷伊人久久中文字幕| 5d蜜桃臀女无痕裸感| 亚洲精品中文字幕手机在线免费看| 亚洲成年人精品国产| 91香蕉国产亚洲一二三区| 亚洲午夜熟女在线观看| 天天综合久久无人区 | 天天日天天亲天天操| 亚洲码av一区二区三区| 综合激情网,激情五月| 18禁男女啪啪啪无遮挡| 亚洲国产精品久久久久久无码| 中文字幕人妻一区二区视频系列| 91精品综合久久久久久五月天| 国产三级自拍视频在线观看网站 | 亚洲一区二区精品在线播放| 国产黄色主播网址大全在线播放| 女女抠逼白虎白丝袜| 亚洲精品中文字幕手机在线免费看| 亚洲黑人欧美二区三区| 91进入蜜桃臀在线播放| 欧美猛少妇色ⅹⅹⅹⅹⅹ猛叫| 日本少妇人妻凌辱在线| 快使劲弄我视频在线播放| 在线观看网站伊人网| 久久久视频在线播放| 亚洲欧洲无码一区2区无码| 在线观看免费啪啪啪| 亚洲精品乱码久久久久app | 亚洲成年人精品国产| 川上优所有中文字幕在线| 99亚偷拍自图区亚洲| 在线能看视频你懂的| 新亚洲天堂男子av| 先锋人妻啪啪中文字幕| 亚洲一区二区精品在线播放| 亭亭五月天在线观看| 人妻视频网站快射视频网站| 91精品国产成人久久久久久| 日韩国产欧美一区二区三区粉嫩| 亚洲综合一区二区三区四区| 女生抠逼自慰啊啊啊啊啊啊啊下载 | caopeng97在线观看视频| 91人妻人人爽色啊啊啊| 久久国产半精品99精品国产| 自拍丝袜国产欧美日韩| 亚洲唯美激情综合四射| 日韩男女视频网站在线观看| 91精产国品一二三产区区别网站| 50熟妇一区二区三区| 综合久久伊人久久88| 最新久久这里只有精品| av在线中文字幕在线| 9久re热视频在线精品| 国产主播诱惑毛片av| 国产成人情侣激情视频| 欧美国产精品久久久免费| 亚洲熟妇在线视频观看| 国产精品剧情av在线播放| 日本熟妇乱妇熟色视频| 日韩男女视频网站在线观看| 大香蕉伊人97在线| 日本成人福利电影网| 日韩国产欧美久久一区| 欧美日韩亚洲国产视频二区| 一区二区三区国产精华液区别大吗 | 天天操天天干加勒比久久| 91久久久久久最新网站| 青青操天堂在线观看视频| 桃色成人开心激情网| 裸露视频免费在线观看| 又爽又粗又猛又色又黄视频| 中文字幕欧美一区二区视频| 午夜国产免费视频亚洲| 亚洲宅男噜噜噜66在线观看| 91亚洲精品久久蜜桃| 熟女俱乐部jukujoclub| 高潮喷水在线视频观看| 99 re国产精品| 亚洲中文字幕最新地址| 亚洲成a人77777| 日本黄色一级电影网址| 九九六视频,这里只有精品| 国产精品网站的黄色| 午夜情色一区二区三区| 丰满少妇_区二区三区| 精品国产久久久久午夜精品av| 亚洲午夜精品一级毛片app| 久草视频在线看免费| av在线免费在线观看| 国产高清视频www夜色资源| 日韩av电影中文在线免费观看| 午夜国产成人精品视频观看| 麻豆出品视频在线观看| 久久人人爽人人爽人人av东京热| 中文字幕欧美人妻在线.| 女人高潮潮呻吟喷水网站| 二十四小时日本高清在线观看| 18在线观看免费观看| 中文字幕福利视频在线一区| 美利坚合众国av天堂| 黑人侵犯人妻森泽佳奈| 国产中年夫妇激情高潮| 精产国品一二三77777| 999精品视频免费在线观看| 2021国产剧情麻豆| 国产极品气质外围av| 4日日夜夜精品视频免费| av在线观看视频免费| 青青青在线视频观看97| 91 精品视频在线看| 国产激情一区二区视频| 中出小骚货在线观看| iga肾三级算严重吗| 国产经典精品欧美日韩| 欧美亚洲另类精品第一页| 97超碰人人爽人人做| 亚洲无人区乱码中文字幕一区| 伊人网国产在线播放| 中文字幕熟女人妻丝袜丝在线| 人妻视频网站快射视频网站| 夜色17s精品人妻熟女av| 青青操天堂在线观看视频| 国产成人综合久久婷婷| 丰满少妇人妻一区二区三区蜜桃| 日韩女同与成人用品电影免费看| 中文字幕综合网91| av人摸人人人澡人人超碰小说| 岳的大肥屁熟妇五十路| 三级欧美日韩一区二区三区| 放荡人妻极品少妇全集| 最新国产精品拍在线观看| 69精品互换人妻4p| 顶级欧美色妇xxxx| 日本亚洲午夜福利一区二区三区| 亚洲美女a级黄色在线播放| 顶级欧美色妇xxxx| 亚洲制服丝袜网站中文字幕| 欧美日韩综合精品无人区| 天天早上头和脸出汗是怎么办| a级黄片免费观看| 男插女视频大全免费| 国产极品气质外围av| 99亚偷拍自图区亚洲| 色999日韩偷自拍拍免费| 少妇熟女天堂网av| 日本国产亚洲欧美色综合| 亚洲精品激情视频在线观看 | 国产精品福利久久久久| 91色哟哟视频在线观看| yy4080黄色片| 亚洲av中文无码网站| 日本一道中文字幕99| 国产自拍偷拍在线精品| 国产男人的天堂一区| 亚洲制服丝袜资源网| 特级aaaaa黄色片| 青娱乐免费视频一二三| 男生用大肌巴操美女骚穴| 熟女一区二区视频在线| 日韩人妻一区二区三区在线观看| 色哟哟亚洲乱码国产乱码精品精| 大香蕉伊人97在线| 美女福利视频一区二区三区四区| 日韩人妻中文字幕区| 无码人妻丰满熟妇区五路| 精品人妻 色中文熟女 oo| 久久一级片三上悠亚| 日本熟妇乱妇熟色视频| 68福利精品在线视频| 亚洲天堂色综合久久| 人人妻人人爽人人摸| 99久久精品视频16| 免费高清av一区二区| 51vv精品视频在线观看| 日本有码精品一区二区三区| 五月天天堂视频在线| 亚洲欧美日韩电影一区| 日本五六十路熟女视频| 川上优所有中文字幕在线| 午夜福利片无码10000| 中文字幕国产一区在线视频| 大香蕉伊人97在线| 九九六视频,这里只有精品| 日本少妇丰满大bbb的小乳沟| 欧美日韩亚洲国产视频二区| 欧美男男在线观看视频网站| 日本五六十路熟女视频| 久久久人妻免费视频| av大尺度一区二区三区| 日本不卡视频一二三区| 成年男女免费视频网站无毒| 日本福利网站一区二区| 国产成人av在线你懂得| 久久久久高潮白浆久久| 亚洲精品国产99999| 黄色网络中文字幕日本| 成人资源中文在线观看| 中文字幕欧美人妻在线.| 欧美精品乱码99久久蜜桃免费| 欧美一区二区播放视频| 裸日本资源在线午夜| 欧美日韩一区二区三区成人影院| 亚洲国产日韩欧美一区二区三区,| 中出小骚货在线观看| 日韩女同与成人用品电影免费看| 中文字幕在线免费观看人妻| 黄色av 在线观看| 凹凸视频一区二区在线观看| av 资源在线播放| 日韩三级黄色大片在线观看| 亚洲一区二区精品三区视频| 68福利精品在线视频| 日韩久久九九精品视频| 东北老女人熟女啪啪视频| 日本少妇丰满大bbb的小乳沟| 欧美黄色性视频网站| 亚洲欧美国产人成在线| 日本电影一级人妻在线播放四区| 超碰在线观看97资源| 一区二区三区av免费天天看| 97人妻av人人澡人人爽| 五十岁熟女高潮喷水| 2021国产剧情麻豆| 一区二区三区免费版在线| 女女抠逼白虎白丝袜| 夜夜躁av麻豆男| 午夜精品秘一区二区三区| 天天综合久久无人区| 91麻豆精品国产在线| 婷婷色综合五月天视频| 国产精品久久久久精品三级18| 亚洲国产精品青青草| 性色蜜桃臀x88av天美传媒| 亚洲熟妇在线视频观看| 中文字幕丰满子伦无码专区| 国产福利三级在线观看| 亚洲自拍偷拍av在线| 久草久热这里只有精品| 青青国产95免看视频| 岳的大肥屁熟妇五十路| 午夜国产一区二区三区| 男人资源站中文字幕| 国产91免费在线观看| 精品欧美乱码久久久| 欧美 日韩 精品 中文| 国产男女无套?免费网站下载| 日本一本午夜在线播放| 亚洲人人爽人人澡起碰av| 天天干天天操天天要| 欧美黄色性视频网站| 欧美精品一区二区三区观看| 国产高清自拍偷拍在线| 99精品久久精品一区二区| 中文字幕中文字幕在线中…一区| 伊人久久综合国产精品| 激情久久在线免费观看视频| 亚洲色图日韩在线视频观看| 欧美日韩精品aaa| 青青国产95免看视频| 99精品久久99久久久久一| 汤姆提醒30秒中转进站口| 亚洲色大WWW永久网站| 日本一道中文字幕99| 欧美在线观看视频欧美| 国产肥胖熟女又色又爽免费视频| 50熟妇一区二区三区| 新亚洲天堂男子av| 国产精品黄色片大全| 日本福利片在线播放| 自拍偷拍色图亚洲天堂| 亚洲国产精品 久久久| 五月天天堂视频在线| 西野翔人妻中文字幕中字在| 高潮喷水在线视频观看| 五月婷婷伊人久久中文字幕| 中文字幕国产一区在线视频| 中文字幕在线免费观看人妻 | 日本高清有码在线视频| 日韩国产欧美久久一区| 久久免费视频ww一区| 91污污在线观看视频| 午夜国产成人精品视频观看| 欧美精品熟妇免费在线| 日韩av电影中文在线免费观看| 伊人久久综合国产精品| 在线播放 日韩 av| 天天透天天舔天天操| 亚洲一区二区偷拍女厕所| av天堂a亚洲va天堂va里番| 九九热在线精品播放| 久久精品国产亚洲av热软件| 日本少妇丰满大bbb的小乳沟| 交换的一天中文字幕在线视频| 亚洲一区二区偷拍女厕所| 最新久久这里只有精品| 男女爱爱好爽视频免费看| 日本不卡视频一二三区| 一区二区三区四区影片| 松本菜奈实最新av在线| caopeng97在线观看视频| 日韩欧美一区二区三区免费看| 国产91黑丝小视频在线观看| 后入日韩翘臀蜜桃臀美女| 二十四小时日本高清在线观看| 大片a免费观看在线视频观看| 欧美精品激情在线不卡| 欧美肥妇久久久久久| 97香蕉久久国产超碰| 97人妻av人人澡人人爽| 天堂在线中文字幕av| 污网址在线观看视频| 久久久西西gogo日本美女人体| 伊人精品久久一区二区| 中文字幕精品人妻久久久久| 天天躁狠狠躁狠狠躁性色| 国产激情免费在线视频| 中文字幕人妻一区二区视频系列| 丰满人妻熟女aⅴ一区| 精品人妻 色中文熟女 oo| 一区二区欧美 国产日韩| 91日本精产品一区二区三区| 四虎国产精品国产精品国产精品| 日本午夜福利免费在线播放| 老鸭窝在线毛片观看免费播放| 天天干夜夜操91视频网站| 丝袜美女诱惑佐佐三上| 制服丝袜中文字幕熟女人妻| 91精品国产人妻麻豆| 亚洲欧美另类丝袜另类自拍| 少妇被中出一区二区| 亚洲熟女乱一区二区精品成人| 鸡巴插进美女的嫩小穴视频| 河北全程露脸对白自拍| 亚洲av手机免费在线| 久久久精品人妻无码专区不卡| 先锋人妻啪啪中文字幕| 欧美精品999不卡| 亚洲成人av在线一区二区| 爱搞视频在线观看视频91| 97香蕉久久国产超碰| 精品欧美乱码久久久| 免费看超污视频在线观看| 99久久久久久亚洲精品免费| 乌克兰美女操逼高清内射视频| 91激情四射婷婷综合| 黑川堇人妻88av| 久久内射天天玩天天懂色| 骚穴被阴茎插免费视频| 福利视频免费在线播放| 骚穴被阴茎插免费视频| 免费在线观看视频啪啪| 99re这里是国产精品首页| 精产国品一二三产品区别97 | 久久国产精品久精国产爱| 四虎精品久久免费最新| 欧美性感美女热舞视频| 92麻豆一区二区三区| 裸露视频免费在线观看| 亚洲|久久久久久一二三区丝袜| 日本久久久久久黄色| 日本高清激情乱一区二区三区 | 2021国产剧情麻豆| 欧美大鸡吧男操女啊啊啊视频| 亚洲美女午夜激情视频在线观看| 国产天堂av不卡网| 久久视频 在线播放| 爱搞视频在线观看视频91| 国产av啊啊啊啊啊啊啊| 大香蕉伊人97在线| 在线播放 日韩 av| 欧美一级aaaaaaa片| 黄版视频在线免费观看| 日本少妇人妻中文在线| 欧美精品999不卡| 老色鬼精品视频在线观看播放| 伊人网在线免费观看| 综合久久伊人久久88 | 欧美丝袜亚洲国产日韩| 国产精品网站亚洲发布| 熟女人妻精品视频一区| 成人av中文字幕在线看| 国产91精品福利系列| 手机看片1024精品国产| 久久99久久99久久97的人| 不卡高清一区二区三区| 日韩av熟妇在线观看| 玖玖资源站在线观看亚洲| 国产一级一国产一级毛片| 亚洲一区亚洲二区成人福利| 丰满少妇人妻一区二区三区蜜桃| 精久久久久久久久久久久 | 91国产精品乱码久久久久久| 高清av在线婷一区二区色日韩| 国产精品剧情av在线播放| 中出小骚货在线观看| 久久视频 在线播放| 大尺度久久久久久久| av天堂hezyo| 中文字幕福利视频第四页| 国产黑色丝袜 在线日韩欧美| 中文字幕欧美人妻在线.| 欧美日本在线免费视频| 亚洲 偷拍 自拍 欧美| 亚洲国产日韩a在线欧美| 另类欧美激情校园春色| 桃色成人开心激情网| 青青青免费手机视频在线观看| 中文字幕观看中文字幕免费| 亚洲成人,国产精品| 亚洲免费在线不卡视频| 亚洲午夜精品视频节目| avtt中文字幕手机版| 都市激情校园春色 亚洲| 干逼又爽又黄又免费的视频| 色丁香久久激情综合网| 夜夜人人干人人爱人人操| 亚洲黄色成人一级片| 神马不卡视频在线视频| 啪啪啪网站免费在线看| 91精品国产综合99| 在线免费观看视频18| 九热精品视频在线观看| 日韩成人在线电影首页| 亚洲午夜精品一级毛片app| 中文字幕综合网91| 天天看片天天摸天天操| 亚洲自拍偷拍av在线| 2020年亚洲男人天堂网| 中字幕人妻熟女人妻a62v网| 色视频免费观看网址| 欧美日韩黄片免费在线观看| 91色乱一区二区三区| 久久精品四虎夜夜拍拍拍| 亚洲女人自熨在线视频| 女生裸体视频免费网站| 东京热男人的天堂视频| 大陆中文字幕视频在线 | 日韩欧美中文字幕老司机三分钟 | 又粗又长又硬又黄又爽| 丰满少妇人妻一区二区三区蜜桃| 亚洲欧美另类丝袜另类自拍| 搞乱在线在线观看视频| 午夜夫妻性生活视频| 亚洲一区二区精品三区视频| 老熟妇一区二区三区v∧88| 一区二区三区不卡免费视频网站 | 欧美肥妇久久久久久| 天天在线播放日韩av| 国产高清自拍偷拍在线| 午夜免费福利老司机| 92午夜免费福利视频www| 亚洲妹妹我爱你在线观看| 国产午夜在线播放视频| 色欲AV蜜桃一区二区三| 久久久久性感美女偷拍视频| 91色哟哟视频在线观看| 国产午夜羞羞一区二区三区| 在线视频国产精品欧美| 三级欧美日韩一区二区三区| 蜜乳av中文字幕一区二区| 亚洲高清一区二区三区久久| 99久久碰碰人妻国产| 日韩无码国产一区二区| 99色在线观看免费观看| 最新日韩av电影在线播放| 日韩少妇免费在线播放| 国产美女高潮精品视频| 日本香港韩国三级黄色| 91大神福利视频网| 白白色在线免费视频发布视频 | 欧美日本在线免费视频| 91中文字幕视频网站| 午夜福利片无码10000| 国产主播诱惑毛片av| 亚洲一区在线视频观看地址| 99re这里是国产精品首页| 国产男女无套?免费网站下载 | 妈妈的朋友2中文字幕在线| 涩涩黄片在线免费观看| 97视频538在线观看| 干逼又爽又黄又免费的视频| 国内销魂老女人老泬| 伊人网在线欧美日韩在线| 国产午夜在线播放视频| 麻豆国产精品777777在| 制服丝袜 中文字幕 日韩| 欧美一级特黄大片在线| 天天透天天舔天天操| 一区二区九日韩美女| 日本福利网站一区二区| 91激情四射婷婷综合| 户外露出视频在线观看| 亚洲成人自拍av在线| 精品不卡一区二区三区| 182tv精品免费在线观看| 在线免费观看视频18| 国产极品气质外围av| 日韩一区二区在线播放观看| 鸡巴在里面福利视频在线观看| 欧美老熟妇xxoo老妇| 夜色17s精品人妻熟女av| 日韩三级精品电影久久久久| 亚洲成a人片777777张柏芝| 蜜桃臀av在线一区二区| 91麻豆精品国产在线| 成熟了的熟妇毛茸茸| 熟女国内精品一区二区三区 | 日本丰满熟妇浓密多毛| 日本香港韩国三级黄色| 国产精品网站亚洲发布| 午夜国产成人精品视频观看| 午夜国产成人精品视频观看| 国产福利小视频在线观看网站| 视频自拍偷拍视频自拍| 特级aaaaa黄色片| 99999久久久精品| 不用付费特黄特色亚洲特级黄色片| 国产91黑丝小视频在线观看| av男人站在线观看| 国产熟女五十路一区二区三区| 玖辛奈18禁同人污本子| 国产成人深夜福利短视频99| 最新日韩中文字幕啪啪啪| 日本不卡视频一二三区| 亚洲成人激情在线综合| 操人妻人妻天天爽天天偷| 麻豆国产91制片厂| 最近日韩免费在线观看| 老司机免费视频福利0| 亚洲国产精品久久久久久无码| 免费中文字幕a级激情| 最新久久这里只有精品| 免费的啪啪视频软件| 人人妻人人澡人人爽97| 亚洲人精品午夜射精日韩| 国产91黑丝小视频在线观看| 亚洲一区二区在线视频观看免费| 久久亚洲国产成人精品麻豆| 成年人免费黄色av| 国产在线小视频一区二区| 东京热男人的天堂视频| 在线视频自拍第三页| 99 re国产精品| av在线男人的天堂亚洲| 免费的啪啪视频软件| 男女插鸡巴视频软件| 欧美日韩不卡视频合集| 91在线九色porny| 国产最新av在线免费观看| 欧美日韩成人高清中文网| 精品美女洗澡一区二区| 中文字幕丰满子伦无码专区| 不用付费特黄特色亚洲特级黄色片| 亚洲一区二区三区四区入口| 插鸡视频免费网站在线播放| 成人免费视频现网站99在线观看| 久久人妻诱惑我视频| 亚洲激情噜噜噜久久久| 久久热在线免费观看| 亚洲人妻系列在线视频| 东京热日韩av影片| aaaa级少妇高潮在线观看 | 五月天男人的天堂中文字幕| aaaa级少妇高潮在线观看| 55夜色66夜色亚洲精品| 大奶熟妇激情操逼逼| 欧美成人一二三在线网| av一区二区三区蜜桃| 美女av色播在线播放| 91色哟哟视频在线观看| 国产一区两区三区福利小视频| 亚洲欧美日韩中文在线观看| 岳的大肥屁熟妇五十路| 国产一区二区三区四区精| 人妻色综合aaaaaa网| 国语精品视频自产自拍| 欧美一级特黄大片做受99| 久久99嫩草99久久精品| 91系列视频在线播放| 亚洲妹妹我爱你在线观看| 亚洲熟妇在线视频观看| 有码一区二区三区四区五区| 天天天天天天天天日日日| av天堂新资源在线| 99久久99九九九99九| 国产av剧变态维修工虐杀美女| 国产91免费在线观看| 99国产精品国产精品毛片19| 亚洲午夜精品一级毛片app| 核xp工厂精品久久亚洲| 亚洲一区二区三区国产精品电影 | 亚洲成人偷拍自拍在线| 自拍偷拍亚洲综合第一页| 精品欧美黑人一区二区三区 | 69精品互换人妻4p| 亚洲中文字幕最新地址| 综合久久伊人久久88| 999久久久人妻精品一区| 综合激情网,激情五月| 亚洲午夜精品视频节目| 青青免费观看视频| 国产精品剧情在线亚洲| 开心五月综合激情婷婷| 亚洲永远av在线播放| 欧美日本在线免费视频| 大香焦一道本一区二区三区| 天天干夜夜爽狠狠操| 免费在线观看黄色小网站| 视频在线 一区二区| 人妻人妻在线视频网站| 亚洲一区二区精品三区视频| 区一区二区三免费观看视频| 三级欧美日韩一区二区三区| 亚洲午夜精品视频节目| jiee日本美女视频网站| 人妻女侠被擒受辱记| 麻豆国产91制片厂| 日韩欧美中文字幕老司机三分钟 | 久久久久久高清一区| 国产成人情侣激情视频| 4438x亚洲最大的成人| 91精品久久久久久久99蜜月| 亚洲国产电影的一区| 在线视频自拍第三页| caopeng97在线观看视频| 一区二区三区四区视频精品免费| 日韩免费黄色片在线观看| 福利在线国产小视频| 免费看一级高潮喷水片| 久久无码高清免费视频| 在线视频国产精品欧美| 凹凸视频一区二区在线观看| 黄版视频在线免费观看| 久久人妻人人草人人爽| 日韩人妻一区二区三区在线观看| 亭亭五月天在线观看| 亚洲一区二区在线激情| 99国产精品国产精品毛片19| 大屁股熟女一区二区视频| 亚洲av激情综合网| 亚洲精品国产99999| 偷拍熟女大胆免费视频| 精久久久久久久久久久久| 天天干天天操天天日天天日| 97精品人妻免费视频| 日本韩国欧美在线视频| avjpm亚洲伊人久久| 日韩国产欧美一区二区三区粉嫩| 成熟了的熟妇毛茸茸| 不卡一区二区视频在线| 亚洲国产精品自产拍在线观看| 亚洲欧美综合另类最新| 日本高清 中文字幕| 亚洲码av一区二区三区| 一区二区三区婷婷中文字幕| 午夜久久久久欠久久久久| av里面的动作是真进去吗| 国产精品免费看一区二区三区| 最新久久这里只有精品| 天天干天天色综合久久| 国产av嗯嗯啊啊av| 大香蕉在线欧美在线视频| 中文字幕在线免费观看人妻| 亚洲av综合av一去二区三区| a级黄片免费观看| 开心五月综合激情婷婷| 国产av精品一区二区三区久久| 日韩黄色在线观看网站上| 亚洲精品综合欧美精品综合| 日本福利网站一区二区| 国内精品一区二区2021在线| 欧美日本国产一区二区| 可以直接看av网站| 天天干天天操天天要| 国产熟妇色xxⅹ交白浆视频| 日本韩国福利在线播放| 最近最新欧美日韩精品| 可以直接看av网站| 国产成人在线观看hd| 91美女在线观看视频| 久久久西西gogo日本美女人体| 岛国av成人午夜高清| 国产精品成人免费电影| 天天插天天干天天狠| 精品日本少妇久久久| 亚洲午夜高清在线观看| 天天摸天天干夜夜操| 福利在线国产小视频| 天天弄天天草天天日天天| 丰满少妇人妻一区二区三区蜜桃 | 99精品久久99久久久久一| 欧美成人短视频在线播放| 天天日天天干天天日天天干天天 | 大尺度久久久久久久| 亚洲同性同志一二三专区 | 99久久99九九九99九| 婷婷色综合五月天视频| 福利视频免费在线播放| 国产 少妇 一区二区| 欧美大鸡吧男操女啊啊啊视频| 熟妇精品午夜久久久久| 性感美女极品18禁网站在线| 亚洲成人欧洲成人在线| 国产精品内射婷婷一级| 亚洲永远av在线播放| 国产极品气质外围av| 欧美vr专区日韩vr专区| 女人的天堂av在线网| 午夜精品老牛av一区二区三区| 精品一区二区三区免费毛片W| 91精品资源在线观看| 美利坚合众国av天堂| 人妻少妇的va视频| 七色福利视频在线观看| 亚av一二三在线观看| 丰满人妻熟女aⅴ一区| 蜜乳av中文字幕一区二区| 午夜精品一区二区三区不卡顿| 亚洲国产精品一区51动漫| 日本清纯中文字幕版| ysl蜜桃色7425| 日本清纯中文字幕版| 亚洲日本欧美韩国另类综合 | 久久无码高清免费视频| 亚洲成人三级黄色片| 91精品国产欧美在线| 欧美啪啪一区二区三区| 女人扒开逼让男人操| 不卡视频在线 欧美日韩| 亚洲一级熟妇丰满的女人| 国产午夜在线播放视频| 九一精品人妻一区二区三区| 夜夜操天天干夜夜操| 亚洲经典av中文字幕| 桃色成人开心激情网| 一区二区三区资源视频| 欧美第一激情综合网欧美激情| 最新免费在线观看污视频| 一区二区九日韩美女| 亚洲av中文免费在线| 成人精品动漫一区二区| 国产熟妇色xxⅹ交白浆视频| 九九六视频,这里只有精品 | 夜色福利视频免费观看| 国产91九色视频在线观看| 亚洲国产精品一区二区第二页| aaaa级少妇高潮在线观看| 免费看日韩黄视频在线观看| 天堂在线中文字幕av| 国内销魂老女人老泬| 波多野结衣在线一区别| 日本一区二区三区区别| 日本人妻熟妇丰满成熟HD系列| 18禁男女啪啪啪无遮挡| 第一福利视频在线观看| 欧美在线观看视频欧美| 久草视频在线视频在线视频| 黑吊操欧美极品美女| 网站在线观看蜜臀91| 嗯~嗯~啊啊啊~高潮了软件| 午夜亚洲国产精品中字| 黄片视频免费观看视频| 女女抠逼白虎白丝袜| 天天操天天干天天谢| 熟女国内精品一区二区三区| 天天干夜夜爽狠狠操| 日韩黄色在线观看网站上 | 中文字幕人妻一区色偷偷久久| 亚洲一区二区三区四区入口| 日韩人妻中文字幕区| 久久久久久高清一区| 亚洲中文字幕无线乱码人妻精品| 亚洲另类欧美综合久久| 熟女人妻精品视频一区| 69国产在线视频网站| 91色乱一区二区三区| 亚洲午夜精品一级毛片app| 一区二区三区四区久久久久韩日| 国产毛片特级Av片| 日韩精品视频一区二区三区在线| 婷婷一区二区三区五月丁| 国产 亚洲 欧美 自拍| 久久久久九九九九九12| 2020精品视频在线| 开心五月综合激情婷婷| 人妻在线中文视频视频| av在线播放观看h| 日韩激情亚洲国产欧美另类激情| 天天日天天干天天日天天干天天| 亚洲欧美综合另类最新| lutu玩弄人妻短视频| 伊人网在线免费观看| 亚洲午夜熟女在线观看| 人妻系列中文字幕大乳丰满人妻| 免费看一级高潮喷水片| 十八禁黄色免费污污污亚洲| 亚洲成人av在线一区二区| 亚洲精品综合欧美精品综合| 国产夫妻视频在线观看免费| 中文字字幕在线精品乱码| 红桃视频国产av在线| 国产精品乱码高清在线观看h| 2020国产激情视频在线观看| 中文字幕福利视频在线一区| 欧美强奸视频在线观看| 欧美成人少妇人妻精品| 美女网站视频久久精品| 中文字幕中文字幕在线中…一区| 亚洲少妇色小说综合| 婷婷综合缴情亚洲五月伊人| 国产漂亮白嫩美女在线图片| 天天爽天天操天天插| 911精产国品一二三产区区| 亚洲乱熟女一区二区三区影片| 日本一区二区高清av中文| 亚洲男人天堂最新网址大全| 日本韩国福利在线播放| 国产福利三级在线观看| 中文人妻av一区二区三区| 狠狠操av一区二区三区| 一区二区三区五区六区| 欧洲精品在线免费观看| 老牛影视在线一区二区三区| 5566熟女人妻人妻| 99999久久久精品| 九色porny91国产| av无限看熟女人妻另类av| 十八禁黄色免费污污污亚洲| 久久久国产精品免费视频网| 正在播放麻豆精品一区二区| 亚洲成人自拍图片网站 | 大屁股熟女一区二区视频| 欧美在线观看视频欧美| 中文字幕av人妻一区二区三区| 精品人妻在线激情视频| 青青草成人免费自拍视频| 360偷拍蜜桃臀69式| 欧美猛少妇色ⅹⅹⅹⅹⅹ猛叫| 欧美日韩国产在线中文字幕| 可在线免费观看av| 91精品一区一区三区| 久草视频在线看免费| 中文字幕免费啪啪啪| 日本免费人爱做视频在线观看不卡 | 欧美日韩亚洲tv不卡久久| 97人妻av人人澡人人爽| 中文字幕 中文字幕 亚洲| 蜜桃tv一区二区三区| 欧美极品少妇高潮喷水| 五月的婷婷综合视频| 天天摸天天舔天天操天天日| 日韩一级视频一区二区三区 | 亚洲美女a级黄色在线播放| 538欧美在线观看一区二区三区| 精久久久久久久久久久久| 国产精品蝌蚪自拍视频| 天天操天天干天天舔天天| 漂亮人妻口爆久久精品| 一区二区三区四区久久久久韩日 | av 一区二区三区 熟女| 亚洲成人,国产精品| 一区二区三区不卡免费视频网站| 免费在线观看黄色小网站| 伊人网在线观看 视频一区| 亚洲熟妇丰满多毛xxxx网站| 69精品人妻久久久久久久久久久 | 我爱搞在线观看视频| 精品精品精品精品精品污污污污| 高潮喷水一区二区三区| 精产国品一二三产品区别91| 东京热男人的天堂视频| 在线视频国产精品欧美| 超级黄肉动漫在线观看| 自拍偷自拍亚洲精品10p| 9662av在线视频| 久久人妻诱惑我视频| 欧美aaaa性bbbbaaaa| 男人资源站中文字幕| 99久久国产精品免费热| av在线男人的天堂亚洲| 伊人网国产在线播放| 天天色 天天操 天天好逼| 五十岁熟女高潮喷水| 婷婷一区二区三区五月丁| 国产精品无码无卡免费观| 欧美 日韩 精品 中文| 男女69视频在线观看免费| 久久视频 在线播放| 4438全国成人免费视频| 精品不卡一区二区三区| 亚洲同性同志一二三专区| 在线观看中文字幕精品av| 大鸡扒操大逼大片免费关看| 最新中文字幕久久久久| 天天碰天天摸天天搞| 日韩少妇免费在线播放| 亚洲自拍偷拍一区二区中文字幕| 99久久碰碰人妻国产| 亚洲欧美一级特黄大片| 亚洲成人自拍图片网站| 美女福利网站在线播放| 台湾18禁久久久久久久激情视频| a级片特黄免费看| 911精产国品一二三产区区| 福利视频导航在线观看| 桃色成人开心激情网| 东京热日韩av在线| 日本欧美国产在线一区| 夜夜骚av一二三区| 亚洲精品1卡2卡3卡| 亚洲乱码国产乱码精品精视频| 欧美最新一区二区三区| 亚洲自拍偷拍一区二区中文字幕 | 亚洲三级综合在线观看| 最新国产精品拍在线观看| 最近最新欧美日韩精品| 日本清纯中文字幕版| 日本欧美视频在线免费| 青青草一个释放的网站| 亚洲在线免费观看18| 一区二区在线观看视频网站| 精品国产污污污污免费观看| 欧美成人少妇人妻精品| 日韩在线 中文字幕| 国产自拍偷拍在线精品| 国产精品免费看一区二区三区| 特级aaaaa黄色片| 国产乱码有码一区二区三区| 欧美黄色性视频网站| 夜夜爽夜夜操夜夜爱| 91系列视频在线播放| 久久午夜免费鲁丝片| 成人午夜av电影网| 九九视频在线观看全部| 4日日夜夜精品视频免费| 国产午夜在线播放视频| av在线观看视频免费| yy4080黄色片| 黑人和日本人av一区二区| 日韩精品欧美一区二区| 99久久碰碰人妻国产| 岳的大肥屁熟妇五十路| 老鸭窝在线毛片观看免费播放| 91人妻人人做人人爽高清| 天天操天天搞天天操| 51精品视频在线免费观看| 欧美一区二区三区爽爽| 日本男女免费福利视频| 可以直接看av网站| 黑人大吊大战亚洲女人。| 亚洲av毛片在在线播放| 精品日本少妇久久久| 国产精品国产三级在线高清观看| 中文字幕丰满子伦无码专区| 在宿舍强奷两个清纯校花| 亚洲熟妇丰满多毛xxxx网站| 国产精品网站的黄色| 69久久夜色精品国产69乱电影| 成人免费视频现网站99在线观看| 亚洲韩精品一区二区三区| 日本欧美亚洲国产啊啊啊| 天天操天天舔天天爽| 国产原创一区二区三区在线播放| 99久9在线视频播放| 亚洲a级视频在线播放| 在线成人教育平台排名| 人妻激情综合久久久久蜜桃| 中文在线字幕免费观看日韩视频 | 日韩精品欧美一区二区| 熟女人妻少妇一区二区| 亚洲美女a级黄色在线播放| 日本不卡视频一二三区| 2020年亚洲男人天堂网| 99热这里只有精品免费播放| 亚洲欧美日韩电影一区| 亚洲 综合 欧美 一区| 亚洲天堂av最新在线| 少妇被粗大的猛进69视频| 天天日夜夜操人人爽| 欧美一级特黄大片在线| 欧美日韩高清片在线观看| 18福利视频在线观看| 亚洲码av一区二区三区| 中文字幕在线免费观看人妻| 自拍偷拍亚洲综合第一页| 九九热在线精品播放| 日本有码精品一区二区三区| 四虎精品久久免费最新| 大尺度av毛片在线网址| 最近中文字幕免费视频一| 深夜福利免费观看在线看| 18在线观看免费观看| 天天操天天干天天谢| 亚洲精品久久久人妻| 精品人妻在线激情视频| 日本一区二区三区的资源| 97成人老师在线视频| 日本免费人爱做视频在线观看不卡| 亚洲三级综合在线观看| 桃色成人开心激情网| 亚洲欧美另类校园春色| 欧美精品激情在线不卡| 偷拍欧美日韩另类图片| 美女欧美视频在线观看免费| 大陆中文字幕视频在线| 999久久久人妻精品一区| 日韩一级欧美一级片| 欧美最新一区二区三区| 青青操久久综合激情| 91美女在线观看视频| 亚洲制服丝袜在线看| 日本高清 中文字幕| 女人的天堂 av在线| 久久久久国产精品二区| jiee日本美女视频网站| 亚州av嫩草av极品在线观看| 女人扒开逼让男人操| 东京热日韩av影片| 黄在线看片免费人成视频| 2021国产在线视频| 人人人妻人人人妻精品少妇| 360偷拍蜜桃臀69式| 99久久碰碰人妻国产| 亚洲美女a级黄色在线播放| 亚洲经典av中文字幕| 岳的大肥屁熟妇五十路| 人妻系列在线免费视频| 亚洲男人的天堂最新网址| 中文字幕人妻一区二区视频系列| 欧美黄色性视频网站| 亚洲三级综合在线观看| 亚洲在线免费观看18| 91色哟哟视频在线观看| 中文字幕日韩人妻在线三区| 91精品国产人妻麻豆| 亚洲一区二区中文字幕久久| 美国十次了亚洲天堂网国产| 中文字幕综合网91| 91麻豆精品国产在线| yellow在线亚洲精品一区| 5d蜜桃臀女无痕裸感| 人人妻人人爽人人摸| 一区二区三区婷婷中文字幕| 亚洲欧美日韩电影一区| 女人扒开逼让男人操| 国产激情视频在线观看的 | 亚洲综合色一区二区三区| 1级黄色片在线观看| 成人av中文字幕在线看| 天天弄天天草天天日天天| 天天干天天操天天日天天日| 一区二区三区四区久久久久韩日| 两个人在一起靠逼啊啊啊| 老司机伊人99久久精品| 麻豆国产精品777777在| 色欲AV亚洲AV无码精品| 午夜久久久久久av五月| 午夜福利片无码10000| 高清国产美女a一级毛片| 国产高清在线观看av| 伊人精品久久一区二区| 亚洲高清一区二区三区久久| 岳母的诱惑电影在线观看| 99久久精品视频16| 人妻系列中文字幕大乳丰满人妻| 午夜国产一区二区三区| 国产成人综合久久婷婷| 69国产精品成人aaaaa片| 亚洲欧美国产人成在线| 日本老熟妇av老熟妇| 玖辛奈18禁同人污本子| 男人的天堂aⅴ在线| 青青草原在线播放日韩| 中文字幕人妻一区二区视频系列| 一区二区三区内射美女| 亚洲欧洲无码一区2区无码| 色欲AV亚洲AV无码精品| 亚洲成人五月婷婷久久综合| 欧洲亚洲一区二区三区四区| 操死你美女在线视频| 在线观看网站伊人网| 亚洲在线免费观看18| 久久中文字幕av一区二区| 放荡人妻极品少妇全集| tushy一区二区三区视频| 色就色综合偷拍区欧美在线| 91 精品视频在线看| av 资源在线播放| 美女露阴道让男人捅| 天天干夜夜撸天天操| 欧美熟女xx00视频| xxxx69在线观看视频| 老鸭窝在线毛片观看免费播放| 91国产精品乱码久久久久久| 欧美日韩久久丝袜在线| 伊人精品久久一区二区| 天天干天天弄天天日| 国产美女视频带a∨黄色片| 91污污在线观看视频| 天堂av国产av伦理av| 日本高清久久人人爽| 91福利高清在线播放| 成人精品动漫一区二区| 日本韩国福利在线播放| 午夜国产一区二区三区| 成人免费电影二区三区 | 亚洲av毛片在在线播放| 熟女人妻精品视频一区| 丝袜美女诱惑佐佐三上| 免费看一级高潮喷水片 | 精品精品精品精品精品污污污污| 亚洲少妇色小说综合| 青青草一个释放的网站| 成人午夜麻豆大胆视频| 插鸡视频免费网站在线播放 |