文丨陸瑩 編輯丨黃曄
從去年開(kāi)始,加利福尼亞大學(xué)洛杉磯分校、東北大學(xué)、紐約大學(xué)等美國(guó)知名大學(xué),陸續(xù)向申請(qǐng)者發(fā)出通知,表示可以通過(guò)提交Duolingo English Test(DET),作為輔助性的語(yǔ)言能力證明,或以DET的視頻測(cè)試替代其傳統(tǒng)面試。
更值得一提的是,通過(guò)查閱其官網(wǎng),我們發(fā)現(xiàn)耶魯大學(xué)、鮑登學(xué)院、明德學(xué)院等美國(guó)頂尖高校已經(jīng)可以使用DET作為托福、雅思考試的替代,即提交符合要求的DET成績(jī)之后,無(wú)需其他任何語(yǔ)言成績(jī)證明。
“這是什么測(cè)試?”
“怎么參加?”
“有哪些題型?怎么備考?要刷題嗎?”
第一批接到通知的申請(qǐng)者對(duì)這個(gè)新型測(cè)試感到非常陌生,相比歷史較長(zhǎng)、更權(quán)威的雅思、托福考試,這個(gè)DET就像一個(gè)未知的黑洞。
Duolingo多鄰國(guó),是全球最受歡迎的外語(yǔ)學(xué)習(xí)應(yīng)用之一,但Duolingo開(kāi)發(fā)語(yǔ)言測(cè)試系統(tǒng)還是近4年剛剛開(kāi)始的事。外灘君嘗試了最新版本的Duolingo English Test體驗(yàn)版測(cè)試,基本包含這幾個(gè)類(lèi)型的考題——
選正確發(fā)音、聽(tīng)寫(xiě)句子;
選正確單詞、填詞成段(type the missing letters to complete the text below);
看圖寫(xiě)句;
看圖說(shuō)詞、讀出句子;
簡(jiǎn)短寫(xiě)作respond in 50 to 100 words to the prompt;
簡(jiǎn)短口語(yǔ)
9種題型,總體來(lái)說(shuō)還是考察聽(tīng)、說(shuō)、讀、寫(xiě)4個(gè)方面的能力,完成整個(gè)過(guò)程的正式考試時(shí)間大概在30分鐘左右。
DET測(cè)試初始頁(yè)面
相比于傳統(tǒng)的語(yǔ)言能力測(cè)試,DET系統(tǒng)題量、題型都很少,考試時(shí)間也非常短,而且,考生可以自行選擇考試地點(diǎn)——只要在考試期間打開(kāi)攝像頭、確保自己獨(dú)自在一個(gè)安靜的房間。
同時(shí),DET的網(wǎng)站介紹說(shuō)這個(gè)系統(tǒng)“每一個(gè)考試都是獨(dú)一無(wú)二的( each test is unique)”,“ 沒(méi)有確定的題量no set number of questions”這樣的考試,怎么可能準(zhǔn)確、客觀、真實(shí)地評(píng)估語(yǔ)言能力?測(cè)試成果難道不會(huì)有很強(qiáng)的偶然性?語(yǔ)言學(xué)習(xí)和語(yǔ)言測(cè)試,究竟是什么樣的關(guān)系?
帶著這些疑問(wèn),外灘君與Duolingo English Test的創(chuàng)始成員之一Joseph Edelsack聊了聊諸如“什么是英語(yǔ)學(xué)習(xí)的核心”、“未來(lái)我們可能面對(duì)什么樣的語(yǔ)言測(cè)試體系”等問(wèn)題。
Joseph在DET負(fù)責(zé)推廣DET的全球市場(chǎng),對(duì)促使耶魯Yale、優(yōu)步Uber等全球知名學(xué)校和機(jī)構(gòu)使用DET成績(jī)做出了很大貢獻(xiàn)。
Duolingo English Test的創(chuàng)始成員之一
Joseph Edelsack先生
以下是外灘君和Joseph的訪談對(duì)話。
B=外灘君
J=Joseph
B:在您看來(lái),考察一個(gè)人英文能力究竟如何,最重要的是哪個(gè)方面?
J:我認(rèn)為是進(jìn)行抽象思維和表達(dá)的能力,他得能跟人討論或者是回應(yīng)其他人的觀點(diǎn),用自己的方式說(shuō)出某種看法,而且能讓其他英語(yǔ)使用者理解他想說(shuō)的。
B:DET是怎么樣實(shí)現(xiàn)對(duì)語(yǔ)言能力的評(píng)估的呢?比起雅思、托福等考試,DET測(cè)試時(shí)間、題量、題型,似乎都太少了。
J:對(duì),這點(diǎn)也是我們被問(wèn)得非常多的問(wèn)題。DET測(cè)試主要的設(shè)計(jì)想法之一,其實(shí)說(shuō)起來(lái)很簡(jiǎn)單,就是計(jì)算機(jī)自適應(yīng)模型。
在這個(gè)系統(tǒng)里,如果你前面的問(wèn)題答得好,后面的題目會(huì)根據(jù)你的答題情況自動(dòng)調(diào)適,從題庫(kù)里挑選出更符合你能力的題目來(lái)測(cè)試你。相應(yīng)地,如果你前面的題目答得不好,后面的試題就會(huì)降低難度。
這樣交替變動(dòng),產(chǎn)生整套試題,所以,每個(gè)人的試題都是不一樣的。我們通過(guò)這種人工智能的技術(shù),更快地測(cè)試考生的英語(yǔ)能力。相比傳統(tǒng)的考試,DET系統(tǒng)只需要測(cè)試與考生能力相關(guān)的部分,而不用花上三四個(gè)鐘頭,讓考生從最簡(jiǎn)單到最難的,都答一遍,才能得出結(jié)果。
另外一個(gè)就是,DET所有的測(cè)試問(wèn)題都是基于英語(yǔ)語(yǔ)言能力評(píng)估的相關(guān)研究的。這些研究報(bào)告已經(jīng)存在很多年,大概二三十年,但從來(lái)沒(méi)有人把研究結(jié)果和計(jì)算機(jī)自適應(yīng)模型結(jié)合起來(lái)應(yīng)用。
DET主要通過(guò)以上兩種設(shè)計(jì)使我們能在短時(shí)間內(nèi)得到準(zhǔn)確的英語(yǔ)能力評(píng)估結(jié)果。
B:但我也看到,有DET的使用者認(rèn)為,基于這個(gè)系統(tǒng)的運(yùn)行方式,“each test is unique”其實(shí)也意味著,相比傳統(tǒng)測(cè)試,DET的偶然性誤差可能會(huì)更大。
J:就像我之前說(shuō)的,DET設(shè)計(jì)中容納了語(yǔ)言能力評(píng)估的研究,并不是完全的隨機(jī)出題,到目前為止,DET測(cè)試的題庫(kù)已經(jīng)包含了50000個(gè)問(wèn)題,而且在不斷更新。
我覺(jué)得,這里最重要的是,我們應(yīng)該看到,不止有唯一一種能測(cè)試出一個(gè)人語(yǔ)言能力的方式。DET想做的是,用最直接、最快,同時(shí)也準(zhǔn)確的方式去考察考生的英文能力。人們甚至可以在家就參加考試。
另外,需要注意的是,DET更多的是測(cè)試考生常規(guī)的英語(yǔ)能力(general English),并不是學(xué)術(shù)英語(yǔ)(academic English)。
前者其實(shí)有更大的影響力,也相對(duì)來(lái)說(shuō)更容易預(yù)測(cè),而且只有當(dāng)一個(gè)人擁有足夠的General English的能力,他才有可能去繼續(xù)學(xué)習(xí),向上一層,達(dá)到學(xué)術(shù)英語(yǔ)能力的要求。這也是為什么,雖然我們的全球合作伙伴絕大多數(shù)是學(xué)校,高中、大學(xué)之類(lèi),但我更愿意把他們總稱為機(jī)構(gòu) institutions。
DET測(cè)試中口語(yǔ)測(cè)試
B:有多少學(xué)校目前是承認(rèn)DET成績(jī)和托?;蜓潘加型刃ЯΦ哪??DET成績(jī)和傳統(tǒng)的托福、雅思成績(jī)相比,相關(guān)性有多大,我看到之前出的數(shù)據(jù)報(bào)告相關(guān)性雖然有0.7左右,比較高,但實(shí)際上樣本數(shù)量是很小的。
J:現(xiàn)在大概有將近60所學(xué)校接受申請(qǐng)者用DET成績(jī)代替托福。
嗯,的確,如何提高DET的準(zhǔn)確度,包括與托福等權(quán)威的語(yǔ)言能力認(rèn)證有更高更準(zhǔn)確的相關(guān)度,是我們的責(zé)任,也是一個(gè)很大的挑戰(zhàn)。
要知道,托福已經(jīng)有40年歷史了,他們和全球各地學(xué)校的合作也更加緊密,有更多的數(shù)據(jù)可以研究、使用。DET還很年輕,從2014年開(kāi)始,不過(guò)4年時(shí)間。
不過(guò),我們目前的數(shù)據(jù)其實(shí)已經(jīng)能得出一個(gè)值得參考的結(jié)果了。根據(jù)最近的研究,DET與托福的相關(guān)度是0.74左右,與雅思是0.73。當(dāng)然我們還會(huì)不斷更新。
B:DET成績(jī)的判定也完全是由機(jī)器確定嗎?
J:對(duì),完全是由系統(tǒng)計(jì)算出來(lái)的??傮w來(lái)說(shuō),DET是結(jié)合數(shù)據(jù)模型和機(jī)器學(xué)習(xí)算法來(lái)綜合得出測(cè)試結(jié)果,根據(jù)考生在聽(tīng)力、閱讀、寫(xiě)作、口語(yǔ)的不同表現(xiàn)得出最終成績(jī),不是簡(jiǎn)單的平均數(shù)成績(jī)。
B:您之前說(shuō),英語(yǔ)能力的關(guān)鍵是能抽象思考并表達(dá)出來(lái)。目前DET是沒(méi)有長(zhǎng)篇,或者是段落式的閱讀和聽(tīng)力的,選擇題、簡(jiǎn)單句也許可以有確定的答案或者答案范圍可以由機(jī)器評(píng)估,那么段落寫(xiě)作和口語(yǔ)表達(dá)這兩個(gè)部分呢?DET怎么評(píng)估一個(gè)人是不是前后邏輯合理地回應(yīng)了某個(gè)主題呢?機(jī)器能判斷人的邏輯嗎?
J:是這樣的,最后兩個(gè)部分的寫(xiě)作和口語(yǔ)還沒(méi)有評(píng)分,目前是提供給學(xué)校的招生官等作為寫(xiě)作樣本和預(yù)先面試參考,綜合考察申請(qǐng)者的真實(shí)英文能力。但如何評(píng)估這兩個(gè)部分,也是我們正在努力的方向。
B:人們學(xué)習(xí)某種語(yǔ)言,不管是英文還是其他,總得來(lái)說(shuō),是希望能夠與其他人面對(duì)面交談的。面對(duì)機(jī)器,沒(méi)有這種交流感,有些人可能會(huì)不適應(yīng),因而不能發(fā)揮出真實(shí)的語(yǔ)言能力?;蛘哒f(shuō),機(jī)考,并不能實(shí)現(xiàn)語(yǔ)言使用中“交流”這個(gè)最重要的環(huán)節(jié)。您怎么看?
J:恰恰相反,我認(rèn)為現(xiàn)在人們其實(shí)是更習(xí)慣面對(duì)機(jī)器說(shuō)話,或者就是跟機(jī)器交流。這是一個(gè)正在發(fā)生趨勢(shì)。
比如說(shuō),有些人在用iPhone的語(yǔ)音助理功能時(shí),說(shuō)完還會(huì)對(duì)Siri說(shuō)thank you。哈哈,可是說(shuō)真的,Siri根本不會(huì)在意你有沒(méi)有說(shuō)謝謝,它只是一個(gè)程序而已。所以說(shuō),我相信,人們實(shí)際上是普遍更適應(yīng)更習(xí)慣面對(duì)機(jī)器的,即使還有個(gè)別人會(huì)不大習(xí)慣。
是的,屏幕時(shí)代SCREEN AGE已經(jīng)到來(lái)了。
還有一件事,我們希望使用機(jī)考讓整個(gè)測(cè)試更為客觀。在語(yǔ)言評(píng)估過(guò)程中,人與人面對(duì)面交流的評(píng)估有一些局限性,這個(gè)局限在于,人和人之間還可能有些非語(yǔ)言的干擾項(xiàng),比如神態(tài)、動(dòng)作等,面對(duì)某類(lèi)人,考生處于放松狀態(tài)發(fā)揮得好,換了另外的人,又發(fā)揮不出來(lái),這就會(huì)影響最終的評(píng)估結(jié)果。
目前,我們還沒(méi)法實(shí)現(xiàn),機(jī)器與人交流的即時(shí)反饋,互動(dòng)交流。不過(guò),盡可能地模擬人類(lèi)之間的交流模式,一直是我們?cè)谘芯康姆较??;蛟S,在語(yǔ)言認(rèn)證時(shí)使用人機(jī)對(duì)話、人機(jī)交互,就在不久的未來(lái),它沒(méi)有人們想象的那么遙遠(yuǎn)。
DET測(cè)試中寫(xiě)作測(cè)試
B:那么對(duì)于學(xué)習(xí)英文,您有什么建議呢?
J:首先,我要說(shuō)的是,學(xué)習(xí)英文,或者任何其他一種語(yǔ)言,并沒(méi)有一條確定的完美路徑,學(xué)習(xí)語(yǔ)言一定需要通過(guò)多種方式進(jìn)行。如果說(shuō)有人說(shuō)他有一種方法,能讓你從零開(kāi)始,一直到完全熟練自如地使用英語(yǔ),這就不太可能是真的。
學(xué)習(xí)語(yǔ)言,有兩條比較重要的方式。
一是,與人討論,discussion。在討論過(guò)程中,你需要去不斷去思考、理解和鍛煉怎么回應(yīng)對(duì)方的問(wèn)題。
二是,浸入文化中,immersion。你在看電視節(jié)目、聽(tīng)音樂(lè)、看新聞甚至看廣告信息的時(shí)候,其實(shí)同時(shí)在接收、學(xué)習(xí)這種語(yǔ)言和語(yǔ)言環(huán)境中的文化。
另外可能會(huì)有人很關(guān)心應(yīng)該怎么準(zhǔn)備這個(gè)考試,怎么學(xué)習(xí)適應(yīng)這個(gè)考試。關(guān)于這點(diǎn),我想說(shuō)——不要為了考試而學(xué)。雖然準(zhǔn)備應(yīng)試的過(guò)程中你的確會(huì)學(xué)到一點(diǎn)英文,這也是很多傳統(tǒng)考試的問(wèn)題。我們希望測(cè)試一個(gè)人真實(shí)的英語(yǔ)能力,而不是考試的能力。
聯(lián)系客服