<em>Jeopardy!</em> 'nin En Kötü Şöhretli Anı, Dizinin Hayranlarını, Yıldızlarını ve Hatta Alex Trebek'i Rahatsız Etti. Nedeni Şimdi Açık.

2010 yılında bir sabah, Alex Trebek New York şehrinin çok da dışında olmayan IBM kampüsüne girdi ve Jeopardy! tarihinin en sıra dışı oyuncusu olacak şeyi incelemeye hazırlandı.

Gösterinin Culver City setinden ülkenin bir ucundan diğer ucuna uzanan yolculuk dikkatlice planlanmıştı. IBM'de bilgisayar bilimcisi olan David Ferrucci, Jeopardy!' de yarışacak ilk ve şimdiye kadarki son insan olmayan yarışmacıyı geliştirmek için yıllarca bir ekibe liderlik etmişti. Uzun süredir sunuculuk yapan Trebek, "Watson" olarak adlandırılan sistem ve iki insan yarışmacıyla oynanan üç antrenman maçını izleyecekti. Ardından Jeopardy! ekibi yakınlarda bir öğle yemeğine çıkarılacak ve Trebek sonunda sahneye çıkıp iki Watson antrenman maçına daha ev sahipliği yapacaktı.

O zamana kadar, IBM'in yaratımıyla televizyonda yayınlanacak bir Jeopardy! yarışmasının hazırlıkları çoktan başlamıştı, ancak Trebek bu teknolojiyle ilk kez yüz yüze karşılaşacaktı ve onayı çok önemliydi. Ferrucci özellikle bir unsuru göstermek istiyordu: Watson'ın her yanıt verdiğinde en iyi üç tahminini ve her birindeki sayısal güven oranını gösterecek şekilde düzenlenmiş ekran. Ferrucci için bu özellik, bilgisayarın dil işleme yeteneklerini göstermede çok önemliydi, çünkü Watson'ın sadece cevapları sıraladığını değil, aynı zamanda akıl yürüttüğünü de gösteriyordu. Watson sağlık hizmetleri gibi sektörlere dağıtılacak olsaydı, kullanıcıları yalnızca en iyi tahminini bilmek istemezdi. Watson'ın yüzde 95 mi yoksa sadece yüzde 30 mu emin olduğunu ve bu güven düzeylerinin gerçek doğruluk oranıyla uyumlu olup olmadığını bilmek sonsuz derecede daha değerli olurdu.

Bu aynı zamanda daha iyi bir görüntüleme sağlıyordu. Ferrucci, küçük kızını sürecin başlarında laboratuvara getirmiş ve ona Watson'ın insan rakiplere karşı nasıl oynandığını göstermişti. Watson aramayı reddedince, Ferrucci'nin kızı ona dönüp bilgisayarın çöküp çökmediğini sordu. Bilgisayarın çökmediğini açıklamakta zorlandı; tahminde bulunacak kadar kendine güvenmiyordu. Ferrucci'nin ısrarı üzerine, IBM'in pazarlama ekibi, Ferrucci'nin şüphelerini doğrulayan bir anket yaptırdı: İnsanlar Watson'ın ağırlıklı tahminlerini göremiyorsa, yarışma sıkıcı ve anlaşılması zordu.

Trebek IBM'e geldiğinde, Watson ekibi Jeopardy! yapımcılarına ekran fikrini çoktan kabul ettirmişti ve bilgisayar her yanıt verdiğinde yanıt paneli açılıyordu. Başlangıçta Trebek ile yeşil odada oturan Ferrucci heyecanlanmıştı: Trebek yeni üyeyi beğenmişti. Ferrucci, "Yanıt panelini izliyor ve 'Bu büyüleyici,' diyor," diye hatırlıyor.

Daha sonra Trebek'e bunu televizyondaki bölümlere dahil edeceklerini söyledi.

"'Ah, hayır, hayır. Hayır, değiliz,' diyor," dedi Ferrucci. "'Çünkü o zaman bu Jeopardy değil! '"

" Jeopardy!' nin tasarımı önemli," dedi Trebek. "Baştan çekim var, soru çekimi var, cevap çekimi var, iki kişilik çekim var, üç kişilik çekim var."

Ferrucci, " Jeopardy! oyununu oluşturmak için kullanılan her atışı, her açıyı biliyordu," dedi. "Ve o atış sırasında seyircinin ne yapması gerektiğini de biliyordu."

"Bana, 'Cevap paneli açıldığında, tamamen farklı bir şey yapacağım. Bu Jeopardy değil! ' dedi. 'Bu Jeopardy değil! ' derken, 'İzleyiciler artık tamamen farklı bir deneyim yaşıyor' demek istiyordu."

IBM, bilgisayarın gerçekte ne yaptığını göstermek konusunda güçlü bir motivasyona sahipti, ancak Trebek bu konuda istekli değildi. Öğle yemeğinde Ferrucci ve IBM ekibinden diğerleri onu ikna etmeye çalıştı. Hatta o zamanlar programın yapımcısı olan Harry Friedman bile olaya dahil oldu. Ferrucci, "Harry ona neden önemli olduğunu açıkladı," dedi. "Ve o da 'Hayır, yapmayacağım' dedi."

Bu an, 2020 yılında ölen Trebek'in Jeopardy!' de oynadığı ciddi koruyucu rolünü ve aynı zamanda çok tanıdık, çok insani bir ortamda bilgisayar istilacılarına karşı duyulan yaygın huzursuzluğu anlatıyordu.

Watson, 2011'de yayına girerek şu anki sunucu Ken Jennings ve Brad Rutter'a karşı oynadı. Bölümler reyting rekorları kırdı ve bir medya gösterisine dönüştü; New York Times Dergisi'nin kapağından bir PBS belgeseline kadar her şeyi topladı. Bu, çığır açan bir bilgisayar bilimi kumarı ve yapay zekanın modern çağının öncüsüydü; mevcut hukuk lisansı ve yapay zeka saçmalıklarına kıyasla nispeten doyurucu bir başlangıçtı. Ve bu, Jeopardy! tutkunlarının bugün bile hararetle tartıştığı bir konu olmaya devam ediyor.

Gerçekten de, Watson oyunlarından bu yana geçen yıllarda, bilgisayardan nefret etmek -ya da en azından anlamsız zafer iddialarından nefret etmek- Jeopardy! hayranları arasında favori bir dava haline geldi. Oyunlar yayınlandıktan sonra bir yarışmacı, "Elbette Watson insanların kıçını tekmeledi - adil bir mücadele değildi," diye yazdı . 2021'de bilgisayar bilimleri profesörü ve şov mezunu Jordan Boyd-Graber, Watson oyunlarının hileli olduğunu iddia eden bir ders yayınladı . Konu, oyunların " hayal kırıklığı yarattığı ", " adaletsiz " ve -en sevdiğim- " gerçekten nefret ettiğim tek [yarışmacıyı] tanıtan bir hile" olarak reddedildiği Jeopardy! subreddit'inde her zaman favori bir konu.

Watson'ın sert mücadelesinden neredeyse on yıl sonra Jeopardy!' de ilk kez boy gösteren dizinin süperstarı James Holzhauer da aynı derecede iddialı. "Watson'la oynanan Jeopardy! maçı, bilgisayarın insanüstü tepki süresi nedeniyle esasen hileliydi," dedi.

Öfke, Watson'la karşılaşan bazı kişiler arasında özellikle yoğun. Sistem test edilirken Watson'la karşılaşan 19 günlük Jeopardy! şampiyonu David Madden, "Olanların adil bir mücadele olmadığı apaçık ortadaydı," dedi. "Bunu bu kadar sinir bozucu yapan şey, bunun bir el çabukluğu egzersizine dönüştürülmesiydi."

Jennings, etkinliğe katılmasına rağmen Trebek'in de bazı çekinceleri olduğunu söyledi. "Seyirciler ona sık sık Watson'ı sorardı ve bunca zamandan sonra bile hala biraz huzursuz olduğu belliydi," dedi Jennings. "İnsanlar ona en sevdiği Jeopardy! oyuncusunun kim olduğunu sorardı ve elbette o asla buna inanmazdı. Sadece 'Watson hariç herhangi biri. Vay canına, o Watson'dan nefret ediyordum.' derdi."

Şimdi, hem Jeopardy! (42. sezonu Pazartesi başlıyor) hem de kamuoyunun yapay zekayla ilişkisi açısından çok farklı bir dönemde, şu soruyu sormaya değer: Watson hesaplaşması neydi? Diğer şeylerin yanı sıra, içinde bulunduğumuz kaygılı ve öfkeli anın bir ön izlemesiydi.

Ferrucci, Jeopardy! yarışmasında yarışabilecek bir bilgisayar üretme planını duyduğunda ilk düşüncesi kesinlikle hayır oldu.

O dönemde IBM'in araştırma kolunda çalışıyordu ve yapay zekada doğal dil işleme üzerine yoğunlaşıyordu. Jeopardy! fikri, IBM'in 1997'de Garry Kasparov'u deviren satranç bilgisayarı Deep Blue'ya yeni bir bakış açısı olarak ortaya atılmıştı.

2000'lerin ortalarına gelindiğinde, Paul Horn adlı bir IBM yöneticisi araştırma departmanına iki kez sunum yapmıştı. Teknolojinizin güçlü ve akıllı olduğunu en geniş kitlenin önünde kanıtlamaya çalışıyorsanız, popüler kültürde zekânın simgesi haline gelen bilgi yarışması Jeopardy!' den daha iyi bir platform bulamazsınız. Horn o zamanlar, "İnsanlar zekâyı zekâyla ilişkilendiriyordu," demişti ve bu platformu istiyordu.

Ancak Horn reddedilmişti. Ferrucci, teknolojinin sınırlarının gayet iyi farkındaydı: O zamanlar en iyi dil işleme modelleri %35'e varan doğruluk oranlarına ulaşıyordu, dedi bana. "Orada bile sorular Jeopardy!' den daha basitti çünkü çok basitti," dedi. " Jeopardy!' de kazanmak için %80-90 seviyesinde bir doğruluk oranına sahip olmanız gerekiyordu. Bu, makinelerin yapabileceklerinin yanına bile yaklaşamaz."

2006'da Horn üçüncü kez ortaya çıktığında, Ferrucci'nin ilgisini çekmişti, ancak bu aşırı zorluklar göz önüne alındığında, bu ilgi o kadar da değildi. Ferrucci, "Zavallı Paul Horn'a üçüncü kez hayır demenin bir yolunu bulmak için bir grup toplandı," dedi. Ancak onunla konuştukça Ferrucci, "Bunu başarabilir miyiz ?" diye düşünmeye başladı. "'Bu tamamen imkansız'dan 'Aman Tanrım, bu kolay'a, sonra da 'Tamam, mümkün ama çok zor'a geçti. Bana, 'Tamam Dave, karar senin' dediler."

Ertesi yıl IBM, Watson projesinin başına resmen geçen Jeopardy! Ferrucci ile görüştü ve IBM'in pazarlama ekibinden iki kişi Los Angeles'a uçarak Friedman ve uzun süredir yapımcılığını üstlenen Rocky Schmidt ile görüştü ve birlikte Jeopardy! 'yi gezdi. Ancak bilgisayar bilimcisi için fikri açıklamak, söylendiği kadar kolay değildi. Ferrucci, "Çok güzel bir toplantı gibi görünüyordu," dedi. "Ama sonradan öğrendiğimiz kadarıyla, ne hakkında konuştuğumuzu bilmiyorlardı." Sonunda Ferrucci, Jeopardy! 'nin gizemli olduğunu anladı: Anlaşılan program, IBM'in yalnızca programı üreten Sony ile bir BT sözleşmesi imzalamaya çalıştığı izlenimine kapılmıştı.

Programın üst düzey yöneticileri, başlangıçta sunum karşısında kafası karışan tek kişiler değildi. Ferrucci, IBM'de "çok nüfuzlu", zeki ama televizyon izlemeyen üst düzey bir yöneticiyi hatırlıyor. Yönetici, grubun proje için fon almış olmasına öfkelenerek Ferrucci'nin ekibiyle görüştü. Ferrucci'ye, karısının onu programın birkaç bölümünü izlemeye ikna ettiğini ve IBM'in orada kaynaklarını boşa harcayacağından dehşete düştüğünü söyledi. Sonunda ekip, yöneticiye Jeopardy!'yi göstermediğini , Name That Tune'u izlediğini anladı.

IBM'in Watson'a dönüşecek bilgisayarı Jeopardy! yarışmasına sokmak için yaptığı ilk girişimler pek de umut verici değildi: Bilgisayar, son programlardaki ipuçlarının yalnızca %13'ünü doğru tahmin edebiliyordu. Ferrucci, "On üç - 30 değil," dedi. Yapay zekânın önemli bir parçası olan ve bilgisayara zili çalıp çalmayacağını söyleyen güvenirlik tahmini ise daha da kötüydü.

IBM, kısa süre sonra, Westchester County araştırma kampüsünde, aktör Todd Alan Crain'in sunuculuğunu yaptığı Watson ile birlikte antrenman oyunları düzenlemeye başladı. Bu oyunlar, önce öğle tatillerinde gelen IBM çalışanlarıyla, ardından da program tarafından özenle seçilen ve sıkı bir gizlilik içinde içeri alınan Jeopardy! şampiyonlarıyla oynandı. İlk versiyonlardan bazıları şov dünyasına pek uygun değildi: Crain, devasa sunucu "gövdesi" (Crain'in ifadesiyle soğutulmuş bir odada "10 buzdolabı büyüklüğünde ünite") olan Watson'ın, odada bir çöp kutusunun tepesine sıkıştırılmış ve ardından siyah bir bezle örtülmüş bir hoparlörle temsil edildiği bir versiyonu hatırlıyor.

Crain, "Kira çok, çok düşüktü," dedi. Jeopardy! ve IBM'in liderliğinin hazır olduğu ve PBS belgesel ekibinin çekim yaptığı böyle bir sergi gününde, Watson, Almanca "hayır" anlamına gelen "nein" kelimesini soran bir soruya, büyükannenizin akşam 7'deki oyun şovu saatinde muhtemelen pek hoş karşılanmayacak bir yaratıcılıkla yanıt verdi: "siktir et ."

"Seyircilerin hepsi aklını kaçırdı," dedi Crain. "Salonda kaos vardı. Terli kahkahalar duyuluyordu."

Ancak bilgisayar sürekli olarak gelişti. Friedman ve Schmidt, 2007 sonlarında IBM'in genel merkezini ziyaret ettiklerinde, Watson'ın doğruluk oranı neredeyse %50'ye ulaşmıştı ve performansı sürekli artıyordu. Jeopardy! mezunları gelmeye başlayınca, sahalar bu mücadeleyi, bilgi yarışması elitlerinden beklenebilecek türden, insanlığa karşı bir tür inekçe savunmacılıkla kucakladı: Ferrucci, oyunculardan birinin John Henry tişörtüyle geldiğini hatırlıyor.

2008'de Jeopardy!' de birinci olan testçi Alison Kolani, "İki küçük çocuğun annesiydim ve beni bir otele yerleştirmeye gönüllü oldular. Böylece tekrar Jeopardy! oynayabildim," dedi. "Ben de 'Ne yapmamı istiyorsan onu yapacağım' dedim."

Watson'dan bir iki oyun çalmayı başaran oyuncular, bugün bile bu başarılarından büyük gurur duyuyorlar. 25 ay boyunca yaklaşık 200 oyuna ev sahipliği yapan Crain, "Programda asla, asla, asla göremeyeceğiniz bir şey fark etmeye başladım: İnsan yarışmacılar Watson'a karşı adeta takım oluşturuyorlardı," dedi. "Yani yarışmacılardan biri Daily Double kategorisine denk gelen bir kategoriyi seçerse, diğer insan yarışmacı şüphesiz 'Hadi, kazan' gibi bir şey söylerdi. Diğer yarışmacıyı cesaretlendirirlerdi."

Watson rakiplerinin ne yaptığından habersiz olduğu için, bu ara sıra yapılan zorbalıkların pek bir faydası olmadı. Ama mesele bu değildi. Crain, "Oyunu kendi kazanmak istemiyordu," dedi. "İnsanlık olarak o maçları kazanmamızı umuyorlardı."

19 günlük şampiyon Madden, bilgisayarı alt etmeyi başaran oyunculardan biriydi. "Programa katıldığım dönemde oynadığımdan çok farklı bir oyun oynayacağımı biliyordum," dedi. "Sadece her şeyi göze almam gerektiğini biliyordum."

İşte tam da bunu yaptı; Günlük Çiftleri kovalayıp buldu ve o zamanlar Jeopardy!' de oldukça sıra dışı sayılabilecek devasa bahisler yaptı; Holzhauer oyunu dönüştürmeden neredeyse on yıl önce. Bu stratejiyle iki kez kazanmış olsa da, bilgi yarışması hayranlarının kalıcı bir hassas noktasının ilk ipuçları antrenman maçlarında ortaya çıktı: Watson ilk sıradaki çanı çalmada son derece iyiydi. Madden, "Watson'ın sadece saçma bir zil zamanlaması olduğu çok çabuk anlaşıldı," dedi.

Bilgisayarın erkeksi sesi nedeniyle Watson için erkek zamirleri kullanmaya başlayan Kolani de aynı şeyi fark etti. "Çok hızlıydı ve neredeyse her zaman haklıydı," dedi. "Çok mütevazıydı."

Gazeteci Stephen Baker, Watson'ın geliştirilmesi ve Jeopardy! projesi boyunca IBM ile birlikte çalıştı ve sonunda girişim hakkında Final Jeopardy: İnsan Makineye Karşı ve Her Şeyi Bilme Arayışı adlı bir kitap yayınladı. O dönemde IBM, yapay zekâ ifadesine karşı temkinliydi ve bilgisayarı "soru-cevap sistemi" olarak adlandırmakta ısrar ediyordu. Baker bana, "Yapay zekâ demek istemediler çünkü yapay zekânın yanlış vaatlerle kötü bir ünü vardı," dedi. "Beni ona asla yapay zekâ dememem konusunda uyardılar."

Final Jeopardy'de Baker, IBM ve Jeopardy!' nin Watson'ın nasıl vızıldayacağı konusunda nasıl gidip geldiğini anlatıyor. Bir bilgisayar, doğası gereği, en becerikli zil meraklısından bile çok daha hızlı zil çalabilirdi. Baker, "Beyinden parmağa elektriksel yolculuk, insanlarda iki yüz milisaniye sürüyordu; bu, Watson'ın yaklaşık 10 katıydı," diye yazmıştı. Ancak IBM, zil çalmanın yakın olduğunu bilen insan oyuncuların, nispeten yavaş nöronlarıyla bir adım öne geçmek için bu beklentiyi kullanabildiklerini keşfetti; bazıları, oyuncuların kilitlenme cezası olmadan vızıldayabileceğini gösteren "ışıktan sadece birkaç milisaniye sonra vızıldadı".

Ancak geliştirme ilerledikçe, Jeopardy! yöneticileri endişelendi ve sonunda şirketten, IBM'in tahminine göre "Watson'ın tepki süresini sekiz milisaniye yavaşlatacak" geçici bir parmak üretmesini talep ettiler ( Final Jeopardy'ye göre). Bu, Watson'a ortalama bir insanın 200 milisaniyelik zil hızına kıyasla yaklaşık 28 milisaniyelik bir hız kazandırdı.

Yine de, bu durum Madden'ı veya bilgisayarı yenmeyi başaran diğer yarışmacıları durdurmamıştı. Hatta Baker, IBM'in bir yarışmacı eksiği olduğunu fark edip yazarı oyuna dahil etmesi üzerine Watson'ı neredeyse alt edecekti. Baker, Final Jeopardy!'ye kadar öndeydi, dedi bana, ama bilgisayar daha büyük bahis oynadı ve kazandı. Yine de, bu başarısından gurur duyuyordu ve kısa süre sonra Ferrucci'ye neredeyse zafer kazandırdı.

Baker, "Ve bana, 'Ah, evet, bu birinin dizüstü bilgisayarındaki eski bir kopya olmalı,' dedi," dedi. "Tamamen güncelliğini yitirmiş bir yazılımdı."

Jennings ve Rutter, maç öncesindeki yıllarda kasıtlı olarak Watson ve IBM'den uzak tutulmuştu.

İkisini de ikna etmek çok uzun sürmemişti. Jennings, oyunların sonunda kaydedilmesinden yıllar önce programdan bir telefon aldığını ve Deep Blue'yu hatırlayıp hatırlamadığını sorduğunu hatırlıyor. Jennings, kendisine "'IBM, Jeopardy!' nin satrançtan sonraki yeni sınır olduğunu düşünüyor,'" dendiğini söyledi. "'Eğer bir algoritmayı hızlandırabilirlerse, yarışmacılardan biri olur musun?' Ben de 'elbette' dedim. Bilgisayar bilimleri bölümünde okumuştum. Soru cevap algoritmalarının Jeopardy!'nin yanından bile geçemeyeceğini biliyordum."

Vuruşlar yaklaştıkça ve Watson'ın oyun istatistikleri elinden alındığından, Jeopardy! her iki yarışmacının da bilgisayarın diğer Jeopardy! yarışmacılarına karşı yaptığı bazı pratik oyunlarının Blu-ray kayıtlarını edinmesini sağladı.

"İlk Blu-ray'imi böyle aldım," dedi Jennings. "Bana bir Blu-ray gönderdiler ki Watson'ın 90'lar ve 2000'ler dönemi Jeopardy! şampiyonlarını izleyebileyim." Ve ilk şaşkınlığına rağmen, gerçekten de öyle oldu: "Oynamaktan çok korktuğum Jeopardy! rakiplerinden bile daha iyi, hatta daha iyi oynuyordu," dedi.

Jennings için özellikle rahatsız edici olan şey, antrenman maçlarının kaydıyla birlikte gelen şeydi: IBM araştırma makalesinin ilk taslağı, diğer şeylerin yanı sıra, Watson'ın performansının araştırmacıların ve makalenin baş yazarı Ferrucci'nin "kazananların bulutu" olarak adlandırdığı şeye giderek daha da yaklaştığını gösteriyordu.

Jennings, "Dağınık bulutta neden iki renk nokta var?" diye merak ettiğini ve ardından bir başlangıç ​​keşfi yaptığını hatırlıyor. 2004'teki 74 galibiyeti, Jeopardy! tarihindeki en uzun seri değildi: Bunlar, kazanmak için gerekenler hakkında değerli ve bol miktarda veriydi ve IBM ekibi bunları grafikte kendi gölgesiyle ayırmıştı. "Bunlardan biri Jeopardy! şampiyonları ve siyah noktalar da aslında benim. Ulaşmaya çalıştığı bulutun parçasıyım."

Yine de ne Jennings ne de Rutter, ortak dijital düşmanlarını nasıl alt edecekleri konusunda birbirleriyle strateji geliştirmeyi düşünmediler. Rutter, "Rekabet hâlâ ateşliydi," dedi. Rutter o dönemde şovda yenilmezdi ve 2005'teki Ultimate Tournament of Champions'da Jennings ve diğer birçok ünlü yarışmacıyı yenmişti. Jennings, Rutter'ın Watson oyunlarında da yer alacağını öğrendiğinde, "Ah, yine Brad'le mi oynayacağım?" diye düşündüğünü hatırlıyor.

"Birbirimizden hiç hoşlanmadığımız söylenemez, ama sonradan olduğumuz kadar yakın değildik kesinlikle," dedi Rutter. "Onu, bilgisayarı yenmek istediğim kadar çok yenmek istiyordum."

Yine de Jennings, ne görebilen ne de duyabilen Watson'ı sarsmak için yapabilecekleri pek bir şey olmadığını söyledi. "Rakiplerinin, Garry Kasparov'un bir bilgisayar satranç oyuncusunu şaşırtmak için tuhaf bir açılış denemesi gibi yapabileceği hiçbir şey yoktu," dedi. " Jeopardy'de bu tür stratejiler daha az. "

Jennings ve Rutter, bilgisayarla oynama davetinin üzerinden geçen yıllarda Batı Yakası'ndaki hayatlarına devam ettiler. Ferrucci ve ekibi, Watson'ın doğruluk ve güven oranları arttıkça üzerinde çalışmaya devam etti. Jeopardy! mezunları kampüste dolaşmaya devam etti ve giderek daha azı zaferle ayrıldı. IBM ve Jeopardy!, ülkenin önde gelen dehalarından bazılarını alt edebileceği söylenen makineye ilk bakışı merakla bekleyen muhabirlerle birlikte, kendi halkla ilişkiler makinelerini çalıştırmaya başladılar.

Ve sonra Aralık 2010 geldi. Göreve başlamaya sadece birkaç hafta kala, Trebek IBM kampüsüne o kader ziyaretini gerçekleştirdi ve Watson'ın özgüvenini gösteren ekranı anında kapattı. Ferrucci ve IBM'in vizyonunun önemli bir parçası, en azından şimdilik, ortadan kaybolmuştu.

Yenilen grup, Trebek'in ev sahipliği yapacağı iki Watson maçına hazırlanmak için IBM ofisine geri döndü. Sonra Ferrucci'nin aklına bir fikir geldi: Cevap panelini hemen oracıkta kapatacaklardı. Trebek'in yeşil odadan sunduğu ilk maçın yayınını izlerken, sunucunun birkaç ipucuyla Watson'ın panelinin kaybolmasından yakındığını hatırlıyor.

Sonra, tam ikinci maç başlarken, Trebek'in sesi oditoryumun anons sisteminden duyuldu: "Ferrucci!" diye bağırdı. "Buraya gel!"

Jeopardy! yarışmacıları bazen Trebek'ten azar işitmeyi müdürün odasına çağrılmaya benzetiyorlardı. Bu da farklı değildi. Ferrucci koridoru geçip odaya girdi. Ferrucci, Trebek'in ona "Cevap panelinin sadece televizyonda olmasını istemiyorum," dediğini, "kürsümde olmasını da istiyorum," dediğini söyledi.

Sonunda oyun zamanı gelmişti.

Watson bölümlerinin kaydedilmesinden bir gün önce, Jennings ve Rutter, bilgisayara karşı bir dizi antrenman maçı yapmak için IBM kampüsüne gittiler. Rutter, en azından oynanış tarzı açısından geleneksel bir rakiple karşılaştığını hatırlıyor. Bu rakip, yukarıdan aşağıya kategoriler oynuyor ve Günlük Çiftler'i aramıyor gibiydi. En önemlisi, ne Jennings ne de Rutter, son saniyelerde rakibi geçmekte çok fazla zorlandıklarını hatırlıyor. Hızla Watson galipleri arasına katıldılar: Rutter, üç tam maç oynadıklarını ve Watson da dahil olmak üzere her yarışmacının bir galibiyet aldığını söyledi.

Ertesi gün IBM bir değişiklik yaptı. Final Jeopardy'de Baker, televizyonda yayınlanan maç başlamadan hemen önce teknisyenlerin Watson'ı kendi deyimiyle "şampiyonluk moduna" nasıl geçirdiğini anlatıyor. Baker, bunun iki değişiklik gerektirdiğini yazdı. İlk olarak, Watson'a maçın (öhöm) iki günlük, toplam puanlı bir maç olduğunu söylemek, bahis stratejisini değiştirdi. Ve Baker devam ediyor: "IBM ekibi, makineye Günlük Çiftler'i aramasını söyledi."

Jennings, amfi tiyatroya girdiğinde, amfinin bir kısmının IBM yönetim kurulu üyeleriyle dolu olduğunu fark ettiğini hatırlıyor. "Bir şekilde bunun ekonomik bir olay olduğu aklıma gelmemişti," dedi. " Jeopardy! oyunlarının çoğu finans piyasalarını etkilemiyor, öyle diyelim."

İlk oyunun başlangıç ​​turu, iki maçlık düellonun bilgisayarın istediği gibi gitmeyebileceğini gösteriyordu: Jennings 2.000 dolarla geride kalırken, Rutter Watson'la 5.000 dolarda berabere kalmayı başarmıştı. Ancak o noktadan sonra, ikisi de Watson'ın zafere doğru ilerlemesini izlemekten fazlasını yapamadı. Watson'ın bazı hataları vardı; özellikle de Ferrucci'nin ekibinin gayet iyi bildiği gibi bilgisayarın Aşil tendonu olan Final Jeopardy! ipucuna "Toronto????" diye cevap verdiğinde. İpucu "En büyük havalimanına bir II. Dünya Savaşı kahramanının adı verilmiştir; ikinci en büyüğüne ise bir II. Dünya Savaşı muharebesinin adı verilmiştir." şeklindeydi. (Ertesi yıl IBM'den ayrılacak olan Ferrucci için bu tahmin tam bir felaket değildi: Soru işaretleri güven eksikliğini gösteriyordu ve zor kazanılmış cevap paneli, Final Jeopardy! ipuçlarında olduğu gibi görünür olsaydı, Watson'ın ikinci tahmininin doğru cevap olan Chicago olduğu ortaya çıkardı.)

Ama Watson çoğunlukla rahattı. Jennings ve Rutter'ın vızıltılarına defalarca bastıkları görülebiliyordu, ancak bilgisayar doğru cevabı ilk veren oldu. Bir önceki günkü antrenman maçlarındaki performansından farklı olarak, Watson tahtada hızla gezindi, belli ki Günlük Çiftler peşindeydi. Onları buldu, büyük ve tuhaf bir şekilde bahis yaptı: Altı fırsattan beşini yakaladı, 6.435$ ve 1.246$ gibi bahis miktarları koydu, hem toplamına ekledi hem de insan rakiplerini saf dışı bıraktı.

Rutter, bir ara sırasında Jennings'e sahne arkasında katıldığını hatırlıyor; o noktada Watson'ın eski tepeden inme oyun tarzını reddettiği ve özellikle de alt sıralarda aktif olarak Günlük Çiftler peşinde koştuğu açıkça belliydi. Rutter, IBM'de kuliste Jennings ile tartıştıklarını, "Günlük Çiftler peşinde koşmak gerçekten mantıklı," dedi.

Birçok Jeopardy! hayranı, bu stratejinin popülerleşmesini James Holzhauer'a bağlar, ancak Rutter aynı şeyi yapmaz. "James ne kadar harika olsa da, tahtada zıplayıp Günlük Çiftler'i avladığı için büyük övgü alıyor," dedi stratejiyi sonraki turnuvalarda kendisi de uygulayan Rutter. "Ve ben bunu oradan almadım. Watson'dan aldım." (Ancak Holzhauer bunu yaygınlaştırdı: 2019'da bu stratejiyle 32 maçlık galibiyet serisinde yaklaşık 2,5 milyon dolar kazandı ve bugün Jeopardy!' de çoğu gece bunu canlı olarak görebilirsiniz.)

IBM'deki seyirciler, şaşırtıcı olmayan bir şekilde, ezici bir çoğunlukla Watson'ı destekliyordu ve bilgisayarın zaferi giderek kesinleştikçe, kalabalık coşkusunu Jeopardy!' ye hiç yakışmayan bir şekilde belli etti. Jennings, "Görgü kurallarını pek bilmiyorlardı," dedi. "Bana, yarışmacı annelerin, minik yavruları bir şey yaptığında her zaman nasıl sevgiyle kucaklaştıklarını hatırlattı. Watson kolay bir ipucu yakalar ve odada bir sohbet başlardı."

İnsanlar kaybetti. Watson 77.147 dolar kazanırken, Jennings 24.000 dolar, Rutter ise 21.600 dolar kazandı. Jennings, son Final Jeopardy! yanıtında, Rutter yanlarındaki insansız okuyucuya eğilirken, "Yeni robot efendilerimizi memnuniyetle karşılıyorum" diye eklemişti. Bu yorumlarına itiraz etmek zordu: Neredeyse hiçbir noktada iki insanın da zafer şansı yokmuş gibi görünüyordu.

Ancak sahnede, kulakları olmayan bir makineye alkışlar yağarken, Jennings ve Rutter hayal kırıklığına uğramaktan ziyade hoş bir şaşkınlık içinde görünüyorlardı; belki de bu durum, sırasıyla aldıkları 150.000 ve 100.000 dolarlık teselli ödüllerinin de katkısıyla böyleydi. Rutter, "Her şey bittikten sonra Ken ve ben yeşil odaya geri döndük ve 'Sanırım bize karşı oynamak böyle bir şey' diye düşündüm," dedi.

Watson kazandıktan sonra Jennings, bilgisayarı programlayan kendi verilerinin ne kadar değerli olduğunu anlatmak için can atan IBM mühendisleri ve yöneticileriyle dolup taştı. Jennings, "'Kendini harika hissetmelisin. Watson'da senden çok var' diyorlardı," dedi. "Bu beni daha iyi hissettirmedi."

Watson oyunlarının adil olup olmadığı konusundaki süregelen anlaşmazlık, şampiyonluk modunun dağıtımında belirginleşiyor.

Sadece televizyonda yayınlanan maçlar için etkinleştirilmiş olması, Trebek de dahil olmak üzere birçok kişinin eleştirisine yol açtı. Baker, Watson hesaplaşmasından iki gün sonra Trebek ile konuştu ve sunucu, bunu bir yem ve değiştirme olarak gördüğü için öfkeliydi. Baker'a, "Bence IBM'in yaptığı yanlıştı," dedi. "Beni gerçekten sinirlendirdi.

"IBM'in bunu yapmasına gerek yoktu," diye devam etti Trebek. "Muhtemelen zaten kazanırlardı. Ama korkmuşlardı."

Jennings ve Rutter, Trebek'in Baker'a söylediklerini okuduklarında çok etkilendiklerini söylüyorlar: "O adamlara üzüldüm, çünkü biraz kazıklandıklarını hissettim."

"Bizi çok koruyordu ve bu, Alex'in nasıl bir adam olduğunu çok iyi anlatıyordu," dedi Rutter. "Gerçekten de yarışmacıların, kendisinin değil, yarışmacıların şovun yıldızı olduğuna inanıyordu," - Trebek'in tekrarlamayı sevdiği bir özdeyiş. "Hepimizin artık bildiği kadar yanlış," diye ekledi.

Rutter için, IBM'in Watson'ı antrenman maçlarında bilerek kötü –ya da en azından olabileceği kadar iyi değil– oynatması hissinden kurtulmak zor. "Kesinlikle baskıcı bir oyundu," dedi. "Özellikle son saniyelerde, Ken, ben ve diyelim ki Jerome [Vered] arasında beklendiği gibiydi," dedi üç antrenman maçı için. "Olağanüstü bir şey yoktu. Sadece iyi bir Jeopardy! oyuncusu gibiydi."

IBM'e göre, televizyonda yayınlanan maçlardan önceki günkü antrenman seansları, Jennings ve Rutter'ın Watson'ın oyun tarzını keşfetmeleri için bir fırsat değildi: Baker'a göre, "makineyi ve zili test etmek" içindi. Baker'a göre, şampiyonluk moduyla ilgili hiçbir şey Watson'ın zili zamanlamasını etkilememeliydi; hem Jennings hem de Rutter, ilk denemelerinde bilgisayarın yanıp sönen sinyal cihazını açık ara geride bırakmışlardı.

Yine de kesin olarak bilmek zor. Baker, antrenman maçları hakkında bana "Alex'in bakış açısından, Watson göründüğünden daha aptal görünüyordu," dedi. "Benim gibi, muhtemelen yazılımın eski bir sürümünü oynuyorlardı." Watson'ın vızıldama yeteneğinin, geçici parmakla bile, çok hızlı olup olmadığı sorulduğunda Baker, "Sanırım sonunda öyleydi," dedi.

Rutter'a göre, kendisini ve Jennings'i mahveden şey zil zamanlamasıydı. "Evet, teorik olarak ve bazen oluyordu, eğer Ken ve ben doğru yolda olsaydık, Watson zil çaldığında Watson'dan önce sahaya çıkabilirdik," dedi Rutter. "Ama asıl zil olayı hız artı istikrar ve tam bir istikrardı. Ve bir insanın zamanlama konusunda bu kadar istikrarlı olması mümkün değil."

"Kaybetmesi söz konusu olamazdı" dedi.

Rutter, meseleyi daha da karmaşık hale getiren şeyin, hem kendisinin hem de Jennings'in -en azından insanlar için- buzzer savaşlarını kazanmada çok iyi olmaları olduğunu söyledi. Rutter, "Bir buzzer canavarı ve iki kişi daha varsa, diğer iki kişi birbirinin canını alır," dedi. "Şöyle bir şey: Tamam, bir insan bu konuda bilgisayarın başına geçebilir, ama hangisi olacak? Ken veya ben gerçekten kötü olsaydık, belki iyi olanın bir şansı olabilirdi, ama ikimiz de oynadığımız için, hiçbir yolu yoktu."

Rutter, zil sesiyle ilgili itirazlarına rağmen, bölümü sevgiyle anıyor. "Şunu açıkça söyleyeyim: Onları hile yapmakla suçlamıyorum," dedi. "IBM'in bu noktaya gelmesini sağladığı için tüm takdiri hak ediyorum, çünkü yapay zeka olması gerektiği kadar iyi çalışmasaydı, Watson belirli kategorilerde veya ipuçlarında vızıldayarak gelmezdi. Yani burada şan ve şöhreti çalmaya çalışmıyorlar. Watson kesinlikle söylediğini yaptı."

"IBM için iyiydi, Jeopardy! için iyiydi, benim için iyiydi, Ken için iyiydi," dedi. "Herkes kazanır."

Herkes bundan o kadar emin değil ; Jeopardy! hayranları bu konuda her zamankinden daha hararetli bir şekilde tartışıyor ve Jennings bile şüphe duyuyor. "Bugüne kadar hâlâ bilmiyorum; bunun sebebi Watson'ın geride kalması mı, yoksa onu turbo moduna almamaları mı?" dedi, antrenman maçlarındaki galibiyetleri hakkında. "Watson'la ne kadar yakın olduğumuzu sandığımızı bilmiyorum, o da bilerek yavaş vızıldıyor ve yanlış tepki veriyordu."

Ya da daha sıradan bir şey olabilirdi: Jeopardy!' ye katılmaya çalışan birçok yarışmacının zaferini elinden alan o korkunç durum. "Kategoriler arasında iyi bir dağılım elde edememiş olabilir," dedi.

Son zamanlarda, zil sesi hızı tartışması, tüm kaynaklar arasında Jeopardy!'nin kendisi sayesinde biraz cazibesini yitirdi. Uzun yıllar boyunca, program etrafındaki yaygın kanı, elit oyuncuları diğerlerinden ayıran şeyin zil sesi hızı olduğuydu. Çoğu yarışmacı çoğu zaman cevapların çoğunu bilir, diyen tipik bir nakarat vardı -geçmiş yıllarda ben de aynı şeyi yazdım- ve bu nedenle kimin zil sesi çalarak parayı kazanacağı, kimin önce zil sesini çalabileceğine bağlıydı.

Ancak son zamanlarda, uzun süredir kabul gören bu gerçek sarsıldı: Program, buzzer denemeleriyle ilgili istatistikler yayınlamaya başladı ve bazı yarışmacıların, özellikle de oyunun üst kademelerindekilerin, diğerlerinden çok daha sık zile bastığını ortaya koydu. Buzzer'ın önemi yok değil; sadece daha önce inanıldığından çok daha az önemli; bu da konu uzmanlığının önemini yeniden ortaya çıkaran bir değişiklik.

As host, it now often falls to Jennings to study particularly striking data about buzzer use during games, noting players whose thumb-forwardness seems to point to especially broad trivia knowledge bases. “Now that we keep better stats at Jeopardy! , we know that the buzzer is not always the game changer,” he said.

Jennings is circumspect about the perpetual controversy around Watson. “All the things that bother people about Watson never bothered me, because those advantages are available to a human player as well,” he said. “I could sandbag in a practice match and then try something totally different during the game. That's not forbidden.

“Is it unfair that Watson could buzz faster than any human? No, that's just an advantage we know that computers have,” he said. He has seen the many complaints about Watson's speed, and the frequent suggestion that the computer's timing should have been slowed or perhaps swapped for a randomized selection of human response times.

“Maybe it would have been a better test of question answering, but it would not have been a better test of Jeopardy! play,” Jennings said. “That's just something a computer is good at in the Jeopardy! domain, the same way that a human is better at lateral thinking. I wasn't going to hamstring my lateral thinking to play more like a computer, so it didn't seem unfair to me that Watson had advantages.”

To this day, Jennings' Reddit username is “WatsonsBitch.”

Not long after ChatGPT's 2022 launch, Jennings wondered: How might the new generation of large language models do against Jeopardy! material?

During his reign as Jeopardy! host, Trebek typically arrived at the soundstage bright and early to review the upcoming tape day's clues in his office. Jennings, who has hosted the show since 2021, prefers to look clues over the night before, and thus found himself in a hotel room with a sheaf of fresh game material, prepped and vetted by Jeopardy! 's writers but never posted online or, indeed, seen by anyone except a handful of the show's staff.

Jennings pulled up ChatGPT and first tried entering clues from shows that had already aired. The LLM nailed them effortlessly. Then he put in some of the hot-off-the-presses clues that contestants would face the following day. Once again, ChatGPT was speedy and right every time. Jennings, who has long written his own trivia prompts outside Jeopardy! (including at Slate and, most recently, in a book published this summer), eventually tried submitting his own.

“If I made up a very esoteric, Jeopardy! -style wordplay, lateral-thinking bit of craziness—I could get crazy enough that it could get beat, but hardly ever,” Jennings said. “I had to write the world's most annoying Jeopardy! clues just to try to get it to be wrong. Maybe Watson was buzzing about half the time or slightly more. Today, humans would not have a chance. The equivalent algorithm would be buzzing practically 100 percent of the time.