2017年12月，一個(gè)星期五的晚上，倫敦醫(yī)療應(yīng)用開發(fā)商Babylon Health的創(chuàng)始人Ali Parsa，與自家的醫(yī)生坐下來進(jìn)行了一次交流。這位出生于伊朗的前銀行家，依靠該公司的高評(píng)分應(yīng)用，為Babylon融資了8500萬美元。這款應(yīng)用可以讓英國(guó)患者快速與醫(yī)生進(jìn)行視頻會(huì)診。在英國(guó)，國(guó)營(yíng)醫(yī)療保健為每個(gè)公民提供了高質(zhì)量的醫(yī)療服務(wù)，但是卻要耗費(fèi)很長(zhǎng)時(shí)間等候門診。這款應(yīng)用的出現(xiàn)改變了這一局面。

現(xiàn)在，Parsa希望通過添加一款人工智能聊天機(jī)器人，來進(jìn)一步提高效率和降低成本。Parsa承諾，該聊天機(jī)器人可以在沒有人類互動(dòng)的情況下，就常見疾病提供診斷建議。Babylon的應(yīng)用用戶將于12月享受到這款全新機(jī)器人的服務(wù)。在未來某個(gè)時(shí)候，英國(guó)國(guó)家健康服務(wù)機(jī)構(gòu)（NHS）的患者也將享受到相應(yīng)的服務(wù)。但問題是，根據(jù)這些醫(yī)生的交流，機(jī)器人給出的建議經(jīng)常是錯(cuò)誤的。

據(jù)一名現(xiàn)任和前任工作人員稱，為了證明他們的觀點(diǎn)，醫(yī)生們花了大約一天時(shí)間，主動(dòng)進(jìn)行了一次審計(jì)。據(jù)一位知情人士稱，他們發(fā)現(xiàn)，聊天機(jī)器人給出的100個(gè)最常見的結(jié)果中，約有10％至15％的結(jié)果，錯(cuò)過了更嚴(yán)重疾病的警告信號(hào)，或者完全就是錯(cuò)誤的。這些臨床醫(yī)生周五直接向Parsa進(jìn)行了匯報(bào)，希望推遲新的發(fā)布。他們提出了自己的理由，經(jīng)過一番談判，他同意推遲發(fā)布。

但是醫(yī)生們?nèi)匀桓械嚼�擾。對(duì)現(xiàn)任和前任Babylon工作人員以及外部醫(yī)生的采訪顯示，他們普遍擔(dān)心該公司匆忙部署了未經(jīng)仔細(xì)審查的軟件，并夸大了其有效性。

根據(jù)一位外部醫(yī)生展示的電子郵件，2018年4月，一家英國(guó)廣告監(jiān)管機(jī)構(gòu)要求Babylon刪除其網(wǎng)站上的一項(xiàng)聲明，該聲明宣稱其分流功能能夠100％的給出安全建議。該機(jī)構(gòu)同時(shí)援引了一項(xiàng)關(guān)于這一聲明的“獨(dú)立研究”。但是根據(jù)Babylon自己在2016年發(fā)表的研究論文，這項(xiàng)研究來自一次內(nèi)部測(cè)試，在測(cè)試中，它雇傭了專業(yè)演員扮成病人，并按照劇本進(jìn)行流程。

在那次周五會(huì)議后的六個(gè)月，Parsa在倫敦皇家醫(yī)學(xué)院舉行了一場(chǎng)盛大的直播活動(dòng)，宣布Babylon的新軟件——人工智能驅(qū)動(dòng)的聊天機(jī)器人——已經(jīng)達(dá)到了“全球醫(yī)療第一”的水平。Babylon展示了機(jī)器人在醫(yī)學(xué)檢查中的得分高于人類醫(yī)生的平均得分，并聲稱人工智能已經(jīng)達(dá)到了人類醫(yī)生的“同等準(zhǔn)確度”。當(dāng)時(shí)，多家媒體報(bào)道了這一成就。

布朗大學(xué)生物醫(yī)藥信息學(xué)教授Hamish Fraser表示，這一聲明是有問題的。他在英國(guó)主要醫(yī)學(xué)雜志《柳葉刀》最近的一篇文章中反駁了Babylon的聲明。他指出，Babylon的軟件只回答了50個(gè)檢查問題中的15個(gè)，并被允許對(duì)每個(gè)問題給出三個(gè)答案�！爱�(dāng)醫(yī)生做這個(gè)測(cè)試時(shí)，你會(huì)得到一個(gè)正確的答案，”他說。Babylon表示，它沒有試圖證明人工智能比醫(yī)生更好，Parsa也退出了這篇文章的預(yù)定采訪。

人工智能還沒有發(fā)展到可以替代（甚至可靠地協(xié)助）人類醫(yī)生的程度，這一點(diǎn)可能不足為奇。而傲慢的科技企業(yè)家對(duì)他們的產(chǎn)品進(jìn)行過高的宣傳，也并不是什么新現(xiàn)象。這一切都不太重要，但是Babylon與英國(guó)國(guó)家醫(yī)療服務(wù)機(jī)構(gòu)簽訂了兩份合同。英國(guó)國(guó)家醫(yī)療服務(wù)機(jī)構(gòu)是世界上最大的國(guó)有醫(yī)療系統(tǒng)之一。Babylon的GP At Hand應(yīng)用向3．5萬名NHS患者提供了視頻通話支持，并可以讓其訪問分流聊天機(jī)器人，以獲得是否就醫(yī)的建議。NHS還鼓勵(lì)200萬公民使用NHS 111： Online——一款由Babylon開發(fā)的應(yīng)用，主要用來代替NHS咨詢熱線。工作人員表示，NHS還沒有使用Babylon的診斷建議聊天機(jī)器人，但該公司已經(jīng)討論過將這一功能引入NHS應(yīng)用中。

NHS的動(dòng)機(jī)很明確，也很簡(jiǎn)單：它既想省錢，也想為病人帶來更好的健康結(jié)果。2020年，英國(guó)將在國(guó)家醫(yī)療系統(tǒng)上花費(fèi)近2000億美元，相當(dāng)于GDP的7％。自1950年以來，這一占比已經(jīng)翻了一番，因此英國(guó)迫切需要找到一種方法來控制成本，同時(shí)仍能提供被視為英國(guó)社會(huì)契約核心的福利。

減少急診室就診似乎是很合邏輯的，因?yàn)槊看尉驮\平均花費(fèi)NHS 200美元。在過去的一年里，NHS為此總共花費(fèi)了40億美元，而由于至少有150萬英國(guó)人在不需要的時(shí)候也會(huì)去急診室，導(dǎo)致候診時(shí)間不斷增加。如果Babylon的聊天機(jī)器人效果很好，將會(huì)對(duì)節(jié)省成本有很大的幫助。

但是，人們質(zhì)疑該軟件的有效程度。Babylon的一名工作人員稱，早期和當(dāng)前版本的聊天機(jī)器人，在大約30％的情況下會(huì)建議用戶去急診室；相比之下，撥打國(guó)家健康咨詢熱線111的人大約只有20％。不清楚有多少病人接受了聊天機(jī)器人的建議，Babylon表示自己并沒有跟蹤這些數(shù)據(jù)。

即使在診斷建議聊天機(jī)器人最終被修復(fù)，并于2018年1月發(fā)布給Babylon私人應(yīng)用用戶之后，一些Babylon醫(yī)生仍然對(duì)他們沒有看到開發(fā)過程中更嚴(yán)格的改革而感到擔(dān)憂。而在公司外部，發(fā)現(xiàn)的問題數(shù)量也越來越多。6月，一名正在Babylon應(yīng)用上測(cè)試新診斷聊天機(jī)器人的英國(guó)醫(yī)生發(fā)現(xiàn)了一個(gè)錯(cuò)誤：它錯(cuò)過了一個(gè)肺栓塞的癥狀。他在Twitter上發(fā)布了一段視頻，并向醫(yī)療監(jiān)管機(jī)構(gòu)MHRA進(jìn)行了投訴。根據(jù)該醫(yī)生分享的電子郵件和私人Twitter消息，這至少是他在過去一年半中第三次投訴聊天機(jī)器人軟件。據(jù)Babylon內(nèi)部消息來源稱，被MHRA記錄為事故的一些錯(cuò)誤，直到2018年11月，仍然存在于內(nèi)置聊天機(jī)器人的健康應(yīng)用上。MHRA以保密為由不予置評(píng)。

Babylon表示，MHRA要求其調(diào)查這些投訴，但“隨后沒有基于安全相關(guān)的理由展開正式調(diào)查”。當(dāng)被問及MHRA記錄的錯(cuò)誤時(shí)，Babylon堅(jiān)持認(rèn)為“任何臨床概率分析都不可能總是正確的”，并且“即使非常有經(jīng)驗(yàn)的醫(yī)生有時(shí)也會(huì)錯(cuò)誤地診斷”。

而在這一切正在發(fā)生的過程中，Babylon成功地將自己推銷為醫(yī)療系統(tǒng)過度擴(kuò)張的數(shù)字藥膏。該公司最大的粉絲之一是英國(guó)衛(wèi)生部長(zhǎng)Matt Hancock，他最近在一份由Babylon贊助的報(bào)紙副刊中宣稱，他“因使用這款GP at Hand應(yīng)用而出名”。

Babylon應(yīng)用的海報(bào)經(jīng)常出現(xiàn)在倫敦地鐵上。據(jù)Parsa稱，該公司正在預(yù)訂數(shù)千萬美元的收入，包括與NHS簽訂的GP at Hand合同（預(yù)計(jì)290萬美元）和NHS 111合作伙伴的收入。NHS England的發(fā)言人和Hancock沒有回應(yīng)置評(píng)請(qǐng)求。

一名前工作人員表示，Babylon軟件的最大缺陷之一是缺乏真實(shí)的臨床評(píng)估和跟蹤。使用聊天機(jī)器人的人真的去過急診室嗎？如果他們看了醫(yī)生，那診斷是什么？一名前員工表示：“目前還沒有找到能夠提供答案的系統(tǒng)�！盉abylon表示，其GP at Hand應(yīng)用在用戶使用聊天機(jī)器人24小時(shí)后會(huì)向他們發(fā)送信息。據(jù)一名用戶稱，應(yīng)用會(huì)詢問更多癥狀。

軟件是通過迭代開發(fā)的。開發(fā)人員構(gòu)建了一個(gè)應(yīng)用并將其發(fā)布，在不同的實(shí)時(shí)用戶群體上測(cè)試它，并在前進(jìn)的過程中不斷重復(fù)。這種硅谷心態(tài)，曾經(jīng)被馬克·扎克伯格總結(jié)為“行動(dòng)迅速，打破現(xiàn)狀”。但是開發(fā)新藥或醫(yī)療器械需要一種更慎重的方法，因?yàn)榛颊叩纳�命是懸而未決的。Babylon尚未在同行評(píng)審的醫(yī)學(xué)雜志上發(fā)表任何研究成果，而這一過程往往也是需要時(shí)間的。

該公司的首席醫(yī)療官M(fèi)obasher Butt堅(jiān)持認(rèn)為，在市場(chǎng)上部署之前，Babylon“經(jīng)歷了臨床醫(yī)生對(duì)產(chǎn)品許多許多輪的嚴(yán)格測(cè)試�！痹摴�司承認(rèn)它沒有進(jìn)行醫(yī)學(xué)研究，并稱未來進(jìn)行醫(yī)院研究時(shí)，它會(huì)在醫(yī)學(xué)雜志上進(jìn)行發(fā)表。