Blog
自動駕駛車隊召回後，新創公司Ghost Autonomy尋求突破，但專家持懷疑態度
自動駕駛車隊召回後，新創公司Ghost Autonomy尋求突破，但專家持懷疑態度
November 10, 2023
重點摘要：
新聞內文：
本週，Cruise在一起恐怖的行人事故後召回了其整個自動駕駛車隊，這導致加利福尼亞交通部（California DMV）暫停了公司在該州營運無人駕駛的出租車。與此同時，三藩市的活動家已經走上了街頭，以「無人駕駛汽車」為抗議手段，反對將該市用作新興技術的測試場所。
但有一家新創公司則表示，它擁有更安全的自駕車技術關鍵，並認為這個「關鍵技術」將能說服持懷疑態度的人。
「Ghost Autonomy」是一家為汽車製造商合作夥伴開發自動駕駛軟體的公司，本週宣布計劃開始在自駕車領域的應用探索多模式大型語言模型（LLMs）。為實現這一目標，Ghost已通過「OpenAI Startup Fund」與OpenAI合作，獲得了對OpenAI系統和Microsoft的Azure資源的早期使用權，Microsoft是OpenAI的緊密合作夥伴，以及500萬美元的投資。
Ghost的聯合創辦人兼執行長約翰·海斯（John Hayes）在一封電子郵件訪談中告訴TechCrunch：「LLMs提供了一種理解『長尾』的新方法，在當前模型難以應對的複雜場景中增加了推理能力」。「LLM在自動駕駛中的應用案例將隨著LLM變得更快速和更強大而不斷增加」。
但Ghost究竟如何將設計用於解釋圖像，並生成文本的AI模型應用於控制自動駕駛汽車呢？根據海斯的說法，Ghost正在試驗依賴多模式模型的軟體，以「進行更高複雜度的場景解釋」。根據車載攝影鏡頭拍攝的道路場景的圖片，它向控制汽車的硬體建議道路決策（例如「切換到右車道」）。
海斯說：「在Ghost，我們將努力調優現有的模型並訓練我們自己的模型，以最大程度地提高在道路上的可靠性和性能」。「例如，建築區域具有一些對於簡單模型來說可能難以駕馭的組成部分，例如臨時車道、持有變化標誌的交通警察，以及與其他道路用戶的複雜協商。LLMs已經顯示出能夠在與人類一樣的推理水平下處理所有這些變數」。
然而，我接觸的專家持懷疑態度。
華盛頓大學法律和數據倫理博士研究生奧斯·基斯（Os Keyes）通過電子郵件告訴TechCrunch：「Ghost正在將『LLM』用作市場行銷用語」。「基本上，如果您將此提案中的LLM替換為『區塊鏈』，然後將其送回到2016年，它會同樣合理，並且同樣明顯地會是一個負擔」。
基斯認為，LLMs只是用於自駕車的錯誤工具。他認為，它們並不是為這個目的而設計或訓練的，甚至可能是解決車輛自主性方面的一些未解決挑戰的效率較低的方法。
基斯說：「這有點像聽說你的鄰居一直在用一捆國庫券來支撐一張桌子。你可以這樣做，它確實比替代方案高級，但...為什麼要這樣做呢？」
倫敦國王學院的高級講師麥克·庫克（Mike Cook）同意基斯的總體評估。他指出，多模式模型本身遠未成熟；事實上，OpenAI的旗艦模型會編造事實，並犯下人類不會犯的基本錯誤，比如錯誤地複製文本和錯誤地獲取顏色。
庫克說：「我不相信在計算機科學中有所謂的銀子子彈」。「將LLMs置於如駕駛汽車這樣危險且複雜事情的中心是毫無道理的。世界各地的研究人員已經在努力尋找方法來驗證和證明LLMs在『回答作文問題』等相當普通的任務方面的安全性，將這種通常不可預測且不穩定的技術應用於自主駕駛至少是時機不對的，甚至是錯誤的」。
但海斯和OpenAI不會被阻止。
在一份新聞稿中，OpenAI的運營長兼OpenAI Startup Fund經理布拉德·萊特卡普（Brad Lightcap）被引用為說多模式模型「具有將LLM擴展到許多新用例的潛力」，包括自主性和汽車。他補充說：「透過結合影片、圖像和聲音來理解並得出結論，多模式模型可能創造了一種理解場景並導航複雜或不尋常環境的新方式」。
TechCrunch透過OpenAI的新聞關係發表了一些問題，但在出版時尚未收到回覆。
至於海斯，他認為LLMs可以使自駕車系統「全面理解駕駛場景」，並「利用廣泛的世界知識」來「應對複雜和不尋常的情況」。甚至他們以前未曾見過的情況。他聲稱，Ghost正在透過其開發車隊積極測試多模式模型的駕駛決策，並與汽車製造商合作「共同驗證」並將新的大型模型集成到Ghost的自主技術中。
海斯說：「毫無疑問，目前的模型還不太適用於汽車的商業用途」。「在提高其可靠性和性能方面還有很多工作要做。但這正是專門為這些通用模型進行研發的應用特定公司進行研發的市場的原因。像我們這樣擁有大量培訓數據並深刻了解應用的公司將大大改進現有的通用模型。模型本身也將得到改進。最終，自駕車將需要一個完整的系統來確保安全，具有許多不同的模型類型和功能。『多模式模型』只是幫助實現這一目標的一種工具」。
使用未經驗證的技術來承諾如此多，Ghost能否交付呢？看到像「Cruise」和「Waymo」這樣財力充裕且資源豐富的公司，在道路上測試自駕車多年後仍然遇到重大挫折的情況下，我其實不太確定。
新聞原址： https://techcrunch.com/2023/11/09/ghost-now-openai-backed-claims-llms-will-overcome-self-driving-setbacks-but-experts-are-skeptical/
- Cruise因一起嚴重行人事故而召回其自動駕駛車隊，加利福尼亞交通部暫停了其無人駕駛出租車的營運。
- 「Ghost Autonomy」宣布將探索使用多模式大型語言模型（LLMs）於自駕車領域，與OpenAI合作，獲得500萬美元投資。
- 專家對Ghost使用LLMs於自駕車技術持懷疑態度，認為這可能是一種效率較低的方法。
新聞內文：
本週，Cruise在一起恐怖的行人事故後召回了其整個自動駕駛車隊，這導致加利福尼亞交通部（California DMV）暫停了公司在該州營運無人駕駛的出租車。與此同時，三藩市的活動家已經走上了街頭，以「無人駕駛汽車」為抗議手段，反對將該市用作新興技術的測試場所。
但有一家新創公司則表示，它擁有更安全的自駕車技術關鍵，並認為這個「關鍵技術」將能說服持懷疑態度的人。
「Ghost Autonomy」是一家為汽車製造商合作夥伴開發自動駕駛軟體的公司，本週宣布計劃開始在自駕車領域的應用探索多模式大型語言模型（LLMs）。為實現這一目標，Ghost已通過「OpenAI Startup Fund」與OpenAI合作，獲得了對OpenAI系統和Microsoft的Azure資源的早期使用權，Microsoft是OpenAI的緊密合作夥伴，以及500萬美元的投資。
Ghost的聯合創辦人兼執行長約翰·海斯（John Hayes）在一封電子郵件訪談中告訴TechCrunch：「LLMs提供了一種理解『長尾』的新方法，在當前模型難以應對的複雜場景中增加了推理能力」。「LLM在自動駕駛中的應用案例將隨著LLM變得更快速和更強大而不斷增加」。
但Ghost究竟如何將設計用於解釋圖像，並生成文本的AI模型應用於控制自動駕駛汽車呢？根據海斯的說法，Ghost正在試驗依賴多模式模型的軟體，以「進行更高複雜度的場景解釋」。根據車載攝影鏡頭拍攝的道路場景的圖片，它向控制汽車的硬體建議道路決策（例如「切換到右車道」）。
海斯說：「在Ghost，我們將努力調優現有的模型並訓練我們自己的模型，以最大程度地提高在道路上的可靠性和性能」。「例如，建築區域具有一些對於簡單模型來說可能難以駕馭的組成部分，例如臨時車道、持有變化標誌的交通警察，以及與其他道路用戶的複雜協商。LLMs已經顯示出能夠在與人類一樣的推理水平下處理所有這些變數」。
然而，我接觸的專家持懷疑態度。
華盛頓大學法律和數據倫理博士研究生奧斯·基斯（Os Keyes）通過電子郵件告訴TechCrunch：「Ghost正在將『LLM』用作市場行銷用語」。「基本上，如果您將此提案中的LLM替換為『區塊鏈』，然後將其送回到2016年，它會同樣合理，並且同樣明顯地會是一個負擔」。
基斯認為，LLMs只是用於自駕車的錯誤工具。他認為，它們並不是為這個目的而設計或訓練的，甚至可能是解決車輛自主性方面的一些未解決挑戰的效率較低的方法。
基斯說：「這有點像聽說你的鄰居一直在用一捆國庫券來支撐一張桌子。你可以這樣做，它確實比替代方案高級，但...為什麼要這樣做呢？」
倫敦國王學院的高級講師麥克·庫克（Mike Cook）同意基斯的總體評估。他指出，多模式模型本身遠未成熟；事實上，OpenAI的旗艦模型會編造事實，並犯下人類不會犯的基本錯誤，比如錯誤地複製文本和錯誤地獲取顏色。
庫克說：「我不相信在計算機科學中有所謂的銀子子彈」。「將LLMs置於如駕駛汽車這樣危險且複雜事情的中心是毫無道理的。世界各地的研究人員已經在努力尋找方法來驗證和證明LLMs在『回答作文問題』等相當普通的任務方面的安全性，將這種通常不可預測且不穩定的技術應用於自主駕駛至少是時機不對的，甚至是錯誤的」。
但海斯和OpenAI不會被阻止。
在一份新聞稿中，OpenAI的運營長兼OpenAI Startup Fund經理布拉德·萊特卡普（Brad Lightcap）被引用為說多模式模型「具有將LLM擴展到許多新用例的潛力」，包括自主性和汽車。他補充說：「透過結合影片、圖像和聲音來理解並得出結論，多模式模型可能創造了一種理解場景並導航複雜或不尋常環境的新方式」。
TechCrunch透過OpenAI的新聞關係發表了一些問題，但在出版時尚未收到回覆。
至於海斯，他認為LLMs可以使自駕車系統「全面理解駕駛場景」，並「利用廣泛的世界知識」來「應對複雜和不尋常的情況」。甚至他們以前未曾見過的情況。他聲稱，Ghost正在透過其開發車隊積極測試多模式模型的駕駛決策，並與汽車製造商合作「共同驗證」並將新的大型模型集成到Ghost的自主技術中。
海斯說：「毫無疑問，目前的模型還不太適用於汽車的商業用途」。「在提高其可靠性和性能方面還有很多工作要做。但這正是專門為這些通用模型進行研發的應用特定公司進行研發的市場的原因。像我們這樣擁有大量培訓數據並深刻了解應用的公司將大大改進現有的通用模型。模型本身也將得到改進。最終，自駕車將需要一個完整的系統來確保安全，具有許多不同的模型類型和功能。『多模式模型』只是幫助實現這一目標的一種工具」。
使用未經驗證的技術來承諾如此多，Ghost能否交付呢？看到像「Cruise」和「Waymo」這樣財力充裕且資源豐富的公司，在道路上測試自駕車多年後仍然遇到重大挫折的情況下，我其實不太確定。
新聞原址： https://techcrunch.com/2023/11/09/ghost-now-openai-backed-claims-llms-will-overcome-self-driving-setbacks-but-experts-are-skeptical/