PaLM-E模型集成了視覺(jué)和語(yǔ)言模態(tài)，從而實(shí)現(xiàn)機(jī)器人自主控制，使其能夠根據(jù)人類(lèi)語(yǔ)音命令執(zhí)行各種任務(wù)，無(wú)需再培訓(xùn)。
例如，如果機(jī)器人被命令“從抽屜里給我拿米片”，PaLM-E將根據(jù)命令及其視野迅速制定行動(dòng)計(jì)劃。然后，移動(dòng)機(jī)器人平臺(tái)及其控制的機(jī)械臂將完全自主地執(zhí)行動(dòng)作。PaLM-E 的工作原理是通過(guò)裝載在機(jī)器人本體上的攝像頭查看周?chē)h(huán)境，這意味著無(wú)需人工先對(duì)視覺(jué)數(shù)據(jù)進(jìn)行標(biāo)注。據(jù)谷歌研究人員表示，PaLM-E 在執(zhí)行任務(wù)時(shí)還可以對(duì)環(huán)境變化做出反應(yīng)。例如，盡管有人拿走了機(jī)器人本來(lái)要去拿的米片，這些機(jī)器人還是可以觀察到這些米片被拿到了哪里，并且可以再行拿回給到原本需要的人。

日前，微軟的研究人員公布了一款可以進(jìn)行視覺(jué)識(shí)別和自然語(yǔ)言處理的多模態(tài)模型——Kosmos-1。該模型整合了不同的信息呈現(xiàn)模式，如文本、音頻、圖像和視頻，研究團(tuán)隊(duì)認(rèn)為這是通向通用人工智能的關(guān)鍵。研究人員在學(xué)術(shù)論文《語(yǔ)言不是你的全部——將認(rèn)知與語(yǔ)言模型結(jié)合》中寫(xiě)道："作為智能的一個(gè)基本部分，多模態(tài)感知是實(shí)現(xiàn)人工通用智能的一個(gè)必要條件，在知識(shí)獲取和立足于現(xiàn)實(shí)世界方面，可將感知與語(yǔ)言模型結(jié)合起來(lái)。"具體來(lái)說(shuō)，Kosmos-1 模型可以自然地處理感知密集型任務(wù)和自然語(yǔ)言任務(wù)。這些任務(wù)包括視覺(jué)對(duì)話、視覺(jué)解釋、可見(jiàn)問(wèn)答、圖像說(shuō)明、簡(jiǎn)單的數(shù)學(xué)方程式、OCR 和帶有描述的零鏡頭圖像分類(lèi)等。語(yǔ)言學(xué)家喬姆斯基批評(píng)以ChatGPT為代表的大語(yǔ)言模型缺陷在劉瑜《民主的細(xì)節(jié)》中“對(duì)你罵罵罵不完”的“****斗士”喬姆斯基最近又找回了自己的本職：對(duì)以ChatGPT為代表的大語(yǔ)言模型缺陷進(jìn)行批判。
這位哲學(xué)家和語(yǔ)言學(xué)家曾在人工智能發(fā)展史上作出了偉大貢獻(xiàn)，包括發(fā)表《語(yǔ)言描述的三種模型》，這篇文章證明了有限狀態(tài)句法不能表達(dá)某類(lèi)語(yǔ)言，這是喬姆斯基分層的起源。
此次他和 Oceanit 人工智能總監(jiān) 、哲學(xué)家 Jeffrey Watumull 共同撰文發(fā)表在《紐約時(shí)報(bào)》上的批判依然聚焦在語(yǔ)言的缺陷上：“我們擔(dān)心最流行和最時(shí)髦的人工智能 —— 機(jī)器學(xué)習(xí)，將通過(guò)有根本缺陷的語(yǔ)言和知識(shí)概念納入我們的技術(shù)，從而降低我們的科學(xué)水平并拉低我們的道德規(guī)范?！?/span>對(duì)于喬姆斯基的觀點(diǎn)，斯坦福大學(xué)教授、NLP 領(lǐng)域著名學(xué)者克里斯托弗?曼寧表示：“他不是在針對(duì) ChatGPT 的某種算法錯(cuò)誤，而是針對(duì)了所有機(jī)器學(xué)習(xí)算法，且說(shuō)法有些夸張了”。

熱點(diǎn)事件

幾天前，“Twitter 崩了”的話題登上國(guó)外科技網(wǎng)站的頭版頭條。而其背后起因，是一位工程師配置錯(cuò)誤產(chǎn)生的連帶反應(yīng)導(dǎo)致，主要與 Twitter API 項(xiàng)目有關(guān)。系統(tǒng)崩了，不僅讓工程師們焦頭爛額，也讓馬斯克****雷霆。硅谷投資人，也是 Twitter 投資者的 Marc Andreessen 發(fā)布的一張顯示 Twitter API 崩了占據(jù)熱門(mén)的截圖下方，馬斯克生氣地寫(xiě)道，“API 的一個(gè)小改動(dòng)竟然產(chǎn)生了巨大的影響。代碼棧毫無(wú)理由地這么脆弱。最終需要徹底重寫(xiě)?！?/span>據(jù) Platformer 報(bào)道，一些現(xiàn)任員工很無(wú)奈，他們認(rèn)為 Twitter 的問(wèn)題至少部分要?dú)w咎于馬斯克掌管該公司之前的技術(shù)故障。但也有員工認(rèn)為，出現(xiàn)這樣的問(wèn)題主要在于馬斯克解雇了太多員工：“這就是解雇公司 90% 的人的后果”。

產(chǎn)業(yè)界Meta 擬裁減更多員工，計(jì)劃最快在下周完成據(jù)華爾街日?qǐng)?bào)中文網(wǎng)報(bào)道，Meta 計(jì)劃裁減更多員工，以致力于打造一個(gè)更高效的團(tuán)隊(duì)。Meta 公司一直在計(jì)劃努力扁平化組織，對(duì)管理人員進(jìn)行買(mǎi)斷，并對(duì)非必要團(tuán)隊(duì)進(jìn)行全員裁減。目前這一操作仍懸而未決。一些知情人士透露，新一輪裁員是由財(cái)務(wù)目標(biāo)驅(qū)動(dòng)，與 "扁平化 "是兩回事。2021年，扎克伯格就將重點(diǎn)轉(zhuǎn)向了元宇宙這一虛擬現(xiàn)實(shí)平臺(tái)，并將公司的名字從Facebook 改為 Meta。在元宇宙這塊，Meta 每年都要投入100 億美元的資金。在宏觀環(huán)境不佳的情況下，Meta 已經(jīng)看到公司廣告收入的放緩，這導(dǎo)致 Meta 公司的股價(jià)走下坡路。根據(jù)彭博社的報(bào)道，本次裁員計(jì)劃是在執(zhí)行官扎克伯格休第三個(gè)孩子的陪產(chǎn)假之前敲定的。 因此，Meta 公司一直在催促董事和副總裁快速制定裁員名單，計(jì)劃最快在下周完成裁員。

自動(dòng)駕駛自動(dòng)駕駛初創(chuàng)公司Embark Trucks計(jì)劃破產(chǎn)清算據(jù)外媒報(bào)道，自動(dòng)駕駛初創(chuàng)公司Embark Trucks 正在裁員 70%，并關(guān)閉了兩個(gè)辦事處。該公司在一份監(jiān)管文件中表示，周五約有 230 名員工被解雇，裁員預(yù)計(jì)將在第一季度和第二季度進(jìn)行。正如首席執(zhí)行官亞歷克斯·羅德里格斯在給員工的一封電子郵件中指出的那樣，痛苦可能還沒(méi)有結(jié)束，剩下的 30% 的員工將專(zhuān)注于結(jié)束運(yùn)營(yíng)。據(jù)羅德里格斯寫(xiě)道：“不幸的是，在徹底評(píng)估所有備選方案后，我們無(wú)法為目前的業(yè)務(wù)確定一條前進(jìn)的道路?！?/span>而此時(shí)據(jù)Embark Trucks 完成 SPAC（海外借殼上市）及拿下 51.6 億美元估值僅過(guò)去16個(gè)月。

AI人物LinkedIn創(chuàng)始人里德·霍夫曼退出OpenAI董事會(huì)LinkedIn創(chuàng)始人、Greylock合伙人里德·霍夫曼周五在一篇帖子中宣布，他將離開(kāi)OpenAI的非營(yíng)利性董事會(huì)。霍夫曼在帖子中表示，他希望投資于使用OpenAI軟件的公司，而這可能導(dǎo)致利益沖突。據(jù)其表示：“要清楚的是，從一開(kāi)始，OpenAI及其董事會(huì)就一直非常謹(jǐn)慎地監(jiān)控和避免任何沖突，但通過(guò)退出董事會(huì)，我可以積極主動(dòng)地為OpenAI和我支持的所有Greylock投資組合公司平息任何下游的潛在問(wèn)題?！?/span>