摘要: 原標(biāo)題:商湯科技發(fā)布多模態(tài)多任務(wù)通用大模型書生(INTERN)2.5 近日,商湯科技發(fā)布多模態(tài)多任務(wù)通用大模型書生(INTERN)2.5。其擁有30億參數(shù),是物體檢
原標(biāo)題:商湯科技發(fā)布多模態(tài)多任務(wù)通用大模型“書生(INTERN)2.5”
近日,商湯科技發(fā)布多模態(tài)多任務(wù)通用大模型“書生(INTERN)2.5”。其擁有30億參數(shù),是物體檢測(cè)標(biāo)桿數(shù)據(jù)集COCO中唯一超過(guò)65.0 mAP的模型,“書生2.5”的圖文跨模態(tài)開放任務(wù)處理能力可為自動(dòng)駕駛、機(jī)器人等通用場(chǎng)景任務(wù)提供高效精準(zhǔn)的感知和理解能力支持。
據(jù)介紹,“書生”由商湯科技、上海人工智能實(shí)驗(yàn)室、清華大學(xué)、香港中文大學(xué)、上海交通大學(xué)于2021年11月首次共同發(fā)布,并持續(xù)聯(lián)合研發(fā)。目前,“書生2.5”多模態(tài)通用大模型已在商湯參與的通用視覺開源平臺(tái)OpenGVLab開源。
據(jù)悉,“書生2.5”可通過(guò)文本來(lái)定義任務(wù),從而靈活地定義不同場(chǎng)景的任務(wù)需求,并根據(jù)給定視覺圖像和任務(wù)的提示性語(yǔ)句,給出相應(yīng)的指令或作答,進(jìn)而具備通用場(chǎng)景下的高級(jí)感知和復(fù)雜問(wèn)題處理能力,比如圖像描述、視覺問(wèn)答、視覺推理和文字識(shí)別等。
在自動(dòng)駕駛和居家機(jī)器人等通用場(chǎng)景下,“書生2.5”可輔助處理各種復(fù)雜任務(wù)。例如,在自動(dòng)駕駛場(chǎng)景中,可以大幅提升場(chǎng)景感知理解能力,準(zhǔn)確輔助車輛判斷交通信號(hào)燈狀態(tài)、道路標(biāo)志牌等信息,為車輛決策規(guī)劃提供有效信息輸入。
此外,“書生2.5”可根據(jù)文本快速檢索出視覺內(nèi)容,例如,可在相冊(cè)中返回文本所指定的相關(guān)圖像,或是在視頻中檢索出與文本描述最相關(guān)的幀,提高視頻中時(shí)間定位任務(wù)的效率。此外還支持引入物體檢測(cè)框,根據(jù)文本返回最相關(guān)的物體,實(shí)現(xiàn)開放世界視頻或圖像中物體檢測(cè)及視覺定位。
原標(biāo)題:任正非再次力挺英語(yǔ):稱英語(yǔ)是華為工作語(yǔ)言 據(jù)ICPC(國(guó)際大學(xué)生程序
公司2024-11-01 22:50:58
原標(biāo)題:離開OpenAI和特斯拉后,他創(chuàng)辦了一家AI教育公司 7月17日,OpenAI創(chuàng)始成員
公司2024-07-18 12:10:13
原標(biāo)題:粉筆2023年經(jīng)調(diào)整利潤(rùn)4.5億,CEO張小龍:做高品質(zhì)高效率的事,穿越周
公司2024-05-01 16:43:56
原標(biāo)題:學(xué)而思悶聲擴(kuò)張研學(xué)版圖 學(xué)而思在研學(xué)領(lǐng)域有了新動(dòng)態(tài)。4月16日,北
公司2024-04-17 19:55:00
原標(biāo)題:知乎職業(yè)教育之路,再進(jìn)一步 1月11日,知乎舉辦主題為「啟程!未來(lái)
公司2024-01-13 16:43:49
原標(biāo)題:良師新文道:重塑考研培訓(xùn)格局鑄就教育領(lǐng)域的新標(biāo)桿 在 2023 年,隨著考
公司2024-01-02 20:24:52
原標(biāo)題:博實(shí)樂(lè)教育2023財(cái)年凈虧損3.87億元,海外學(xué)?;謴?fù)至疫情前水平 11月
公司2023-11-30 11:16:44
原標(biāo)題:教培行業(yè)至暗時(shí)刻已過(guò) 多家教培機(jī)構(gòu)重新迎來(lái)業(yè)績(jī)高增長(zhǎng) 經(jīng)歷了202
公司2023-11-28 22:30:22