自研大模型新成果:螞蟻百靈大模型推出20億參數遙感模型 可用於地貌地物觀測解譯

封面新聞記者 張越熙

2月28日,記者獲悉,螞蟻集團推出20億參數多模態遙感基礎模型SkySense,這是螞蟻百靈大模型在多模態領域最新的研發成果。

SkySense在17項評測中均超過國際上最新的遙感模型

隨著人工智能的發展,大模型技術與衛星遙感技術相結合產生了新突破。SkySense是基於螞蟻百靈大模型平台能力開發的多模態遙感模型。SkySense在總計17項國際權威公開數據集進行了測評,其測試任務類型包括了土地利用監測、高解像度目標識別、地物變化檢測等7種常見遙感感知任務,並與國際上已發佈的包括IBM和NASA聯合研發的Prithvi等共18個全球主流同類模型做了測試結果比較。數據顯示,17項測評中SkySense均名列第一。

在剛剛公佈的CVPR2024論文入選結果上,SkySense的研究成果被收錄。CVPR是由IEEE舉辦的計算機視覺和模式識別領域的頂級會議,是國際計算機視覺三大頂會之一。

傳統的遙感影像理解技術,往往側重於針對單一模態單一任務建模,缺乏對多模態數據、時間序列、地理先驗知識的綜合建模和利用,限制了其在海量數據和多種任務中的泛化能力。SkySense則實現了文本、紅外光、可見光、SAR雷達多種模態、多解像度的時序遙感影像建模,在多樣化的任務中展現出優異性能。在百靈大模型多模態能力支援下,研發人員基於內部構建的19億遙感影像數據集進行預訓練,得到了20.6億參數量的模型SkySense,這也是迄今為止國際上參數規模最大、覆蓋任務最全、識別精度最高的多模態遙感大模型。SkySense可廣泛應用於城市規劃、森林保護、應急救災、綠色金融、農業監測等重要領域,目前通過螞蟻內部MEarth平台提供數據與識別服務。

據瞭解,螞蟻集團正在計劃開放Skysense模型參數,與行業共建,促進智能遙感技術與應用發展。