clip多模態(tài)模型 文章 最新資訊

從隱空間認識CLIP多模態(tài)模型

• 1 前言AIGC可生成的內(nèi)容形式包含文本( 文句)、圖像、音頻和視頻。它能將文本中的語言符號信息或知識，與視覺中可視化的信息( 或知識) 建立出對應的關聯(lián)。兩者互相加強，形成圖文并茂的景象，激發(fā)人腦更多想象，擴大人們的思維空間。其中，最基礎的就是文本(Text) 與圖像(Image) 之間的知識關聯(lián)。本篇來介紹文本與圖像的關聯(lián)，并以CLIP 模型為例，深入介紹多模態(tài)AIGC 模型的幕后架構，例如隱空間(Latent space) 就是其中的關鍵性機制。2 簡介CLIP模型在2020 年，OpenAI 團隊
• 關鍵字： 202305  從隱空間  CLIP多模態(tài)模型