向量數據庫這杯“啤酒”與“泡沫”
就像啤酒注定要有泡沫,每一場淘金熱都不缺被捧上了時代風口的人。
(資料圖片僅供參考)
大模型這一波熱潮中,向量數據庫就是那個幸運兒。
一方面,技術層面并沒有太大突破。向量數據庫并不是一種特別新的數據庫技術,在 AI 領域已經應用了七八年,谷歌在 2015 年就宣布使用 RankBrain 語義檢索來處理搜索任務。相比 N 家的卡、液冷的算、全光的網、升級的存,向量數據庫在技術方面并沒有特別亮眼的突破。
而另一方面,向量數據庫的投資熱潮又特別旺盛。在上半年成了創業公司、云計算廠商、老牌數據庫公司,以及投資人們 " 群起而攻之 " 的風口,Pinecone、Chroma 和 Weviate 等向量數據庫初創公司都獲得了融資,有的融資額高達上億美元。這在全球經濟不明朗的投資形勢下,還是非常亮眼的成績。
不同于 GPU 卡那樣短期內需求堅挺、供不應求,加上摩爾定律的約束,即使有泡沫,也是鐵做的。也不同于存算網這類 " 新基建 ",長期投入的戰略價值,得到了廟堂和民間的一致重視。
向量數據庫,更多是作為一種 AI 基礎技術和產品,開始為大眾所知曉。僅憑這樣,就在投資市場上一飛沖天,多少有點讓人不安。加上最近,大訓模型的熱度開始降溫,ChatGPT 訪問量下降,更多大模型已經到地里田間礦井 " 干活兒 " 去了。
不禁讓人好奇,隨著大模型的風口下沉,向量數據庫的投資概念還能飛多久,會不會倏忽而來,倏忽而去,留下喝了 " 一嘴泡沫 " 的公司和投資人,在風中凌亂呢?
我們就來好好品一品,這一杯啤酒和泡沫。
技術的啤酒
訓大模型、用大模型,離不開一系列 AI 基礎設施,所以,作為基礎設施之一的向量數據庫,確實有點東西。引入向量數據庫,是能喝到真材實料的 " 啤酒 " 的。
這就有必要先說說這個技術本身。
數據庫不用多說,是必不可少的 IT 基礎設施,用于存儲和查詢各種數據,可以看作是數據的 " 硬盤 "。那么,向量數據庫就是更適合 AI 體質的 " 硬盤 ",有幾個特質來說明這一點:
1. 必要性。
向量數據庫,顧名思義就是專門用于存儲和管理向量數據。作為一種數據結構,每個向量都包含多個維度,每個維度代表不同的特征或屬性,比如圖像的顏色、文本詞匯的出現頻率等。而 AI 算法,要從圖像、音頻和文本等海量的非結構化數據中學習,提取出以向量為表示形式的 " 特征 ",以便模型能夠理解和處理。因此,向量數據庫比傳統的關系型數據庫,更適合 AI 應用。
2. 高效率。每個元素都有一個索引,便于訪問或修改數值?;诖?,向量數據庫可以通過將分組和索引,快速找到與給定查詢最接近的嵌入,實現高效的相似性搜索,同時減少存儲和計算成本。
相比傳統單機插件式數據庫,向量數據庫的檢索規??梢蕴嵘叮С职偃f級每秒查詢(QPS)的峰值能力,同時延遲控制在毫秒級。
想象一下,如果沒有高效的搜索技術支持,一個大語言模型動輒數十億、上百億參數,只能處理有限數量的輸入數據,無法搜索更大的數據庫,那么在 AIGC、搜索、廣告推薦算法等任務的性能表現就會受限。
一個公開數據是,通過使用云向量數據庫,QQ 音樂人均聽歌時長提升 3.2%;騰訊視頻有效曝光人均時長提升 1.74%;QQ 瀏覽器成本降低 37.9%,這些數據的變化就在于檢索效率、運行穩定性、運營效率、推薦算法等有了較大的提升。
3. 需求大。
隨著產業智能化的加速,以及大模型和其他 AI 應用的爆發,各行各業的 AI 用例不斷增多,由此帶來了洶涌的數據洪潮和存算任務,向量數據庫嵌入向量的長度不受限制,具有良好的擴展性,可以根據 AI 用例和模型而變化,更好地處理大規模數據集。
而且,向量數據庫可以拓展大模型的時間邊界和空間邊界,讓大模型在訓練完成后,也可以訪問向量數據庫的最新信息,了解最近發生的事情。
總的來說,向量數據庫就是更適合 AI 體質的數據庫,在 AI 任務上效果拔群,在機器學習領域中日益流行。
那么問題來了,一些在 AI 領域積淀已久的科技大廠,如谷歌、微軟、Mate 以及 BAT 等大廠,都有向量數據庫的技術積累,也都可以向外輸出相關能力和產品。此外,一些基于開源技術的數據庫創業公司,如 Pinecone、Weaviate、Odrant、Chroma 近年來打開了市場知名度。
可以說,市場上并不缺乏向量數據庫的產品和解決方案。那么 2023 年,這杯技術啤酒,是怎么咕嘟咕嘟冒出泡沫的呢?
浪潮之巔的泡沫向量數據庫的市場現狀,說是 " 從 0 到 1",并不為過。
首先,大眾市場的認知度才剛剛打開。
此前,向量數據庫更多是 AI 企業在使用,今年才開始為大眾所熟知,這離不開一些 AI 相關企業的推波助瀾。今年 3 月的 NVIDIA GTC 大會上,黃仁勛首次提及向量數據庫,強調向量數據庫對大語言模型的重要性。
不是所有企業都有能力自建大模型所需要的基礎設施,通過 MaaS(模型即服務)業務來訓練應用大模型是更靈活的選擇,這就要求云廠商提供全?;A設施。
百度、京東、騰訊、華為等,都在自家的大模型完整基礎設施中,提到了向量數據庫。目前,云廠商的 MaaS 業務才剛剛開始走向市場,大模型的產業落地不是一蹴而就的,向量數據庫的接受度和規模究竟有多大,還是個未知數。
第二,向量數據庫的技術,還沒經歷 " 卷生卷死 " 的迭代。
Pinecone 是閉源的領跑者,其他競爭者要么是開源的,比如 Weviate,要么是巨頭,包括頭部云廠商和甲骨文、IBM 等老牌數據庫廠商,開始構建 AI 數據庫的產品和解決方案。
大廠扎堆競技,這意味著,如果技術沒有大的突破,就會陷入高密度的同質化競爭,從藍海快速進入紅海。而如果技術有顛覆式變革,很多技術壁壘不高、客戶認知不強的新入局創業者,很難跟開源生態或技術巨頭 PK,容易被大浪淘沙。
最后,向量數據庫的成本,還沒有降到 " 可規模復制 " 的程度。無論是自建向量數據庫,還是通過 MaaS 服務接入,都還達不到 " 付費可用 " 的程度。一般來說,企業需要先將非結構化的私密數據進行向量化,產生一個向量的矩陣,再存儲到向量數據庫里,來供大模型學習和檢索。這個過程涉及到大量的工程化,會耗費企業許多開發人員、時間成本。
這就需要云廠商或數據庫廠商,提供全鏈路的工具,來幫助企業完成整個數據向量化、大模型接入的工作,以及減少后續運維的難度。比如 Pinecone 就憑借良好的開箱即用的產品體驗,獲得了非常大的增長,B 輪估值達到 7.5 億美元。
谷歌云、騰訊云、京東云等也都基于內部應用的多年積累,推出了一系列面向外部的工具、框架和應用。但只是邁出了從無到有的第一步,真正成熟還需要讓各家 " 卷起來 "。
可以看到,現在這個階段,熱捧向量數據庫,確實有 AIGC、大模型、云服務等多方面的現實需求,但從 " 概念普及 " 到 " 真正可用 " 之間,還有不短的距離。這之間的地帶,就是泡沫生長的地方。
江湖路遠,風高浪急,沒有想清楚的創業公司或行業用戶,還是別貿然 " 帶資進組 " 了。
啜飲時代的精釀
如果你是數據庫廠商,或者是著急布局大模型和 AI 應用的企業,希望早點將啤酒喝到嘴里,怎么辦呢?
篤定遠一點的未來,有些賽道的泡沫比例是相對少的,需求格外旺盛。
市場方面,國產化替代是不錯的選擇。科技博弈背景下,加上我國數據庫產業的日益繁榮和技術突破,金融、電信、能源、交通等關鍵基礎行業的企業,在數據庫選型時,都開始傾向于國產,以保障數據的穩定性和安全性。
國外廠商在向量數據庫上有著更早的探索和積累,國產數據庫要補齊短板是需要時間的。
目前,BATH 這類實力較強的國內科技企業,沉淀了向量數據庫的核心自主技術,與其合作研發和定制化開發,針對某些具體場景,提供特定優化的向量數據庫產品,加入國產化替代的賽道是成本更低、風險更可控、市場需求明確的選擇。
策略方面,加入云生態不要獨行。
鑒于向量數據庫的商業化前景還不明朗,有業內人士表示,與其投資新的向量數據庫項目,還不如關注現有數據庫中,有哪些加上向量引擎可以變得更加強大。
云數據庫就是其中之一,上云用數賦智是大勢所趨,很多政企客戶往往會選擇公有云或行業云來滿足其業務需求,將數據遷移到云上,對云數據庫的關注度和接受度上升。
騰訊云、華為云等大型云廠商,具有較高的品牌認知度和市場接受度,具有云原生、AI 原生的技術棧和產品體系,經歷了海量場景的淬煉和深度優化,和這類云生態一起掘金向量數據庫,是更穩妥的方式。
和 AI、大模型一樣,向量數據庫要品出味道,離不開時間的窖藏和醞釀。是在大訓模型的熱度下降后,像泡沫一樣湮滅,還是作為啤酒精釀沉淀下去,等待成為下一代數字基礎設施的剛需,被行業客戶所啜飲,是留給數據庫玩家和買家的選擇題。
責任編輯:hnmd003
相關閱讀
相關閱讀
-
向量數據庫這杯“啤酒”與“泡沫”
就像啤酒注定要有泡沫,每一場淘金熱都不缺被捧上了時代風口的人。大模
-
港股漲超 28%!抖音店鋪被關,但東方甄選好像賣的更好了……
近日,東方甄選自營產品抖音直播間疑似被關,引發關注。7月26日,抖音
-
回歸 OPPO 兩年,一加贏了銷量,輸了品牌
如果以銷量論之,一加固然贏得了勝利,但不能忽視的是,智能手機紅利消
-
一家頭部疫苗 Biotech,“只值” 1.3 億美金
圖片來源@視覺中國文|氨基觀察一家biotech想要成功,除了必須要有核心
-
美國人去歐洲要付“簽證費”?特朗普:若當選總統將結束這種情況
財聯社7月28日訊(編輯夏軍雄)美國前總統特朗普又在給他的支持者畫餅
-
牛市旗手集體爆發,2000 億龍頭罕見漲停!下周指數反彈能否延續?
財聯社7月28日訊,大盤全天低開高走,三大指數均漲超1 5%,上證50指數
-
閉店數遠超同行,缺“錢”的庫迪自建咖啡基地靠譜嗎?
圖片來源@視覺中國文|翟菜花專欄今年的現制飲品市場,開店成為熱門關鍵
-
港股漲超 28%!抖音店鋪被關,但東方甄選好像賣的更好了……
近日,東方甄選自營產品抖音直播間疑似被關,引發關注。7月26日,抖音
-
體驗手作魅力,增強團隊凝聚力!寶山這里開展社工團建活動
夏日時光流光年華彩繪幸福為進一步增強社區工作者團隊凝聚力,近日,寶
-
憶母校往事 (3)
照片三下面這張照片中,左下角是一口壓水井,我對它太熟悉了。在一
-
雙通道內存可以隨便插?你不對勁!
雙通道內存可以說是核顯平臺的必備,而對于要求高的游戲玩家來說,雙通
-
寶馬集團新測試中心正式啟用 最大測試場地:25公里+6條賽道
近日,寶馬集團宣布正在加速開發L3級自動駕駛功能,并計劃于2023年底或
-
學平險多大孩子可以買?好處有哪些?
一般來說,學平險適用于3歲至18歲的學生。 具體的購買年齡限制可能因
-
養老保險要交多少年才可以領錢?是怎么交的呢?
連續繳納滿15年。 根據我國現行的養老保險制度,一般情況下,參加養老
-
醫療險需要交多少年?怎么交?
醫療險的交費年限是根據個人的需求和經濟狀況來確定的。 一般來說,醫
-
孩子住院先報醫保還是學平險?哪個報銷比例高?
一般來說,先報醫保再報學平險是比較合理的選擇。 首先,家長可以將孩
-
酒駕死亡可以享受意外保險嗎?怎么賠?
不可以。根據我國的法律規定,酒駕是一種違法行為,而保險公司通常不會
-
首批銀行理財半年報出爐,權益投資也虧錢,固收仍是“心頭好”
文|記者黃宇昆近日,蘇銀理財、徽銀理財、恒豐理財先后披露了2023年上
-
不到40秒下線一臺車!特斯拉上海工廠刷新紀錄
不到40秒下線一臺車!特斯拉上海工廠刷新紀錄蓋世汽車訊據TESLARATI報
-
自駕車隊擅自穿越野駱駝保護區 警方通報:3人死亡1人失蹤
近日,一自駕車隊自敦煌市出發,未經批準穿越若羌境內國家級野駱駝自然
-
碧桂園:用于兌付“19碧地02”的22億元資金已匯出
天天房產獲悉,碧桂園已7月27日匯出用于償付將在8月1日到期的人民幣債
-
一位北京白領,決心逃離預制菜
躲不開的預制菜在北京這座擁有2184萬人口的巨型城市里,人們可以沒有愛
-
TCL 華星參展 ChinaJoy 2023:頂級顯示技術、潮酷玩樂裝備紛紛亮相
7月28日,第二十屆ChinaJoy在上海新國際博覽中心正式開幕,為期四天的
-
預制菜線下專門店,是新藍海還是天坑?
圖片來源@視覺中國文|紅餐網越來越多企業盯上了預制菜的線下生意。預制
-
100 多萬一公斤,還供不應求?
一頭牛全身上下最值錢的是什么?不是牛腱子,也不是牛肚,而是牛的膽結
-
《好聲音》廉頗老矣,母公司如何轉身?
圖片來源@視覺中國文|文娛價值官,作者|陳桐,編輯|美圻鐵打的《中國好
-
誰在推價格低至 3 元一個的車輪餅加盟?
圖片來源@視覺中國文|紅餐網一款來自臺灣的街頭小吃,今年以來,在全國
-
電動汽車充電價格上漲的邏輯分析:這三大因素“推波助瀾”
圖片來源@視覺中國文|能鏈研究院近日,電動汽車車主們開始躁動起來,因
-
兩大芯片公司“互懟”!樂鑫科技稱同行誤導投資者,博通集成回應……
追蹤市場熱點,歡迎關注中新經緯《董秘請回答》欄目中新經緯7月28日電(
-
A 股放量大漲!大金融板塊爆發,“牛市旗手”掀漲停潮
中新經緯7月28日電周五,A股三大股指低開盤整,盤中持續發力上沖。兩市
精彩推薦
閱讀排行
精彩推送
- 7月28日中興商業漲停分析:新零...
- 甘肅2023二建考試查分入口
- 宏石激光去年業績降研發費率低 ...
- 新華人壽保險險種?
- 微信新功能“火”上熱搜!其實還...
- 眾安個人綜合意外險怎么樣?有哪...
- 北京職工醫療保險需要交多少年才...
- 五險一金需要交多少年可以停止?...
- 保險一般交多少年合適?價格是怎...
- 太平洋壽險手機退保需要哪些材料...
- 馬斯克被曝操控車輛算法 虛標特...
- 中國中鐵:累計新簽合同額同比增...
- 愛馬仕上半年收入66.98億歐元,...
- 人形機器人的未來,藏在人工智能...
- 讓人“賣腎”的 iPhone 4,在...
- 這屆新茶飲,讓消費者與紙片人談...
- 豐田擬出售約 2500 億日元 KD...
- 玄派新款玄機星游戲本上架:R7 ...
- 半年狂賺 207 億!寧德時代半...
- 《好聲音》廉頗老矣,母公司如何...
- 今年上半年 GDP 十強城市出爐
- 滬指收盤上漲 1.84%,創業板指...
- 聚焦“兩癌”篩查 呵護女性健康...
- 高質量發展調研行|“鄉村合伙人...
- 金條100g價格今天多少一克(2023...
- 4 5英寸的碗有多大直徑(4 5英...
- 中宏宏運星年金保險是什么?怎么...
- 新鄉醫療保險必須交夠多少年?要...
- 個人商業醫療保險一年多少錢?怎...
- 個人意外險最高保額是多少錢?最...