隨著業(yè)務(wù)的飛速發(fā)展，依托創(chuàng)新數(shù)據(jù)處理技術(shù)來為眾多企業(yè)提供云原生湖倉解決方案的數(shù)變科技 Databend，面臨著用戶日益增長的復(fù)雜數(shù)據(jù)處理需求。從 2023 年起便開始探索將大模型能力引入湖倉，對算力和 API 穩(wěn)定性提出了近乎苛刻的要求，基石智算CoresHub 提供 DeepSeek 穩(wěn)定的 API 調(diào)用服務(wù)，為 Databend 的能力創(chuàng)新筑牢了堅(jiān)實(shí)基礎(chǔ)。

業(yè)務(wù)創(chuàng)新必然擁抱 DeepSeek

Databend 是一款基于 Rust 開發(fā)，開源的新一代云原生數(shù)據(jù)湖倉，圍繞著大規(guī)模數(shù)據(jù)提供實(shí)時(shí)分析、復(fù)雜查詢以及數(shù)據(jù)湖倉的高效管理，處理的數(shù)據(jù)類型豐富多樣，涵蓋了結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，數(shù)據(jù)量動(dòng)輒以 PB 級別計(jì)算，需要對海量的實(shí)時(shí)數(shù)據(jù)進(jìn)行快速處理，為企業(yè)提供即時(shí)的決策支持。

DeepSeek-V3 作為一個(gè)通用 NLP 模型，適用于廣泛的應(yīng)用場景，能夠高效處理各種文本生成、摘要和對話任務(wù)，671B 滿血版本能提供更強(qiáng)大的功能和更準(zhǔn)確的結(jié)果，真正為 Databend 業(yè)務(wù)創(chuàng)新提供有效支持。Databend 通過 SQL 調(diào)用模式，將自身的數(shù)據(jù)處理能力與 DeepSeek 強(qiáng)大的自然語言處理和數(shù)據(jù)理解能力相結(jié)合，幫助用戶高效處理數(shù)據(jù)，挖掘數(shù)據(jù)價(jià)值。

基石智算提供的 DeepSeek 服務(wù)目前已經(jīng)在內(nèi)部質(zhì)量保證系統(tǒng)、AI 函數(shù)服務(wù)、非結(jié)構(gòu)化數(shù)據(jù)處理等國內(nèi)場景中，成功替代海外的 OpenAI 服務(wù)，在數(shù)據(jù)處理與分析、智能查詢與交互優(yōu)化、自動(dòng)化與智能化工作流等方面受益，減少了人工分析的時(shí)間和工作量。

>內(nèi)部質(zhì)量保障系統(tǒng)

為確保企業(yè)用戶在升級過程中受到的影響最小化，Databend 基于 DeepSeek 的 SQL 模式生成了一套冒煙測試（Smoke Test）集合。測試數(shù)據(jù)生成引擎的核心技術(shù)依賴于 DeepSeek 的強(qiáng)大數(shù)據(jù)處理能力，能夠根據(jù) SQL 模式生成更接近用戶真實(shí)業(yè)務(wù)場景的數(shù)據(jù)分布，尤其是容易觸發(fā)邊界問題的測試數(shù)據(jù)。該方式不僅提高了測試覆蓋率，還能更有效地發(fā)現(xiàn)潛在系統(tǒng)風(fēng)險(xiǎn)，為企業(yè)用戶提供更加可靠的質(zhì)量保障。

>AI 函數(shù)服務(wù)

Databend 為用戶提供了一系列 AI 函數(shù)（AI Functions）服務(wù)實(shí)現(xiàn) ETL，用戶可以直接在 SQL 中調(diào)用函數(shù)，利用 AI 能力從數(shù)據(jù)中挖掘更大價(jià)值。此前，Databend 全球服務(wù)均基于 OpenAI 的 API 支撐。但由于其僅支持海外用戶場景，在 DeepSeek-V3 發(fā)布后，Databend 將國內(nèi)場景替換為 DeepSeek，以更好滿足國內(nèi)用戶需求。

>非結(jié)構(gòu)化數(shù)據(jù)處理

Databend 的很多用戶在實(shí)際業(yè)務(wù)場景中，常常需要從非結(jié)構(gòu)化數(shù)據(jù)中提取實(shí)體信息并轉(zhuǎn)化為結(jié)構(gòu)化數(shù)據(jù)，挖掘其數(shù)據(jù)價(jià)值。Databend 利用 DeepSeek 的數(shù)據(jù)處理與分析能力，可以更高效地提取數(shù)據(jù)信息，并以 JSON 格式輸出。

基石智算CoresHub 提供的 DeepSeek- V3 671B 模型服務(wù)，不僅提供了兼容 OpenAI 接口規(guī)范的使用方式，而且支持 API 調(diào)用、一鍵云端部署和私有化部署方式。用戶僅需創(chuàng)建 API 密鑰，即可通過 AI 應(yīng)用或第三方客戶端完成對特定模型的調(diào)用訪問。

API 穩(wěn)定是數(shù)據(jù)交互的生命線

目前，Databend 在游戲、社交、金融、廣告、電商等多個(gè)行業(yè)領(lǐng)域中的企業(yè)級生產(chǎn)環(huán)境得到應(yīng)用，每天處理超過 1 億次查詢，管理超過 800PB 的分析數(shù)據(jù)，某些核心生產(chǎn)業(yè)務(wù)單表超過 PB 級。一旦 API 出現(xiàn)故障或不穩(wěn)定，就會影響 Databend 的對內(nèi)對外服務(wù)。特別是在對外服務(wù)中，無法為用戶提供 AI 函數(shù)，將影響用戶的業(yè)務(wù)連續(xù)性。因此，保證 API 服務(wù)的穩(wěn)定可靠，對 Databend 尤為重要。

基石智算深刻理解 Databend 對于 API 穩(wěn)定的需求，底層采用分布式架構(gòu)，能夠有效避免單點(diǎn)故障，并通過動(dòng)態(tài)流量調(diào)整，保障 API 始終以最優(yōu)性能運(yùn)行；監(jiān)控系統(tǒng)會對 API 關(guān)鍵性能指標(biāo)進(jìn)行實(shí)時(shí)跟蹤，一旦監(jiān)測到異常，專業(yè)運(yùn)維團(tuán)隊(duì)就會及時(shí)響應(yīng)。更重要的是，根據(jù)用戶反饋和業(yè)務(wù)發(fā)展需求，基石智算也會持續(xù)改進(jìn) API 的功能和服務(wù)質(zhì)量。

此次基石智算與 Databend 的密切合作創(chuàng)新，必將為雙方的深度協(xié)作與業(yè)務(wù)拓展奠定堅(jiān)實(shí)基礎(chǔ)，共同引領(lǐng)數(shù)據(jù)處理行業(yè)邁向新的高度。