免费手机在线观看不卡A片视频_日本十八禁视频无遮挡_好吊色欧美一区二区三区四区_韩国18禁电影已婚的女人_久久久久久精品免费看_欧美在线视频免费观看_经典三级线在线观看_他添的我好湿好爽视频_日产久久视频

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

技嘉AI TOP ATOM工作站:一人一機(jī),搞定千億參數(shù)

0
分享至

在近期的本地AI部署討論中,一個核心痛點始終存在:要在桌面級功耗和體積下跑動千億參數(shù)大模型,往往需要在算力、內(nèi)存帶寬或易用性上做妥協(xié)。技嘉最新推出的AI TOP ATOM迷你工作站,直接對這一難題給出了回應(yīng)。它將NVIDIA GB10 Grace Blackwell超級芯片與128GB統(tǒng)一內(nèi)存塞進(jìn)了機(jī)箱,并聯(lián)合趨境科技預(yù)置了開箱即用的完整軟件棧。對于需要私有化部署、又不想自研運(yùn)維管道的開發(fā)者和中小企業(yè),這款產(chǎn)品提供了一個值得仔細(xì)考量的選項。



這臺150mm見方的機(jī)器,外觀上刻意與游戲硬件劃清了界限。銀灰色金屬機(jī)箱表面做了細(xì)磨砂處理,沒有透窗也沒有任何RGB光源。進(jìn)出風(fēng)口采用橫向柵格,內(nèi)部用強(qiáng)化筋維持結(jié)構(gòu)剛性,這種設(shè)計在保證風(fēng)道順暢的同時,把滿載運(yùn)行的風(fēng)噪控制在辦公環(huán)境可接受的范圍。整機(jī)最顯眼的標(biāo)識僅是正面右下角的GIGABYTE Logo,且同樣采用低調(diào)的蝕刻或暗色處理。



接口配置直接反映了它的使用場景。背部提供了三個USB 3.2 Type-C、一個用于240W供電的Type-C端口、一個HDMI 2.1a、一個萬兆RJ-45,以及一個NVIDIA ConnectX-7接口。后者值得單獨說明:通過這個接口可以直接連接兩臺AI TOP ATOM,將顯存和算力池化,從而支撐4000億參數(shù)以上的超大模型。對于需要逐步擴(kuò)展算力的開發(fā)團(tuán)隊,這種直連方式比萬兆網(wǎng)絡(luò)轉(zhuǎn)發(fā)效率更高,延遲也更低。



真正讓這臺機(jī)器區(qū)別于普通迷你主機(jī)的是內(nèi)部架構(gòu)。CPU與GPU不再分立,而是以NVIDIA GB10 Grace Blackwell超級芯片的形式封裝在一起。這顆芯片采用臺積電3nm工藝,將20個Arm v9.2核心(10個Cortex-X925加10個Cortex-A725)與Blackwell架構(gòu)GPU通過NVLink-C2C互聯(lián)。GPU部分包含6144個CUDA核心,但由于統(tǒng)一內(nèi)存架構(gòu)以及Blackwell Tensor Core對FP4精度的原生支持,其AI推理算力達(dá)到1000 TOPS。這意味著它可以單機(jī)運(yùn)行2000億參數(shù)的模型,這是同等CUDA數(shù)量的消費級顯卡做不到的,因為后者受限于獨立顯存容量。



內(nèi)存設(shè)計是整個方案的另一個關(guān)鍵點。技嘉AI TOP ATOM工作站配置了128GB LPDDR5x統(tǒng)一內(nèi)存,CPU與GPU共享這一地址空間,帶寬為273GB/s。在運(yùn)行GLM-4.5-Air這類106B模型時,F(xiàn)P4量化后的顯存占用約為68至69GB,剛好落在總?cè)萘康囊话胱笥?,留出了余量給Embedding或Rerank等其他模型實例并行運(yùn)行。實際測試中,500字長提示詞下的文本生成速度維持在20.96 tokens/s,4路并發(fā)時仍高于10 tokens/s。這種性能表現(xiàn)對于一臺功耗控制在140W左右的桌面設(shè)備而言,已經(jīng)超出了可用的基線。



軟件層面,技嘉與趨境科技的合作直接解決了本地AI部署最大的痛點:環(huán)境配置。設(shè)備出廠即預(yù)裝了趨境智問系統(tǒng),內(nèi)置智譜GLM-4.5-Air 106B模型。用戶通過瀏覽器訪問即可進(jìn)入管理平臺,這是一個圖形化的零代碼運(yùn)維界面,可以實時監(jiān)控GPU負(fù)載、顯存占用、Token消耗,并支持一鍵啟動或切換模型實例。實測中同時運(yùn)行LLM對話、Embedding和Rerank三個實例,系統(tǒng)自動分配資源無沖突。

面向日常使用的智問應(yīng)用平臺則覆蓋了AI對話、文檔閱讀、會議紀(jì)要、周報生成、長文寫作等功能。其中會議助手的實時記錄與行動項追蹤、AI閱讀模塊的多格式文檔摘要翻譯,均在實際工作中具備較高的使用頻率。所有處理均在本地完成,數(shù)據(jù)不離開設(shè)備,滿足企業(yè)對私有化部署的合規(guī)要求。



從實際體驗來看,AI TOP ATOM填補(bǔ)了一個長期存在的市場空白:它既不是需要專業(yè)技術(shù)團(tuán)隊耗時部署的機(jī)架式服務(wù)器,也不是缺乏大模型承載能力的普通迷你PC。對于需要運(yùn)行百億至千億參數(shù)模型的算法工程師、數(shù)據(jù)科學(xué)家,或者希望將AI能力內(nèi)嵌到業(yè)務(wù)流程但又不愿承擔(dān)云端數(shù)據(jù)風(fēng)險的中小企業(yè),這臺設(shè)備提供了明確的工程化路徑。它允許用戶在4到5分鐘內(nèi)從通電進(jìn)入模型推理狀態(tài),并且通過ConnectX-7接口保留了線性的算力擴(kuò)展能力。在本地AI從概念驗證走向?qū)嶋H生產(chǎn)的過渡期,這類軟硬一體、開箱即用的方案,可能是比自行攢機(jī)更理性的選擇。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
89歲謝賢被CoCo爆料,分手原因:他身體跟不上我,張柏芝也被牽連

89歲謝賢被CoCo爆料,分手原因:他身體跟不上我,張柏芝也被牽連

老赳說歷史
2026-05-14 13:45:45
朝韓所有溝通渠道“全面斷聯(lián)”,半島一夜之間拉響最高警報!

朝韓所有溝通渠道“全面斷聯(lián)”,半島一夜之間拉響最高警報!

叮當(dāng)當(dāng)科技
2026-06-20 02:34:45
奧巴馬開口狠批特朗普:打了15周伊朗,花完錢又回到原點

奧巴馬開口狠批特朗普:打了15周伊朗,花完錢又回到原點

桂系007
2026-06-20 05:49:12
什么東西讓你體會到貴有貴的道理?網(wǎng)友:買前牙咬碎 買后它真值

什么東西讓你體會到貴有貴的道理?網(wǎng)友:買前牙咬碎 買后它真值

夜深愛雜談
2026-06-17 21:35:31
為什么大獲全勝的殲-10賣不出去,一敗涂地的陣風(fēng)卻銷量火爆?

為什么大獲全勝的殲-10賣不出去,一敗涂地的陣風(fēng)卻銷量火爆?

基斯默默
2026-05-28 11:06:03
10周禁欲令!尼克斯老板首次回應(yīng),唐斯未婚妻主動交代

10周禁欲令!尼克斯老板首次回應(yīng),唐斯未婚妻主動交代

世界體育圈
2026-06-19 11:48:42
21輛貨車離奇“偏航”泌陽被扣:詭異背后,到底誰在守株待兔?

21輛貨車離奇“偏航”泌陽被扣:詭異背后,到底誰在守株待兔?

迷世書童
2026-06-16 05:45:13
某魚驚現(xiàn)“天價筆”:800元一支的中性筆,藏著多少骯臟暗語?

某魚驚現(xiàn)“天價筆”:800元一支的中性筆,藏著多少骯臟暗語?

番外行
2026-02-26 19:53:05
百姓躺平擺爛,食稅群體怎么辦?

百姓躺平擺爛,食稅群體怎么辦?

律法刑道
2026-06-03 09:30:48
世界杯帽子戲法!26歲前鋒國家隊78場42球,尤文圖斯3500萬出售

世界杯帽子戲法!26歲前鋒國家隊78場42球,尤文圖斯3500萬出售

萬花筒體育球球
2026-06-19 17:10:39
汪小菲直言:玥兒小升初回北京讀書,霖兒也一起,不想他們分開

汪小菲直言:玥兒小升初回北京讀書,霖兒也一起,不想他們分開

原夢叁生
2026-06-19 08:33:45
27歲南方醫(yī)科大學(xué)研究生李阿鑫確診肺癌,獲獎無數(shù),因關(guān)節(jié)痛確診

27歲南方醫(yī)科大學(xué)研究生李阿鑫確診肺癌,獲獎無數(shù),因關(guān)節(jié)痛確診

不寫散文詩
2026-06-17 19:13:59
47歲裁判馬寧哭了:被斷定世界杯結(jié)束,他把不可能變可能

47歲裁判馬寧哭了:被斷定世界杯結(jié)束,他把不可能變可能

古史青云啊
2026-06-15 16:43:24
鐵三女神褲衩開叉 10 厘米!五年被罵上熱搜,裁判卻說是合規(guī)的?

鐵三女神褲衩開叉 10 厘米!五年被罵上熱搜,裁判卻說是合規(guī)的?

十點體壇
2026-06-09 21:58:11
中美日離婚率差距斷崖:美國2.4%,日本23.5%,中國令我意外

中美日離婚率差距斷崖:美國2.4%,日本23.5%,中國令我意外

夢史
2026-06-20 01:34:29
心疼玥兒!畢業(yè)典禮反復(fù)確認(rèn)父親到場,汪小菲道出孩子內(nèi)心不安

心疼玥兒!畢業(yè)典禮反復(fù)確認(rèn)父親到場,汪小菲道出孩子內(nèi)心不安

人間煙火記事本
2026-06-19 15:31:10
不打伊朗了,美軍突然調(diào)轉(zhuǎn)槍口,集結(jié)航母和遼寧艦“臉對臉”

不打伊朗了,美軍突然調(diào)轉(zhuǎn)槍口,集結(jié)航母和遼寧艦“臉對臉”

共工之錨
2026-06-18 00:23:25
普京在喀山給馬科斯開小灶,這哪是雪中送炭,分明把菲律賓當(dāng)槍使

普京在喀山給馬科斯開小灶,這哪是雪中送炭,分明把菲律賓當(dāng)槍使

離離言幾許
2026-06-20 01:18:44
新冠后遺癥的長期侵襲,無數(shù)人在不知不覺中深陷困境

新冠后遺癥的長期侵襲,無數(shù)人在不知不覺中深陷困境

律法刑道
2026-04-01 10:15:47
活還沒捂熱人就散了,這工作室裁員17人我直接愣住

活還沒捂熱人就散了,這工作室裁員17人我直接愣住

菜但癮大第一名
2026-06-20 00:02:48
2026-06-20 06:51:00
老孫說科技
老孫說科技
科技前沿最先鋒
6444文章數(shù) 1610關(guān)注度
往期回顧 全部

數(shù)碼要聞

存儲漲價的荒誕現(xiàn)實:一塊游戲機(jī)硬盤已能抵三臺完整主機(jī)

頭條要聞

世界杯-美國2-0澳大利亞 提前一輪小組出線

頭條要聞

世界杯-美國2-0澳大利亞 提前一輪小組出線

體育要聞

世界杯最不知名球員,沒上場先漲粉600萬

娛樂要聞

孫藝珍曬母子合照!4歲小甜豆暴風(fēng)成長

財經(jīng)要聞

Token低價陷阱

科技要聞

Anthropic被禁,智譜卻漲瘋了

汽車要聞

驚出冷汗!重慶實測奧迪A5L,華為智駕這波操作絕了…

態(tài)度原創(chuàng)

本地
教育
手機(jī)
健康
旅游

本地新聞

世界杯黑馬佛得角:河北人開超市,溫州人當(dāng)老板

教育要聞

考生家長速看!多所985、研究型高校在蓉招生咨詢安排來了

手機(jī)要聞

蘋果iOS 27“查找”應(yīng)用升級,支持隱藏位置與自定義共享時長

吃粽子的3條保胃法則,消化科醫(yī)生推薦

旅游要聞

文旅深度融合促進(jìn)體驗型消費(“十五五”開好局起好步)

無障礙瀏覽 進(jìn)入關(guān)懷版