深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 3:33 AM
3
今天參觀了學校的計算中心 (Texas Advanced Computing Center, TACC)
掰噗~
@baipu
Thu, Jun 26, 2025 3:33 AM
值得參考
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 3:34 AM
過去兩年一直都是在 TACC 上跑模擬,但今天才是第一次看到內部的樣子
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 3:40 AM
TACC 位在 Pickle research campus,離主校區有一段距離,尖峰時間大概是 20-30 分鐘的車程。這次是因為研究計畫附屬的大學生研究機會 (Research experiences for undergraduates, REU),開放給 REU 學生參觀。身為 mentor 的我也就順便報名了
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 3:49 AM
TACC 目前擁有四個計算系統: Frontera, Vista, Stampede3, and Lonestar6。 在這之中,Frontera 擁有最強的運算能力,經常出現在超級電腦排名 Top 500 的清單上。Vista 則是專注在 AI 研究與發展的計畫。Stampede3 開放給全國的研究機構,Lonestar6 主要開放給德州大學系統的研究使用
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 3:56 AM
我們實驗室目前擁有 Stempede3 與 Lonestar6 的運算額度。Lonestar6 做為主力,而 Stampede3 則是因為今年度的運算額度不夠而額外申請的。兩者的申請方式也不同:Lonestar6 走的是 UT 系統,而 Stempede3 則是透過 NSF ACCESS。
又因為 Stempede3 沒有我需要的 NVIDIA GPU (因為模擬軟體使用 CUDA),上個月我又額外寫了一份申請計畫至 ACCESS,被通過後將運算額度轉移至聖地牙哥的計算中心 (San Diego Supercomputer Center, 隸屬於 UCSD)
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:02 AM
因為連線 cluster 僅通過 ssh 連線,其實計算中心的位置不是那個重要。NSF ACCESS 的理念便是統合美國的計算中心資源,以單一入口的方式管理各計算中心的運算額度。
因此,就算整個博班過程都在使用計算中心,沒實際見過計算中心是十分正常的一件事
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:04 AM
據現場講解,TACC 使用的電力占整個 UT Austin 95% 的用量。不只 CPU GPU 運算需要大量的電力,冷卻系統更是一個吃電怪獸
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:05 AM
很酷的一點是 Lonestar6 的節點是泡在礦物油裡面冷卻的
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:10 AM
單一節點 (node) 的實際樣子。這個範例是有兩個 Intel Xeon Platinum 與十二個 SK 海力士 DDR4 16GB 記憶體構成的
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:12 AM
每個 node 疊在一起塞進一個櫃子,把櫃子排開如首圖,就是一個計算系統的
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:13 AM
令人頭皮發麻的供電與冷卻系統
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:14 AM
整線魔人的天堂
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:15 AM
還有 Stampede 吉他(?)
深海/よふかしのうた
@f78927
Thu, Jun 26, 2025 4:17 AM
TACC 在國內也是數一數二的學術計算中心了,還好最後來的是 UT xD
載入新的回覆
又因為 Stempede3 沒有我需要的 NVIDIA GPU (因為模擬軟體使用 CUDA),上個月我又額外寫了一份申請計畫至 ACCESS,被通過後將運算額度轉移至聖地牙哥的計算中心 (San Diego Supercomputer Center, 隸屬於 UCSD)
因此,就算整個博班過程都在使用計算中心,沒實際見過計算中心是十分正常的一件事
整線魔人的天堂