Re: [情報]
: 推 sflyman : 現在top500排第一的總共是200Peta Flops雙精準浮點 03/23 12:48: → sflyman : 請樓上隨便找一台google的data center比比看喔 03/23 12:48
找了一下參考資料
這是 top500.org 上面 Summit 的資料
https://www.top500.org/system/179397
同樣上面唯一有直接列名的 AWS EC2 cluster
https://www.top500.org/system/179693
把它做成簡表比較一下
Name Summit AWS EC2 C5 us-east-1a xPerf.
Rank (2019-11) 1 179
Cores 2,414,592 41,472
LINPACK Perf. 148,600 TFlops 1,926.4 TFlops 77.1x
(Rmax)
Theoretical 200,795 TFlops 3,981.31 TFlops 50.4x
Peak (Rpeak)
可以看到計算能力跟 Summit 比大約在 77x(LINPACK)到 50x(理論,也就是上面宣
稱 Summit 有 200PFlops 的來源)之間。
這個 AWS cluster 是 Descartes Labs 在 us-east-1 (N. Virginia) 跑出來的。
投影片在
https://d1.awsstatic.com/events/reinvent/2019/Powering_global-scale_predictive_intelligence_using_HPC_on_AWS_AIM227-S.pdf
https://tinyurl.com/tul6myh
(可以直接看第 33 頁)
錄影在
https://www.youtube.com/watch?v=c3HIPExo3HI&t=39m16s
簡錄重點:
1. 開了 1200 台 C5(應該就是 c5.18xlarge)。
2. 沒有事先知會 AWS。
為什麼第二點重要?
因為這代表沒有讓 AWS 事先準備容量、直接從當時 AZ (Availability Zone) 可用
的容量佔下來,也就是說那個 AZ 光是 C5 的備用容量就至少有這麼多。
而 AWS 有一大堆各種不同的 instance family。
我目前沒查到一個 AZ 的確切容量。
但如果你問一個 AZ(而且是 us-east-1),總共的計算能力有沒有 1200 台 C5 的
50 倍甚至 100 倍?
有真的在用、或者聽過看過 real (computational) use cases 的人心中應該都有個
底。
---
這個 AWS cluster 重點不在它的名次,而是它證明了:隨便一個人只要有一個 AWS
帳號(註)、一張信用卡、付得起一萬美金,你就能弄到 PFlops 等級的機器玩個幾
小時。
註:這個敘述其實對一半。新開的 AWS 帳號會有可佔用資源的上限,雖然可以申請
提高上限,但當你的帳號過去沒有一定的消費實績的情況下,要一次申請到這麼
高的上限恐怕不容易。
--
商用伺服器的配置比較合理啊,算力疊太高根本看的
到吃不到
光看運算力不看資料交換latency吃掉的效能就會這樣
所以你要假設那些資料間的關連性都極低才行啊
一旦資料有前後相依關係那就是不同一回事情了
當然。 所以上面的數字只是在試圖驗證原文爭論的話題:「拿一整個 DC 跟 Top500 賽豬公誰 會贏」而已。
AWS本身就有IAM層級的限制了。開這麼多Instance
老闆看到帳單後會跳起來,不過不要指開Instance
記得開各大大的elasticache老闆會跳更高
商用伺服器如果去看價格跟運算力那他非常非常的貴
跟超電腦比啦,看看IBM Z Series那可怕的租金
他的錢是即使性跟可靠度的保證
超電腦的可靠度不是最重要的,科學運算都反覆驗證
所以在可接受的可靠度下用最少錢疊出最高運算力
其實是超電腦在比的事情,跟商用機器取向是很不同的
商用機器要有最高的可靠度,但性能.....真的很爛
如果比對你花下去的錢來說的話啦
超級電腦通常是做科學計算的,誰說可靠度不重要?
額 ..我不是說 "不重要"是說 "可接受"的可靠度即可
也就是超級電腦的可靠度跟商用機器是有一個等級差別
其實你想想超電腦幹的事情跟[email protected]有八成像
家用電腦的可靠度也並沒有非常的高
記得類似seti @home 等等的計畫才會將同一任務分給
複數帳號來做比對認證
hpc本來就可以租用啊
可靠度有點麻煩的是和loading有關
滿載跑個兩三天 會看到很多神奇的事
而且超級電腦有不同體系,臺灣走富士通體系
這些cloud大廠佔server cpu 超過四成上看五成
hpc哪能跟aws比= =
昨天的新聞, IBM/Amazon/Google/微軟聯合起來要提供
運算資源給COVID-19相關研究~ 這種工作本來就很適合
雲服務 大廠通通串起來運算力驚人
因為經濟活動停滯 server也會沒事
其實這個案例有個地方是可靠度的調整 謝謝分享
他的確就是在説aws如何beat傳統hpc
台灣杉也是peta級 花費一小時約2萬 玩一次最少500
只是沒那麼容易
這個例子證明了可行性 雖然還是需要一點技術
AMD ver. c5a c5ad要出了
AWS通常跟大公司簽完一些多餘跟浮動的運算力
都是拿去市場給人家用標的,運氣好可以標的很便宜
7
首PoBob Swan,i皇執行長表示 Tiger Lake將在暑假上市 這確保了i皇領先地位在mobile和"PC"! 該不該要不要捏著等11代呢?11
最近也有在跑這個,想當初用9800GT TOP (櫻花妹版)也有跑過這個 會很常接不到任務主要還是上面說的,Working Server都被塞爆或是任務被分完了 看Reddit上的說法是FAH團隊正在解決這問題 就連部分電腦硬體介紹大站如LTT也說要幫忙建WS,甚至還跑去跟ISP協調的樣子 所以接不到就耐心放著吧,而且這樣也不會變成全時都在跑還要擔心散熱跟電費問題16
首Po原文連結: 不負責任原文Google翻譯: 在普通愛好者共同擊敗COVID-19的推動下,Folding @ Home網絡現在推出了470 PetaFLOP S的原始計算能力。從角度來看,它的速度是全球最快的超級計算機Summit的兩倍,使網65
用回文把舊文浮出來 跟之前國外發佈會不一樣,這次是 computex 配合台灣時間 不用熬夜看蘇媽,10:00 準時開播 早起的版友有鑽戒看(?7
首Po之前就有曝光過Zen3非XT版是不零售的 目前也曝光這兩個處理器時脈 5900 4.7GHz比非X慢0.1GHz L2+L3一樣15
首Po我們前幾篇已經確定了i5-11400的規格了 現在透過SiSoftware Sandra 30.80的跑分紀錄 跑的是Processor Multi-Media測試 也可以從中看出一些規格50
首PoSource: Gamers Nexus R20 5600X 預設66W / 4.8G@1.425V = 114W 5900X 預設134W / 4.7G@1.343V = 198W 5950X 預設120W / 4.7G@1.343V = 255W
44
[心得] 30 天挑戰賽- 無限手套 AWS 圖文解說版大家好 這月初開始參加iThome鐵人賽,不知不覺也過了一半,寫到第 18 天。 這次主題是抓雲端AWS,題目定為「無限手套 AWS 版:掌控一切的 5 + 1 雲端必學主題」 借鏡復仇者聯盟中,無限手套威力強大的概念,挑選出 AWS 中重要且 CP 值高的 5 + 1 大主題,透過精美的圖文教學,來幫大家快速上手入門。14
[請益] 雲端資料庫選擇最近跟朋友一起弄了一個網站 選了一個供應商後 網站運作的還不錯 直到某一天資料庫的容量超過上限... 跟客服來回確認後才知道是對於名詞認知上有誤13
[請益] AWS EC2 架資料庫問題小弟在 aws ec2 上用 t2.medium 架在 us-west-2 US West (Oregon) 裝 mysql 發現 query 時超級慢 跟本地端區域網路內的主機比起來 同一條 sql query 本地主機 MySQL 16ms 完成 AWS EC2 的 MySQL 160ms 完成11
Re: [心得] AWS帳號被盜經驗談我也來分享一下4月的時後被盜,但是不同情況我在AWS註冊的卡已經無效了 很久沒用AWS服務,所以我不需要等他們退錢,但這條路線就是AWS 會直接 請你把帳號停用,我收到帳單的時後還無法登入帳號超慘,最後印度客服 驗證,讓我成功登入進去,可以把帳號關閉順利結案,不得不說在處理帳號 登入時每看著帳號不斷一直長大的心理壓力真的很大...,因為完全不是我10
[心得] 利用 AWS 打造分散式雲端架構 圖文講解【利用 AWS 快速打造分散式雲端架構】 架構圖: 影片連結: 內容簡介: 大家好,前一週跟大家分享了「什麼是分散式架構的出現?」的介紹,而如何實際建構5
[心得] 2021 iThome 鐵人賽 - 無限手套 AWS 版大家好 最近開始參加一個為期 30 天,每天 po 一篇的技術挑戰賽。 主題是抓雲端AWS,題目定為「無限手套 AWS 版:掌控一切的 5 + 1 雲端必學主題」。 相信不只寫網頁、iot、或是機器學習,慢慢越來越多人開始利用方便的雲端平台,比如 AWS, GCP, Azure等,這次將藉由這三十天,來分享我所知道的 AWS 相關知識, 歡迎對 雲端領域 有興趣的人一起來看看~1
Re: [心得] AWS帳號被盜經驗談三年前使用AWS當作練習,後來有把EC服務停用,就再也沒登入過了, 7月12號收到AWS寄的EMAIL,我以為是有疑似要登入帳號的其他人 的通知,所以就沒特別去處理回信, 想說AWS應該會處理 結果8月3號突然收到信用卡帳單400美金,想登入帳號,發現無法登入, 照著AWS網站SUPPORT說明好不容易登進去,發現不知道被誰開了lightxxx服務,1
[心得] 教學影片分享 - AWS EC2 儲存方案「圖解AWS教學 - EC2 - Instance Store vs EBS 入門介紹」 架構圖: 影片連結: 內容介紹: 這次幫大家快速抓住 EC2 InstanceStore & EBS 儲存方案的架構觀念。X
[心得] AWS EC2 儲存資源介紹(EBS vs InstStore)「圖解AWS教學 - EC2 - Instance Store vs EBS 入門介紹」 花了好些時間整理出的架構圖分享給大家~ 另外錄了影片完整了介紹一圈 歡迎有興趣的人路過參考 架構圖: Youtube連結: