【然天一】RDMA!怎么用600元钱跑满40Gbps网卡?

作者: 然后成为天下第一分类: 数码 发布时间: 2022-07-17 22:23:13 浏览:36161 次

【然天一】RDMA!怎么用600元钱跑满40Gbps网卡?

账号已注销:
1、ib网需要opensm,ib的优势是延迟比以太网低一个数量级。 2、56gbps需要mellanox原厂线缆。 3、544之类的网卡原本是hp的专有网卡,之后由kcores完成转接板开发。此处@AlphaArea_ @karminski-牙医 等一堆大佬。项目完全开源(github搜),大家可以自己打板diy,购买成品时也请尽量认准kcores!

偷瓜在路上:
虽然可能没啥用,但依旧觉得吊的一批,40g啊,万兆什么辣鸡[doge]

【回复】主流运营商已经普及400G了,另外服务器网卡,200G,400G也有了!40G是人家淘汰的!华为带100G口交换机已经比较便宜了,全新万元内。
【回复】40g都淘汰的东西了还吊呢。。。
暇人煮心:
Infiniband卡windows是支持的,打好驱动就能IPoIB,也可以支持rdma,但问题就是IB的交换机不好买,死贵。两个机器直连没啥问题

【回复】直连的话opensm在win下不太好弄
【回复】也就是说默认不支持还得调
他的姬8岁了:
不错不错,一年半前就搞这种了,游戏电脑装不下硬盘,只能用另一台电脑装硬盘当大型游戏库使用[滑稽]

【回复】你另一台电脑是不是叫NAS?[微笑]
【回复】回复 @他的鸡8岁了 :2950X做nas不是很合适吗?整个几百T的
【回复】回复 @zhanglebron6 :并不是,2950X哪敢用来做nas[笑哭][笑哭]
要成为秀儿的:
“RDMA就是跳过CPU和操作系统内核,直接将资料往对面的内存里面怼”——某b站up主 搭配这个视频观看更舒适[doge]BV1tW411z7Lb

【回复】dma是这,rdma再加了个远程
【回复】根据这个视频,up其实不需要server系统,win10工作站也可以rdma[doge]
cs君:
難怪backup exec 備份速度那麼快 最近在公司給1台server備份另一台server的文件夾 2台都一起插著HPE的10G網口switch 看CPU佔用極低 可惜都不是SSD 最多才跑到每秒300M[doge]

【回复】回复 @给lucia生贺发视频 :大文件下来一样没区别的,还要从硬盘到内存才到另一边
【回复】回复 @微秒 : 我沒蠢到連單位都不會看[辣眼睛]
-老湿基-:
这期视频基本是错误的。RDMA中的M就是内存,而不是你说的什么文件。DMA总该知道吧,就是一种外设绕过CPU直接access memory的技术,常规MCU都提供。RDMA无非是一种通过某种Fabrics,让外部计算机也能访问自己的内存,而无需CPU过多参与(不是不参与)。如果能直接访问文件那可了不得了,无视文件系统,无视Block size,那这个技术应该是轰动性的。

pilipala-bong:
更新这么快,小心把我三七累坏了[傲娇]

蒙古国海军司令:
windows11 workstation 也能开双向rdma吧,就是要手动powershell强开

【回复】回复 @非常好视频-五蕉已投 :好的,谢谢
【回复】回复 @Christine_secret :你可以在microsoft learn上搜索Enable-NetAdapterRdma,有详细的介绍
【回复】大佬请问下怎么开启呀?
该昵称已被系统自动屏蔽:
只记住了最后一句话:这个玩意儿不值钱[吃瓜]

Slymitec:
实话说,比我用雷电4互联成本还高 虽然速度也又快了很多

【回复】回复 @贝雅特丽齐的但丁 : 1.有光纤雷电线。老莱视频介绍过。 2.雷电网桥是20Gbps。
【回复】这是超算集群用的,肯定高啊
【回复】回复 @啥也不会整 :意思就是有钱你可以任何硬件来随便玩 何止40g的ib卡? 200g的ib网卡买就行了 我没钱 双机临时高速互联我选雷电 反正现在intel系笔记本基本上都标配了 未来还有usb4
wangyu1745:
不开rdma cpu占用那么高的原因不只是网络栈的开销和内存拷贝,还有一个很大的原因是smb那垃圾协议性能奇差

【回复】我觉得linux的各种SMB实现写得太差是首要原因,另外NFS不开RDMA一样性能不咋地,和Windows上SMB差不多
泡面蟹:
看到“m是存储不是内存”就可以不看了,基础知识错误。

zJdjzjGdha:
RDMA 的 M 翻译为内存这点是正确的,你自己翻翻论文就会发现这个词都是翻译为内存的。用了 rdma,数据的传输也要经过内存,只不过这时候你的nic可以直接读写远端的内存而不需要经过远端cpu(rdma单边操作 read/write)。我觉得你可能认为rdma可以直接读写硬盘,所以翻译为存储,但并不是这样的。存储对应的是 storage,memory就是内存。

axcrta:
有测过4k读写吗?我去年闲着没事的时候把两台笔记本用雷电网桥连在一起,顺序读写都有1000m/s左右,但用一台电脑直接运行另一台电脑steam库里的游戏就会半天加载不出来,磁盘映射好像也没法直接测4k读写

【回复】smb的4k是几乎不能用级别的,还有延迟巨高的debuff,你可以把同一个vhd丢远程和本地然后挂载了跑分看看,目前4k比较高的就iscsi,但是用了这个基本上就和多设备无缘了,纯粹的点对点协议

固态硬盘 SSD Mellanox 40G网卡 40Gbps RDMA

如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!