数据传输和处理在当下已经成为各种应用程序的核心,从大数据到人工智能,再到高性能计算,数据传输的效率和性能成为了制约系统整体性能的关键因素。
软硬件融合作为云计算领域最前沿的技术趋势,通过软硬件配合来大幅提升系统的性能。而RDMA正是软硬件融合的典型应用之一,RDMA通过软硬件融合来实现高性能网络:硬件层实现RDMA网络协议栈进行数据传输,软件层实现对数据收发的控制。
RDMA技术是一种基于网络的内存访问技术,它可以实现从一台机器到另一台机器对内存的直接访问。因此,它可以将数据传输的延迟降低到数微秒级别,远远低于传统的TCP/IP协议。RDMA技术通过充分利用网络带宽,实现高速数据传输,并通过直接访问内存,避免了数据拷贝的开销,从而提高系统性能和响应速度。
具体来说,在大规模数据中心、高性能计算和存储系统等场景下,RDMA技术都可以发挥重要的作用。例如,在大规模数据中心中,RDMA技术可以帮助加速虚拟机迁移和数据备份等操作,提高数据中心的处理能力。在高性能计算中,RDMA技术可以帮助加速计算任务的数据传输,降低计算时间和开销。在存储系统中,RDMA技术可以提高存储系统的数据传输效率,提高存储系统的性能和响应速度。
达坦科技专注下一代云计算——“天空计算”的基础设施技术,致力于拓宽云计算的边界。达坦科技打造的新一代开源跨云存储平台DatenLord,通过软硬件深度融合的方式打通云云壁垒,实现无限制跨云存储、跨云联通,建立海量异地、异构数据的统一存储访问机制,为云上应用提供高性能安全存储支持,以满足不同行业客户对海量数据跨云、跨数据中心高性能访问的需求。
在跨云场景下,网络对数据访问的性能影响最为突出,DatenLord采用高性能网络RDMA来降低延迟并提高带宽。RDMA方面我们有多个相关的开源项目:
- async-rdma是用Rust封装的RDMA异步API库,它为编写RDMA应用程序提供高级抽象和异步API接口,https://github.com/datenlord/async-rdma
- open-rdma是RDMA协议的开源硬件实现,采用Bluespec和SpinalHDL实现,目前主要实现了RoCEv2协议,此外,我们还进行一些特定功能的拓展来提升RDMA的传输效率,https://github.com/datenlord/open-rdma
- roce-sim是一套验证RDMA协议的软件框架,方便测试RDMA硬件的正确性,即是否符合RoCEv2协议的要求,https://github.com/datenlord/roce-sim
在本周日5月7日晚上20:00,达坦科技与Linux阅码场合作,由达坦科技联合创始人兼CTO施继成为大家做题为RDMA软件接口高层封装的分享。
内容简介
RDMA 作为高速通信协议被数据中心广泛使用,但是因为底层接口设计得过于繁复,对使用者造成了很大的不便,因此我们使用 Rust 语言对 RDMA 进行了一层高层封装。这次分享将介绍这层封装的做法和原理。
预约直播
本次直播我们将在【腾讯会议】进行,欢迎大家观看,没时间观看直播的同学可以关注回放,会议结束后回放在阅码场官网上传,年卡阅码场会员和其他阅码场训练营专业群资深用户免费点播。
腾讯会议号:157 562 026
添加小助手微信,加入达坦科技硬件交流群:Apathy_no
关于我们
达坦科技(DatenLord)专注下一代云计算——“天空计算”的基础设施技术,致力于拓宽云计算的边界。达坦科技打造的新一代开源跨云存储平台DatenLord,通过软硬件深度融合的方式打通云云壁垒,实现无限制跨云存储、跨云联通,建立海量异地、异构数据的统一存储访问机制,为云上应用提供高性能安全存储支持。以满足不同行业客户对海量数据跨云、跨数据中心高性能访问的需求。
公众号:达坦科技DatenLord
知乎账号:https://www.zhihu.com/org/da-tan-ke-ji
B站:https://space.bilibili.com/2017027518
服务器托管,北京服务器托管,服务器租用 http://www.fwqtg.net