WSL 搭建 Soft-RoCE RDMA 开发环境

date
Jul 31, 2024
slug
wsl-rxe
status
Published
tags
Network
RDMA
summary
type
Post

References:

手把手教您编译适用于 WSL2 的 Linux Kernel
WSL2 即使更新到最新预发布版本, Linux Kernel 版本也是`6.6.xxx`. 一部分软件可能会需要更高的内核版本, 或者是用户想要测试最新的 Linux Kernel 特性. 因此, 网上替换 WSL2 的 Linux Kernel 的教程才会如此涌现. 首先声明, 这可能会导致部分 GNU/Linux 发行版不稳定, 软件包无法运行等问题. 所以不建议在生产环境中替换 WSL2 的 Linux Kernel. 如果您在 WSL2 中使用 Arch Linux, 建议先阅读[这篇教程](https://MaxLHy0424.github.io/post/2.html), 对 Arch Linux 进行基本的配置, 然后再阅读本教程. 如果您能接受这一切, 那么, 开始吧! # 1 安装依赖 APT: ```Bash sudo apt install build-essential flex bison dwarves libssl-dev libelf-dev ``` Package Manager: ```Bash sudo pacman -S base-devel flex bison pahole openssl libelf bc ``` # 2 下载 Linux Kernel 源代码 访问网站 ['The Linux Kernel Archive'](https://kernel.org), 等待加载完成后, 可以看到网页中间的 Linux Kernel 源代码存档列表. 在此之前, 我们需要了解 Linux Kernel 的主要开发分支: 1. mainline (主线) - Linux Kernel 的主要开发分支, 由 Linus Torvalds 管理, 包含最新的 Linux Kernel 特性及漏洞修复. - 常常作为下一个 Linux Kernel 的开发分支, 可能存在一些稳定性问题. 2. stable (稳定) - 最常用的 Linux Kernel 分支, 包含最新的漏洞修复, 日常使用首选. 3. longterm (长期) - 较旧的 Linux Kernel 分支, 持续进行漏洞修复. 长期使用首选. 根据具体需求下载对应的 Linux Kernel, 然后通过 Windows 资源管理器复制到前面安装好依赖的 GNU/Linux 发行版的用户家目录中. 然后执行以下命令 (将`<File>`替换为您的 Linux Kernel 压缩包文件名, 将`<Dir>`替换为您的 Linux Kernel 压缩包解压后的目录名): ```Bash cd ~ tar xf <File> cd <Dir> ``` # 3 编译内核 > 此步骤可能需要代理. 执行以下命令 Microsoft 的 WSL2 Linux Kernel 配置并保存: ```Bash wget https://raw.githubusercontent.com/microsoft/WSL2-Linux-Kernel/linux-msft-wsl-6.1.y/arch/x86/configs/config-wsl -O arch/x86/configs/config-wsl ``` 然后执行以下命令来使用全部线程编译内核: ```Bash make KCONFIG_CONFIG=arch/x86/configs/config-wsl -j$(nproc) ``` 途中的编译配置选择一路按回车即可. # 4 保存并替换 执行以下命令 (将`<PATH>`替换为 C 盘下的文件路径, 例如`Data/WslLinuxKernel`): ```Bash cp arch/x86/boot/bzImage /mnt/C/<PATH> ``` 然后将文件名改为`kernel`. 接着, 在当前 Windows 用户目录下创建文件`.wslconfig` (有则不用), 添加 (`[wsl2]`无需重复添加; 将`C:\\<PATH>\\kernel`替换为您的 Linux Kernel 文件路径; 把路径分隔符替换为`\\`): ``` [wsl2] kernel=C:\\<PATH>\\kernel ``` 接着, 在 Windows 终端中执行以下命令: ```Batch wsl --shutdown ``` 再次启动 WSL2 中的 GNU/Linux 发行版, 执行: ```Bash uname -a ``` Linux Kernel 已经成功替换, 一切大功告成!。
手把手教您编译适用于 WSL2 的 Linux Kernel

Build WSL kernel with RXE

Download new kernel source code from:
notion image
Copy arch/x86/boot/bzImage to custom kernel folder. Edit kerenl path in C:\Users\<username>\.wslconfig, restart WSL.

Network interfaces setup

Add virtual network interface and ip addresses
Allow loopback test

RDMA devices setup

Install RDMA toolset.
Add rxe devices.

Run perftest with rdma_cm (-R)

IB test fails for ibv_rc_pingpong and ibv_read_bw under RHEL6
Updated Feb 16, 2016
 
Update:
24/11/25: add WSL kernel config steps
24/11/24: add Ubuntu dependencies

© Ric Li 2021 - 2024