复现案例 · OpenHW on ALINX · 第 07 集

DDR3 DMA:图案、CRC-32 与 1.42 GB/s 读带宽

第 07 集把厂测 MIG 的 native UI 接成一颗可编程 DMA。CPU 只写 CSR,DMA 自己完成三段:按地址写 128-bit 图案、逐 beat 读回比对、再逐字节算 CRC-32。1 MiB、16 MiB、256 MiB 全部零误码,两次独立下载的串口日志逐字节一致;读 1,422 MB/s,写 733 MB/s。

已验证上板 · 2026-11-20 CVE2 / RV32IM MIG native UI · 128-bit @ 100 MHz DDR3 16-bit · 800 MT/s 第 07 / 12 集

这集证明的是“数据真的写进 DDR3 又读回来对得上”,不是“MIG 能生成”。 256 MiB 单次 16,777,216 个 beat,err=0,CRC data 与 expected 都是 0x3ac478a7。两次下载各跑两轮 1/16/256 MiB,累计校验 1.07 GiB,最终 EP07 RESULT: PASS。

板卡ALINX PI-AR035-F1-1工程板,尚未列入开发板选型;型号上线后补链
芯片AMD Artix-7 · XC7A35T看芯片参数与同族板卡 → 项目OpenHW CVE2 / CV32E20上游仓库与 commit →
读带宽
1,422 MB/s · 峰值 88.9%
写带宽
733 MB/s · 峰值 45.8%
容量覆盖
1 MiB / 16 MiB / 256 MiB
误码
0 · 单轮 1,789 万 beats
CRC-32 @ 256 MiB
0x3ac478a7
时序
WNS 0.194 / WHS 0.001 ns
资源
LUT 9,333 / FF 8,865
BRAM
32 / 50 · 64.0%

1. 上板结果:三档容量、两次下载、零误码

每次启动跑两轮,每轮依次 1 MiB、16 MiB、256 MiB。下面这条是 256 MiB 的原始串口行,数字直接来自 UART,不经脚本二次换算:

EP07 VERSION=0x45503037 DDR_SIZE=268435456 UI_CLK=100000000 EP07 CALIB: PASS EP07 METRIC size=268435456 beats=16777216 wr_cycles=36593140 rd_cycles=18874495 crc_cycles=671088668 wr_MBps=733 rd_MBps=1422 crc_MBps=39 err=0 crc_data=0x3ac478a7 crc_exp=0x3ac478a7 EP07 RESULT: PASS
容量beats写 cycles读 cycles写 MB/s读 MB/sCRC MB/s误码CRC-32
1 MiB65,536142,93073,8147331,4204000x79a0a3d5
16 MiB1,048,5762,287,0721,179,7237331,4223900x16774634
256 MiB16,777,21636,593,14018,874,4957331,4223900x3ac478a7
两次独立配置的 uart_ep07_run1.txt 与 uart_ep07_run2.txt 字节完全相同,md5 均为 51949e1bbde8f1f413b5a40210a8a81b。这不是“跑通一次”的记录,而是同一 bit、同一固件、两次断电重配后仍逐字一致。

2. 系统结构:CPU 只碰 CSR,数据面全在 DMA

CVE2RV32IM · 50 MHz
→
CSR0x2001_0000 · 12 个寄存器
→
ddr3_dma128-bit · native UI
→
MIG 7 Series4:1 · ui_clk 100 MHz
→
DDR3MT41J128M16 · 256 MiB

厂测工程给的是 native app interface,不是 AXI4。它没有 AXI 互联,也没有 AXI4-to-native 适配器,所以本集没有把“AXI4 DMA”写进结论。native UI 是 128-bit 数据、地址与命令分离的一组握手:app_addr、app_cmd、app_en、app_rdy、app_wdf_data、app_wdf_wren、app_wdf_rdy、app_rd_data、app_rd_data_valid。

时钟也不是“50 MHz 直接喂 MIG”。顶层用 MMCME2_BASE 把板载 50 MHz 倍到 200 MHz 给 sys_clk_i,MIG 内部 4:1 PHY 再产生 100 MHz 的 ui_clk。CPU 域 50 MHz 与 UI 域 100 MHz 之间全部走 2FF/3FF 同步器;最终实现再加 set_clock_groups -asynchronous,否则会出现一条 1.060 ns 的伪 hold 违例。

3. 三段引擎:写图案 → 读比对 → CRC-32

写图案。 地址从基址开始线性 +16 B,每个 beat 生成 128-bit 图案:tag={4'hA, addr},pattern={tag, ~tag, tag^0x55AA33CC, tag^0xF00F9696}。图案同时依赖地址,所以地址译错、bank 错位或数据线粘连都会在回读阶段暴露,而不是只验证“能存常数”。

读比对。 读通道最多保持 32 个 outstanding,逐 beat 与期望图案比较;任何不一致累加 ERRORS 并记录首个 FIRST_ERR 地址。256 MiB 的 16,777,216 个 beat 全部比完,ERRORS=0。

CRC-32。 再读一遍,每个 128-bit beat 拆成 16 个字节,按 0xEDB88320 反射多项式逐字节更新,初值与最终异或均为 0xFFFFFFFF。这条路径是一次一笔读、串行算 CRC,所以只有 39–40 MB/s;它的目标是独立于图案比对的第二重校验,不是刷 CRC 吞吐。

寄存器偏移作用
CTRL0x00bit0 启动翻转、bit[3:1] 容量、bit4 CRC 使能
STATUS0x04calib / busy / done / fail / crc_ok / state
SIZE0x080x1000_0000,256 MiB
WR / RD / CRC_CYCLES0x0c / 0x10 / 0x14三段各自的 ui_clk 周期数
BEATS / ERRORS / FIRST_ERR0x18 / 0x1c / 0x20回读 beat 数、误码数、首个错误地址
CRC_DATA / CRC_EXPECTED0x24 / 0x28实测与期望 CRC-32
VERSION0x2c0x4550_3037("EP07")

4. 带宽:读 89%,写 46%,差在协议节奏

16-bit DDR3 在 400 MHz DDR 下的理论峰值是 1.6 GB/s(800 MT/s × 2 B)。本集读路径做到 1,422 MB/s,约 88.9%;写路径 733 MB/s,约 45.8%;CRC 39–40 MB/s,约 2.4%。

读得快,是因为地址与命令可以连续发,数据按 app_rd_data_valid 回来,32 个 outstanding 足够把 latency 藏住。写得慢,是因为这一版刻意保留了厂测自检的 data 先一拍、cmd 后一拍 节奏:每个 BL8 要占两个 ui_clk,上限自然锁在峰值的一半附近。把 data 与 cmd 同拍发,是能继续把写带宽往上推的方向,但不在本集已验证范围内。

带宽的分子是“有效字节数 × 100 MHz / 实测周期”,分母固定为 100 MHz 的 ui_clk。第一版固件误把 ui_clk 当成 200 MHz,打印值整体翻倍;后来把公式改成 bytes*100/cycles 并重建 bit,页面上的 733 / 1,422 是修正后的值。

5. 资源、时序与最终 bit

项目结果说明
LUT9,333 / 20,800 · 44.87%比 EP06 的 4,332 多出 MIG 与 DMA 数据面
FF8,865 / 41,600 · 21.31%含 outstanding 读队列与 CRC 状态机
BRAM32 / 50 · 64.00%CVE2 指令/数据 RAM + FIFO
DSP11 / 90 · 12.22%MIG 内部使用
IOB73 / 250 · 29.20%DDR3 48 个信号 + 板级外设
WNS / WHS0.194 / 0.001 nsTNS / THS 均为 0,25,668 endpoints,0 failing
DRC0 error / 0 warning最终实现报告

最终 bit 为 2,192,137 B,SHA-256 9a0ef674e4781a6518985d72490574381c74edd9eb3bc88eca13a4a83dda6ab5。首次最终实现曾在 sys_clk → clk_pll_i 上出现 −1.060 ns hold、1 个 failing endpoint;在综合后对 sys_clk 与 clk_pll_i 施加异步时钟组,再跑 opt / place / route / phys_opt,才得到 0.194 / 0.001 / 0 failing。

WHS 只有 0.001 ns,hold 余量很薄,但当前报告是 0 failing,可以发布。换器件、换温度角或改动 MIG 配置都必须重跑实现,不能沿用这组时序结论。

6. 踩过的坑

7. 复现步骤

# 构建机 ssh alinx@192.168.8.237 cd /media/alinx/nvme4t/fpga-love/pi_ar035_f1_1_cve2_ep07 # 1) 综合 + 实现 + 报告(最终时序需在综合后加时钟组) vivado -mode batch -source build_ep07.tcl vivado -mode batch -source impl_cdc_ep07.tcl # 2) 固件(改打印/逻辑后必须重跑,HEX 会被 bit 引用) cd sw && make && python3 bin2hex.py && cd .. # 3) 先起串口,再下载 python3 cap_serial.py /dev/ttyUSB1 115200 /tmp/ep07.log & vivado -mode batch -source program_ep07.tcl

两次独立验证的做法是:完整断电/重配一次,重跑 program_ep07.tcl,再抓一份 UART;把两份日志直接 cmp,相同才算复现通过。只重启 CPU 不复位 FPGA 不算第二次独立下载。

8. 工程文件(32 个)

RTL、XDC、Tcl、固件源码与预编译产物、最终 bit、三份报告、两份独立串口日志、构建/下载日志、MIG 配置和 DDR3 引脚表全部在下面。校验值见 SHA256SUMS.txt。

README.txt证据包总说明 · 接口 / 寄存器 / 结果 / 边界 metrics/ep07_metrics.json机器可读指标:6 次测量、时序、资源、SHA-256 rtl/top_cve2_ep07.sv顶层:CVE2、MMCM、MIG、DMA、CSR、UART rtl/ddr3_dma.svnative UI 写图案 / 读比对 / CRC-32 引擎 xdc/pi_ar035_f1_1_cve2_ep07.xdc板级引脚与异步时钟组 xdc/ddr3_mig.xdcMIG 生成的 DDR3 引脚与 I/O 标准 tcl/build_ep07.tcl综合 + 实现 + 报告 tcl/impl_cdc_ep07.tcl综合后施加时钟组的最终实现 tcl/program_ep07.tclJTAG 下载 bit 与 ELF sw/main.c三种容量 × 两轮测试与 CRC / 带宽打印 sw/start.SBSS 清零、mtvec、64 项跳转表 sw/link.ld代码 / 数据 / 栈布局 sw/MakefileRISC-V GCC 构建与 HEX 生成 sw/syscalls.c裸机 newlib 系统调用桩 sw/bin2hex.pyBIN → 32-bit HEX sw/firmware.elf可下载 ELF,55,688 B sw/firmware.bin平坦二进制,7,556 B sw/firmware.hexBRAM 初始化,17,001 B / 1,889 words sw/firmware.dis反汇编,78,432 B sw/firmware.map链接映射 bit/top_cve2_ep07.bit最终 bitstream,2,192,137 B reports/ep07_timing_final.rptWNS 0.194 / WHS 0.001 / 0 failing reports/ep07_util_final.rptLUT 9,333 / FF 8,865 / BRAM 32 / DSP 11 reports/ep07_drc_final.rptDRC 0 error / 0 warning logs/uart_ep07_run1.txt第一次独立下载的完整串口日志 logs/uart_ep07_run2.txt第二次独立下载,字节与 run1 相同 logs/build_ep07.logVivado 构建日志 logs/program_ep07_run1.log第一次下载日志 logs/program_ep07_run2.log第二次下载日志 SHA256SUMS.txt全部产物的 SHA-256 mig/factory_mig.prjMIG 工程配置(MT41J128M16XX-125) pins/ddr3_pins.csv48 个 DDR3 信号 → 封装引脚 / IOSTANDARD

9. 相关入口

本集验证的是单颗 CVE2 + MIG native UI + 128-bit DMA 在 1/16/256 MiB 线性区间上的写图案、回读比对、CRC-32 与带宽。未验证:AXI4 互联、scatter/gather、CPU 直接访问 DDR 窗口、ECC、DDR3 margin/温度角、长时间 soak、多 master 并发,以及与其他控制器的效率横比。

订阅 fpga.love

每日快报 · 每周精选 · 每月深度刊