2025年SONiC+P4实践——P4Runtime下发ACL表项

SONiC+P4实践——P4Runtime下发ACL表项转载请表明出处 注 SONiC 系统为 vs 版本 Part1 实现外部宿主机与 SONiC 的网络连通 步骤 1 打开一个 ubuntu 系统安装 kvm 及其依赖 1 查看 CPU 是否支持虚拟化 egrep c vmx svm proc cpuinfo

大家好,我是讯享网,很高兴认识大家。

转载请表明出处

 

注:SONiC系统为vs版本

Part1:实现外部宿主机与SONiC的网络连通

步骤 1:打开一个ubuntu系统安装kvm及其依赖

(1)查看CPU是否支持虚拟化

egrep -c '(vmx|svm)' /proc/cpuinfo

讯享网


讯享网

返回结果不为0则说明支持虚拟化

(2)安装"cpu-checker",查询能否使用kvm

  • 安装"cpu-checker"
讯享网sudo apt install cpu-checker
  • 查询能否使用kvm虚拟机
sudo kvm-ok

返回内容如图所示说明可以使用kvm

(3)安装kvm依赖

  • 执行命令:
讯享网sudo apt install qemu-kvm libvirt-daemon-system libvirt-clients bridge-utils virtinst virt-manager
sudo service libvirtd start
  • 检查是否安装成功
讯享网lsmod|grep kvm

步骤2:为SONiC配置桥接模式网络

一、说明

kvm虚拟机为配置来宾网络提供了三种模式:用户模式、专用虚拟网桥模式、公共网桥模式。

①用户模式。来宾虚拟机能够访问主机、Internet、或本地网络上可用的资源,但外部主机无法访问虚拟机内部。

②专用虚拟网桥模式。在 2 个或更多虚拟机之间设置专用网络,其他虚拟机或真实网络中都看不到此专用网桥。

③公共网桥模式。公共网桥模式能够为虚拟机分配IP地址,使得本地网络能够访问内部虚拟机。

由于需要通过宿主机向SONiC下发P4runtime文件,因而在搭建kvm虚拟机时采用公共网桥模式

二、配置步骤

(1)安装bridge-utils软件包,它提供brctl工具来配置网桥

yum install bridge-utils

(2)加载tun和bridge模块

讯享网lsmod | grep tun
lsmod | grep bridge

(3)创建网桥bridge

将物理机工作的网口绑定到 brdige 上,将网口 IP 清除,让 bridge 获取 IP。

  • 创建一个br0网桥
讯享网brctl addbr br0
  • 将网卡eth0和网桥进行绑定
brctl addif br0 eth0
  • 查看网桥:
讯享网brctl show br0

可以看到br0网桥已经与eth0网卡进行了绑定。

  • 启用生成树协议并为网桥分配IP:
brctl stp br0 on
讯享网brctl show br0

ifconfig eth0 0 up
讯享网ifconfig br0 up

为网桥分配IP:

dhclient br0
  • 执行ifconfig eth0 和 ifconfig br0命令

可以发现:br0网桥的mac地址与eth0网卡的mac相同,此时eth0已成为网桥接口的附庸。

此时的接口逻辑如下:

步骤3:下载镜像文件并执行脚本mk-vm.sh 启动SONiC

(1)下载镜像文件

镜像编译参考https://mp.weixin..com/s/vPEhuXcE6HSQ9i5ikFug4w

下载镜像

(2)执行脚本文件mk-vm.sh,执行命令:./mk-vm.sh onienet

mk-vm.sh脚本文件内容如下:

讯享网#!/bin/sh # Copyright (C) 2014 Curt Brune <> # # SPDX-License-Identifier:     GPL-2.0 MEM=4096 DISK="/home/p4/Desktop/sonic/onie-x86-demo.img" # Path to ONIE installer .iso image CDROM="/home/p4/Desktop/sonic/onie-recovery-x86_64-kvm_x86_64-r0.iso" # Path to OVMF firmware for qemu # Download OVMF from http://www.tianocore.org/ovmf/ OVMF="$HOME/kvm/OVMF.fd" # VM will listen on telnet port $KVM_PORT KVM_PORT=9000 # VNC display to use VNC_PORT=0 # set mode=disk to boot from hard disk mode=disk # set mode=cdrom to boot from the CDROM # mode=cdrom # set mode=net to boot from network adapters # mode=net # set firmware=uefi to boot with UEFI firmware, otherwise the system # will boot into legacy mode. firmware=bios on_exit() {    rm -f $kvm_log   } kvm_log=$(mktemp) trap on_exit EXIT boot=c if [ "$mode" = "cdrom" ] ; then    boot="order=cd,once=d"        cdrom="-cdrom $CDROM" elif [ "$mode" = "net" ] ; then    boot="order=cd,once=n,menu=on" fi if [ "$firmware" = "uefi" ] ; then   [ -r "$OVMF" ] || {            echo "ERROR: Cannot find the OVMF firmware for UEFI: $OVMF"            echo "Please make sure to install the OVMF.fd in the expected directory"            exit 1       }    bios="-bios $OVMF" fi #!/bin/sh set -x switch=br0 if [ -n "$1" ];then        #tunctl -u `onie` -t $1        ip tuntap add $1 mode tap user `onie`        ip link set $1 up        sleep 0.5s        #brctl addif $switch $1        ip link set $1 master $switch else        echo "Error: no interface specified"        exit 1 fi macaddress='DE:AD:BE:EF:00:00' sudo /usr/bin/kvm -m $MEM \    -name "onie" \        $bios \    -boot $boot $cdrom \        -device e1000,netdev=onienet,mac=$macaddress \    -netdev tap,id=onienet \        -vnc 0.0.0.0:$VNC_PORT \    -vga std \        -drive file=$DISK,media=disk,if=virtio,index=0 \    -serial telnet:localhost:$KVM_PORT,server > $kvm_log 2>&1 & kvm_pid=$! sleep 1.0 [ -d "/proc/$kvm_pid" ] || {        echo "ERROR: kvm died."        cat $kvm_log        exit 1 } telnet localhost $KVM_PORT echo "to kill kvm: sudo kill $kvm_pid" exit 0 

注意:DISK和CDROM的路径需要根据镜像所安放的位置进行更改,否则将会找不到镜像位置。

说明:

switch=br0 if [ -n "$1" ];then        #tunctl -u `onie` -t $1        ip tuntap add $1 mode tap user `onie`        ip link set $1 up        sleep 0.5s        #brctl addif $switch $1        ip link set $1 master $switch else        echo "Error: no interface specified"        exit 1 fi 

这部分代码作用为:kvm虚拟机启动时,kvm的QEMU模块将所创建的tap设备绑定到brige网桥上,使得虚拟机与外部联通。

此时的接口逻辑如下图:

步骤4:外部主机与SONiC内部的配置

(1)由步骤3进入SONiC系统后进行登录

用户名:admin

密码:YourPaSsWoRd

(2)为SONiC安装依赖,用来正常使用P4RT

讯享网sudo apt-get update
sudo apt-get install libgmpxx4ldbl

(3)进入SONiC所携带的P4RT容器,拷贝必要文件至外部

讯享网docker exec -it p4rt /bin/bash

容器同样需要安装依赖:

sudo apt-get update
讯享网sudo apt-get install libgmpxx4ldbl

安装好后,输入命令where is p4rt,查看P4RT文件位置

查询完后,执行命令exit 退出容器回到SONiC

在SONiC中执行命令docker ps 查看p4rt 容器的容器id,为文件拷贝做准备

接着进行文件拷贝,将容器内部的两个p4rt文件拷贝至外部SONiC的同样位置

sudo docker cp 2953e27fbeb3:/usr/bin/p4rt.sh /usr/bin
讯享网sudo docker cp 2953e27fbeb3:/usr/local/bin/p4rt /usr/local/bin

(4)执行p4rt --help可以发现,此时SONiC已提供9559端口作为P4RT的监听端口

Part2:P4Runtime下发ACL表项

步骤1:下载info文件

在SONiC官网中下载已经编译好的info文件,重命名为p4info.txt,为后续流表下发做好准备。

https://github.com/sonic-net/sonic-pins/blob/main/sai_p4/instantiations/google/middleblock.p4info.pb.txt

步骤2:编写runtime.py文件,实现grpc连接

讯享网#!/usr/bin/env python3 import argparse import grpc import os import sys from time import sleep sys.path.append( os.path.join(os.path.dirname(os.path.abspath(__file__)), '../../utils/')) import p4runtime_lib.bmv2 from p4runtime_lib.error_utils import printGrpcError from p4runtime_lib.switch import ShutdownAllSwitchConnections import p4runtime_lib.helper SWITCH_TO_HOST_PORT = 1 SWITCH_TO_SWITCH_PORT = 2 def writeTunnelRules(p4info_helper, ingress_sw ): table_entry = p4info_helper.buildTableEntry( table_name="ingress.acl_ingress.acl_ingress_table", match_fields={ "l4_dst_port": (0x0001, 0xffff) }, action_name="forward", action_params={ }, priority= 12 ) is_ok = ingress_sw.WriteTableEntry(table_entry) print("Install transit rule", is_ok) def main(p4info_file_path, bmv2_file_path): p4info_helper = p4runtime_lib.helper.P4InfoHelper(p4info_file_path) try: s1 = p4runtime_lib.bmv2.Bmv2SwitchConnection( name='s1', address='192.168.44.130:9559', device_id=0, proto_dump_file='logs/s1-p4runtime-requests.txt') s1.MasterArbitrationUpdate() s1.SetForwardingPipelineConfig(p4info=p4info_helper.p4info, bmv2_json_file_path=bmv2_file_path) print("Installed P4 Program using SetForwardingPipelineConfig on s1") writeTunnelRules(p4info_helper, s1) while(True): pass except KeyboardInterrupt: print(" Shutting down.") except grpc.RpcError as e: printGrpcError(e) if __name__ == '__main__': parser = argparse.ArgumentParser(description='P4Runtime Controller') parser.add_argument('--p4info', help='p4info proto in text format from p4c', type=str, action="store", required=False, default='./build/p4info.txt') parser.add_argument('--bmv2-json', help='BMv2 JSON file from p4c', type=str, action="store", required=False, default='./build/advanced_tunnel.json') args = parser.parse_args() if not os.path.exists(args.p4info): parser.print_help() print("\np4info file not found: %s\nHave you run 'make'?" % args.p4info) parser.exit(1) if not os.path.exists(args.bmv2_json): parser.print_help() print("\nBMv2 JSON file not found: %s\nHave you run 'make'?" % args.bmv2_json) parser.exit(1) main(args.p4info, args.bmv2_json)

 运行SONiC,通过sudo ifconfig指令获得SONiC的IP地址,p4rt --help指令获得端口号

sudo ifconfig

p4rt --help

 根据得到的IP地址和端口号相应的修改s1的相关配置

 s1 = p4runtime_lib.bmv2.Bmv2SwitchConnection( name='s1', address='192.168.44.130:9559', device_id=0, proto_dump_file='logs/s1-p4runtime-requests.txt')

步骤3:根据p4info文件写相应的需要下发的流表项

根据p4info文件,我们选择acl_ingress_table中id为15的match_fields进行匹配和下发

讯享网//P4info文件 tables { preamble { id:  name: "ingress.acl_ingress.acl_ingress_table" alias: "acl_ingress_table" annotations: "@p4runtime_role(\"sdn_controller\")" annotations: "@sai_acl(INGRESS)" ... } ... match_fields { id: 15 name: "l4_dst_port" annotations: "@sai_field(SAI_ACL_TABLE_ATTR_FIELD_L4_DST_PORT)" bitwidth: 16 match_type: TERNARY } ...

对应的在runtime.py文件中,用下列代码进行流表下发

//runtime.py文件 table_entry = p4info_helper.buildTableEntry( table_name="ingress.acl_ingress.acl_ingress_table", match_fields={ "l4_dst_port": (0x0001, 0xffff) }, action_name="forward", action_params={ }, priority= 12 )
讯享网

步骤4:下发流表

在SONiC中开启p4rt监听,可以看到下发的具体信息

p4rt --logtostderr

在终端下发流表项

讯享网sudo ./runtime.py

在SONiC中可以看到:

可以说明,我们已经成功下发流表。为了更加直观的查看下发的流表,我们通过安装Redis数据库,运用可视化工具Redis Desktop Manager来观察。

步骤5:运用Redis数据库查看下发的流表

首先安装Redis和Redis Desktop Manager

sudo apt install redis-serversudo snap install redis-desktop-manager

登陆账号

可以看到db0-db6有相应的内容

对应关系如下:

图片来源|在SONiC中运用 redis多实例

下发的表项可以在db14中查看,db14是P4rt专属的数据库,如下图所示。

PS:更多SONiC相关内容可访问微信公众号查看

小讯
上一篇 2025-03-21 09:26
下一篇 2025-01-11 21:57

相关推荐

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/133148.html