分类万兆网络下的文章

February 23, 2020

联想M920x与英特尔X710-DA4组建万兆迷你服务器

前段时间分享了联想thinkcentre M920x与Intel X710-T4组建万兆迷你服务器，用的网卡是4个万兆电口的X710-T4，由于最近打算更换核心交换机，换成mikrotik的全光口40gbps交换机CRS326-24S+2Q+RM，所以M920x更换了4光口的万兆网卡X710-DA4。
由于联想官方没有支持四光口的网卡自然也不会有对应的挡板，所以对原配的vga挡板做了魔改。

先上成品图，总体还是比较满意，切割挡板的适合稍微有点歪，但是不影响使用。
back
内部如图
inside
原挡板
original
魔改挡板
modified

已经测试一周，目前还是比较稳定，X710-DA4由于没有了phy芯片热量少了很多。

软件系统：
底层系统：esxi
软路由系统：routeros v7，v7系统现在还在beta阶段，详见RouterOS V7 测试（持续更新至正式版发布）
应用操作系统：ubuntu

网络拓扑图待更新

ps：联想tiny系列迷你主机各个型号对比
M720Q主板B360
M920Q主板Q370，单m.2 SSD，支持雷电扩展卡
M920X主板Q370，双m.2 SSD，支持雷电扩展卡，支持标准电压CPU(不带T的65w tdp)，支持AMD RX560独立显卡
P330主板Q370，双m.2 SSD，支持雷电扩展卡，支持标准电压CPU(不带T的65w tdp，支持vPro CPU)，支持NVIDIA P620/P1000独立显卡

January 19, 2020

40Gbps交换机CRS326-24S+2Q+RM开箱及拆解

mikrotik 2019年底发布了他家最高带宽交换机CRS326-24S+2Q+RM，24个10gbps的sfp+口，2个40gbps的qsfp+口
45度照

此交换机配置了三个4cm的三线高转速风速，短期观察有四档温度调节，停转，电压6v低速3k转，9v中速4k转，12v高速6k转，噪音较大，这里更换了猫扇NF-A4x20 PWM，主板风扇接口是4口，而且手上没有NF-A4x20 FLX，所以就直接用了pwm的，短暂测试没有发现问题，系统也可以看到转速。

同时购入了两个sfp+转万兆电口模块S+RJ10

预计此交换机将替代现在的xs716t成为我的核心交换机

January 17, 2020

群晖FS1018升级4万兆网络

最近看各位up主纷纷升级了万兆，并且mikrotik新出了40gbps的交换机，我也升级一下我的全固态nas。
我的synology全固态nas FS1018原本用的网卡是x710-da2，这次升级成为xl710-qda2，intel 的40gbps网卡，100gbps的话就需要mellanox的了，intel目前还没有，而且mellanox便宜的二手卡大部分是InfiniBand网卡而不是以太网卡。
群晖FS1018使用的是两张pcie x4转接的12个sata，xl710-qda2使用的是pcie-3.0 x8的接口，按接口来说足够4000MB/s了，但是由于群晖买软件送硬件的特性，FS1018配备的这个奔腾D1508比较孱弱，不知道是否能跑满，由于交换机还没到所以速度测试后面补上。
xl710-qda2使用的是国产寨卡（大厂保修3年），模块也是intel的，是原装还是山寨不清楚
第一次接触40g光纤，使用的mpo接口，以太网卡使用8芯，由于历史原因网速大部分成品都是12芯的，12芯兼容8芯，这里使用的也是12芯。在10g网络以下光纤一般使用双芯lc接口，家用宽带使用单芯sc接口，而mop接口单排8或12芯，更有双排24芯，具体请自行搜索。
下面上图
网卡x710-da2和xl710-qda2
xl710-qda2芯片
xl710-qda2上机
intel 40g模块
模块光纤接口
模块上机
mpo接口光纤

群晖的兼容性列表里没有xl710-qda2，但是按经验intel的驱动兼容自家大部分产品，换之前还稍微有点担心，下图是群晖正确识别
群晖识别xl710-qda2
以下是ssh登陆群晖看到的dmesg内容

[ 58.168571] Intel(R) 10GbE PCI Express Linux Network Driver - version 5.1.3
[ 58.176352] Copyright(c) 1999 - 2017 Intel Corporation.
[ 58.189592] i40e: Intel(R) 40-10 Gigabit Ethernet Connection Network Driver - version 2.3.6
[ 58.198928] i40e: Copyright(c) 2013 - 2017 Intel Corporation.
[ 58.218788] i40e 0000:01:00.0: fw 6.0.48442 api 1.7 nvm 6.01 0x80003492 0.0.0
[ 58.459081] i40e 0000:01:00.0: MAC address: 68:91:d0:xx:xx:xx
[ 58.470715] i40e 0000:01:00.0: PCI-Express: Speed 8.0GT/s Width x8
[ 58.478036] i40e 0000:01:00.0: User requested queue count/HW max RSS count: 0/64
[ 58.486401] i40e 0000:01:00.0: Features: PF-id[0] VFs: 64 VSIs: 66 QP: 4 RSS FD_ATR FD_SB NTUPLE CloudF VxLAN NVGRE PTP VEPA
[ 58.511205] i40e 0000:01:00.1: fw 6.0.48442 api 1.7 nvm 6.01 0x80003492 0.0.0
[ 58.751255] i40e 0000:01:00.1: MAC address: 68:91:d0:xx:xx:xx
[ 58.762888] i40e 0000:01:00.1: PCI-Express: Speed 8.0GT/s Width x8
[ 58.770209] i40e 0000:01:00.1: User requested queue count/HW max RSS count: 0/64
[ 58.778572] i40e 0000:01:00.1: Features: PF-id[1] VFs: 64 VSIs: 66 QP: 4 RSS FD_ATR FD_SB NTUPLE CloudF VxLAN NVGRE PTP VEPA