博客
关于我
使用n2disk和PF_RING构建一个(便宜的)连续数据包记录器(Part2)
阅读量:293 次
发布时间:2019-03-03

本文共 986 字,大约阅读时间需要 3 分钟。

网络流量记录工具n2disk的部署方案是一个复杂的工程,涉及多个硬件和软件配置的选择。以下是对网络适配器、存储系统和CPU选择的详细分析,以及对整体成本的考量。

1. 网络适配器的选择

在选择网络适配器时,主要有两个选项:Intel适配器和FPGA适配器。Intel适配器价格较低,支持Zero-Copy驱动,能够提供10+ Gbps的捕获速度。这对于大多数中小型网络环境来说是足够的。然而,对于更高流量需求,如40或100 Gbps,Intel适配器可能无法胜任。此时,FPGA适配器成为更好的选择,因为它们不仅速度更快(可以处理更大数据包),还能提供额外的功能,如端口聚合、纳秒级时间戳和更高的灵活性。

2. 存储系统的选择

存储系统是记录网络流量的核心部分,直接影响数据保留时间和系统性能。对于1 Gbps的流量,普通的HDD即可满足需求,但对于10+ Gbps,RAID配置和高性能驱动器如SSD或NVMe是必不可少的。SSD和NVMe的读写速度显著高于HDD,特别是在高负载下,能够提供更好的性能。此外,RAID控制器的缓冲区大小也需要考虑,以确保能够跟上高吞吐量的数据流。

3. CPU选择

CPU的性能直接影响系统的整体处理能力。对于Intel适配器,需要一个高性能的CPU,以处理高吞吐量的数据流。通常,一个带有4核和3+ GHz的Intel Xeon E3处理器已经足够应对10 Gbps的流量。然而,对于更高的流量,如20+ Gbps,可能需要更强大的处理器,如带有12+内核和3+ GHz的Intel Xeon Gold 6136。此外,CPU的内核亲和性和NUMA配置也会影响性能。

4. 成本考量

尽管n2disk的价格相对合理,但整体系统的配置可能会因为高性能硬件的需求而变得昂贵。特别是对于企业级应用,可能需要投入更多资源来确保系统的稳定性和可靠性。因此,在选择硬件时,需要权衡性能和成本,确保能够满足当前需求的同时,为未来的扩展留有余地。

5. 总结

选择合适的硬件配置需要综合考虑性能、成本和未来扩展需求。Intel适配器适合大多数中小型网络环境,而FPGA适配器则适合高端应用场景。存储系统的选择则取决于数据保留时间和性能需求,而CPU的选择则需要根据适配器和流量处理需求来确定。通过合理的配置,可以在满足当前需求的同时,降低整体成本。

转载地址:http://xoll.baihongyu.com/

你可能感兴趣的文章
nginx负载均衡器处理session共享的几种方法(转)
查看>>
nginx负载均衡的5种策略(转载)
查看>>
nginx负载均衡的五种算法
查看>>
Nginx运维与实战(二)-Https配置
查看>>
Nginx配置ssl实现https
查看>>
Nginx配置TCP代理指南
查看>>
Nginx配置——不记录指定文件类型日志
查看>>
Nginx配置代理解决本地html进行ajax请求接口跨域问题
查看>>
Nginx配置参数中文说明
查看>>
Nginx配置好ssl,但$_SERVER[‘HTTPS‘]取不到值
查看>>
Nginx配置如何一键生成
查看>>
Nginx配置实例-负载均衡实例:平均访问多台服务器
查看>>
NHibernate学习[1]
查看>>
NIFI1.21.0_Mysql到Mysql增量CDC同步中_日期类型_以及null数据同步处理补充---大数据之Nifi工作笔记0057
查看>>
NIFI1.21.0_NIFI和hadoop蹦了_200G集群磁盘又满了_Jps看不到进程了_Unable to write in /tmp. Aborting----大数据之Nifi工作笔记0052
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_增删改数据分发及删除数据实时同步_通过分页解决变更记录过大问题_02----大数据之Nifi工作笔记0054
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置binlog_使用处理器抓取binlog数据_实际操作01---大数据之Nifi工作笔记0040
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_实现数据插入数据到目标数据库_实际操作03---大数据之Nifi工作笔记0042
查看>>
NIFI同步MySql数据_到SqlServer_错误_驱动程序无法通过使用安全套接字层(SSL)加密与SQL Server_Navicat连接SqlServer---大数据之Nifi工作笔记0047
查看>>
Nifi同步过程中报错create_time字段找不到_实际目标表和源表中没有这个字段---大数据之Nifi工作笔记0066
查看>>