开源一个云环境网络流量镜像项目 Packet-Agent(参与送 PS4)

2019-09-12 16:03:31 +08:00
 joocejie

项目背景

  传统网络数据分析会在交换机上配置网络数据镜像, 将 Packet 复制后发送到目标机器,实现网络流量镜像的功能。
  而在云平台上,目前网络数据采集还没有统一的方案。针对私有云平台,目前有流表数据包复制采集、在 hypervisor 上监听采集、vmware 平台分布式虚交换机配置采集、libpcap 抓包采集等方案。
  对于 vmware 平台分布式虚交换机配置采集的方案,性能较好,不占用客户机资源,但其属于商业产品,且只适用于购买 vmware 私有云用户;而在 hypervisor 上监听采集,目前有产品开发,性能较好,但只适用于 OpenStack 私有云;采用 OVS 流表方案,优势是免费,不占用客户机资源,但是配置复杂,且只能用于 OpenStack 私有云。
  因此,开发基于 libpcap + GRE 封装转发的应用,或许是云平台目前最优的网络流量镜像方案。其使用简单、开源、适用于各类公有云和私有云。

Packet-Agent 简介

  Netis Packet Agent ( https://github.com/Netis/packet-agent) 基于 libpcap 技术,从业务网卡抓包,进行 GRE 封装后将采集到的数据包发送到另一台远端机器,供分析使用。

Docker Kubernetes 支持

  Packet-Agent 对 Kubernetes 也提供了支持方案。简单来说,Packet-Agent 封装成容器后,与需要监控的业务容器放在同一个 K8S Pod 中,与其共享网络层并抓包镜像网络流量。
  具体方案见项目文档:K8S_traffic_mirror

参与 Packet-Agent 项目

  欢迎大家参与此项目,包括 star, fork, 提交 pull-request, 报告 bug, 提出任何意见或建议,或者将该项目介绍给相关的朋友。衷心感谢。

抽奖回馈社区

  为感谢大家的支持,抽奖送一台 PS4 主机,抽奖方法如下:

  1. 在这个帖子下面回复参与讨论。
  2. 获奖资格:从现在起到 2019/09/18 23:59:59 参与讨论的前 500 名用户具有获奖资格。
  3. 中奖号码 = 2019/09/19 日 A 股大盘收盘点数 * 100 % 所有具有获奖资格的用户排序去除重复后的总数('*'是乘法,'%'是数学取余数)
  4. 比如:有 @y_user @x_user @z_user @x_user 3 个用户依次回复了 4 次,那么所有具有获奖资格的用户排序去除重复后就是 @x_user @y_user @z_user,分配给他们的抽奖号码依次是 0,1,2。假设 A 股收盘点数是 3012.34 点,那么 3012.34 * 100 % 3,中奖号码就是 1,中奖用户就是 @y_user
  5. 提示:因为会排序去重,多次回复不会增加中奖概率。
22280 次点击
所在节点    分享创造
549 条回复
starrycat
2019-09-12 21:48:54 +08:00
关注
fathuman
2019-09-12 21:53:42 +08:00
分母+1,凑个热闹
harryge01
2019-09-12 21:57:32 +08:00
先 star 了再说
AaronLiu00
2019-09-12 21:57:55 +08:00
万一中了呢
swulling
2019-09-12 21:58:20 +08:00
流量镜像用处:Debug、测试、清洗、旁路分析等

比如你要给客户做深度包检测,又不能侵入客户虚机,就旁路镜像后检测复制流量
allencloud
2019-09-12 21:59:10 +08:00
没看懂啊,这个是做缓存的,还是类似 tcpdump 抓包?
harryge
2019-09-12 22:00:13 +08:00
k8s 的方案就是类似 service mesh? 和 envoy 比有啥优势不?
0ZXYDDu796nVCFxq
2019-09-12 22:02:03 +08:00
牛🍺啊
ryV60s
2019-09-12 22:03:20 +08:00
分母+1
i0error
2019-09-12 22:04:19 +08:00
分母
tyhunter
2019-09-12 22:06:08 +08:00
当个分母
shuaizi
2019-09-12 22:08:06 +08:00
test
whtsky
2019-09-12 22:09:30 +08:00
分母 +1
uhian
2019-09-12 22:09:35 +08:00
实话实说没看懂
reticentfat
2019-09-12 22:16:00 +08:00
分母+1
az422
2019-09-12 22:23:41 +08:00
+1
salmon5
2019-09-12 22:27:27 +08:00
上海天旦网络,曾经的 netexpert.cn 主办方,协议分析挺有名的
salmon5
2019-09-12 22:29:30 +08:00
网络分析专家论坛
salmon5
2019-09-12 22:32:12 +08:00
现在 sniffer pro 黄了,wildpackets 也不存在了,omnipeek 也易主了
csx163
2019-09-12 22:34:24 +08:00
分母+1

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/600422

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX