前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >如何使用tsharkVM分析tshark的输出

如何使用tsharkVM分析tshark的输出

作者头像
FB客服
发布2022-11-14 16:04:13
1.3K0
发布2022-11-14 16:04:13
举报
文章被收录于专栏:FreeBufFreeBuf

关于tsharkVM

tsharkVM这个项目旨在构建一台虚拟机,以帮助广大研究人员分析tshark的输出结果。虚拟设备是使用vagrant构建的,它可以使用预安装和预配置的ELK堆栈构建Debian 10。

虚拟机启动之后,整个执行流程相对比较简单

解码pcap文件(tshark -T ek output / ndjson),该文件会通过“TCP/17570”发送至虚拟机; 虚拟机中的ELK堆栈将会处理并索引数据; Kibana会在虚拟机中运行,可以通过“http://127.0.0.1:15601/app/kibana#/dashboards”访问;

工具安装-如何在Ubuntu桌面系统上构建虚拟机

首先,我们需要使用下列命令将该项目源码克隆至本地:

代码语言:javascript
复制
git clone https://github.com/H21lab/tsharkVM.git

(向右滑动,查看更多)

接下来,使用下列命令构建tsharkVM:

代码语言:javascript
复制
sudo apt update

sudo apt install tshark virtualbox vagrant

vagrant plugin install vagrant-disksize

vagrant plugin install vagrant-scp

bash ./build.sh

然后,下列命令可以将pcap文件上传至虚拟机:

代码语言:javascript
复制
# 复制pcap文件至./Trace
# 上传pcap文件(含文件名)
bash upload_pcaps_with_filenames.sh
# 或者使用“vagrant scp”将ndjson文件拷贝至/home/vagrant/inpu
# 或者直接上传pcap文件(无文件名)
bash upload_pcaps.sh 
# 或者直接使用tshark转发至127.0.0.1 17570/tcp
tshark -r trace.pcapng -x -T ek > /dev/tcp/localhost/17570

(向右滑动,查看更多)

使用浏览器打开Kibana:

代码语言:javascript
复制
firefox http://127.0.0.1:15601/app/kibana#/dashboards

(向右滑动,查看更多)

打开程序主仪表盘后,就可以查看到这些pcap文件了。

工具使用

SSH连接到虚拟机

代码语言:javascript
复制
cd ./VM
vagrant ssh

删除虚拟机

代码语言:javascript
复制
cd ./VM
vagrant destroy default

开启虚拟机

代码语言:javascript
复制
cd ./VM
vagrant up

挂起虚拟机

代码语言:javascript
复制
cd ./VM
vagrant halt

SSH连接至虚拟机并检测ELK是否正常运行

代码语言:javascript
复制
cd ./VM

vagrant ssh

sudo systemctl status kibana.service

sudo systemctl status elasticsearch.service

sudo systemctl status logstash.service

(向右滑动,查看更多)

Elasticsearch映射模板

这个项目还给大家提供了简单的Elasticsearch映射模板,主要针对的是frame、eth、ip、udp、tcp、dhcp协议。如需处理其他额外的协议,我们可以根据自己的需要并以下列方式映射模板:

代码语言:javascript
复制
# 1. 创建自定义映射,选择所需的协议
tshark -G elastic-mapping --elastic-mapping-filter frame,eth,ip,udp,tcp,dns > ./Kibana/custom_tshark_mapping.json
# 2. 消除重复数据并对映射进行后期处理,以适应当前Elasticsearch版本
ruby ./Public/process_tshark_mapping_json.rb
# 3. 上传文件至虚拟机
cd VM
vagrant upload ../Kibana/custom_tshark_mapping_deduplicated.json /home/vagrant/tsharkVM/Kibana/custom_tshark_mapping_deduplicated.json
cd ..
# 4. 连接虚拟机并上传模板
cd VM
vagrant ssh
cd tsharkVM/Kibana
curl -X PUT "localhost:9200/_index_template/packets_template" -H 'Content-Type: application/json' -d@custom_tshark_mapping_deduplicated.json
(向右滑动,查看更多)

或者我们也可以使用动态映射的方式,具体可以查看

代码语言:javascript
复制
“./Kibana/template_tshark_mapping_dynamic.json”。

(向右滑动,查看更多)

许可证协议

本项目的开发与发布遵循Apache License v2.0开源许可证协议。

项目地址

tsharkVM:https://github.com/H21lab/tsharkVM

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2022-10-07,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 FreeBuf 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 关于tsharkVM
  • 工具安装-如何在Ubuntu桌面系统上构建虚拟机
  • 工具使用
    • SSH连接到虚拟机
      • 删除虚拟机
        • 开启虚拟机
          • 挂起虚拟机
            • SSH连接至虚拟机并检测ELK是否正常运行
            • (向右滑动,查看更多)
            • Elasticsearch映射模板
            • 许可证协议
            • 项目地址
            相关产品与服务
            Elasticsearch Service
            腾讯云 Elasticsearch Service(ES)是云端全托管海量数据检索分析服务,拥有高性能自研内核,集成X-Pack。ES 支持通过自治索引、存算分离、集群巡检等特性轻松管理集群,也支持免运维、自动弹性、按需使用的 Serverless 模式。使用 ES 您可以高效构建信息检索、日志分析、运维监控等服务,它独特的向量检索还可助您构建基于语义、图像的AI深度应用。
            领券
            问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档