威胁猎杀实战(二):NIDS和HIDS关联

2018-09-21 10,993


防御终将失败


目录

Selection_055.jpg  

1.我被黑了吗?

继续之前,我们先尝试回答以下问题:

  • 有主机下载了EXE/ELF(可执行文件)? --> YES --> 木马?嗯哼?

  • 下载的EXE/ELF运行了吗?

  • 电脑被黑了??

  • Beaconing???

00-wxls2.jpg

 

2.HIDS --> Rootkit?em...有点意思

行业角度:主机层面的威胁感知已经从传统的HIDS发展为主机自适应安全(Gartern)

技术角度:目前主流的实现有:Wazuh、osquery、perf/eBPF、Grsecurity/PaX等,不一一罗列

 

3.NIDS --> 加密流量。。。呵呵呵

迅猛增长的加密流量正不断改变着威胁形势。随着越来越多的企业实现全数字化,大量的服务和应用都采用加密技术作为确保信息安全的首要方法。更具体地说,加密流量同比增长已超过 90%,对流量进行加密的网站数量已从 2015 年的 21% 上升到 2016 年的超过 40%。据 Gartner 预测,到2019 年,80% 的网站流量都会被加密。    

    遗憾的是目前主流的NIDS系统无法直接检测加密流量。当然对于加密流量也不是没有办法,这里先透露一下,后续我们会有专门的文章进行探讨。


# 应对加密流量的几种方式:
1.ssl proxy 硬件/软件
2.放在(IDS)负载均衡器后面
3.客户端安装Root证书
4.ja3
5.Cisco Encrypted Traffic Analytics
6.NIDS + HIDS 关联

 

4.NIDS进化 --> NSM网络安全监控

01-NIDS_Warning.jpg


做入侵检测的朋友们应该非常熟悉这样的Alert(警报),让人抓狂的警报。。。,从警报上我们只能知道主机:192.168.8.11可能从外部主机:183.47.221.72下载了PE EXE可执行文件,无法确认是否误报也无法确认该文件是否是木马程序。

进入NSM

 

 5.NSM,看起来真有问题啊,谁干的???

02-NSM.jpg


我们再来看看这个图(NSM网络安全监控系统)

图中有几个关键信息:

  1. 系统检测到主机下载了可执行文件

  2. 查看对应的入侵检测规则和Payload数据

  3. 查看会话数据(Bro)及全包捕捉数据

  4. 通过与VT和Cuckoo或其他沙盒关联,至此我们可以检测90%的可疑程序,但是无法100%检测(无法拿到主机数据)


    进入威胁感知平台

 

 6.威胁感知平台 -- 顺应时代而生?) --> 看我揭开你神秘的面纱

   6.1 网络层和主机层关联原理与实现

    网络层和主机层关联有多种实现方式,我们今天主要介绍Bro + osquery的方式,我们会在后续的文章中介绍其他方式。

6.1.1 技术栈:Bro + osquery
6.1.1.1 Bro Network Security Monitor简介

这里直接引用Bro团队官方的解释:
a) It transforms raw network traffic into detailed network logs, organized by protocol# 这也是Bro的迷人之处,内部拥有无穷无尽的"Data"
b) It’s a programmable platform that can be used to automate traffic analysis tasks viascripts.

6.1.1.2 osquery简介

一句话,osquery正在成为新的HIDS标准。(github上超过1w星,很多安全初创企业也是基于osquery,如Uptycs,Kolide)

6.1.1.3 关联原理与实现

bro-osq-01.jpg

1.架构图主要分为两部分组成:
a) Bro Controller(Bro + osquery Framwork(Bro脚本))
b) osquery Sensor(osquery + plugin)
c) Bro Controller和osquery Sensor使用Broker进行数据交换

bro-osq-02.jpg

2.进程和Socket关联,主机和网络关联

a) 进程和Socket关联:基于Linux内核audit,使用osquery的process_events和socket_events表进行关联
b) 主机和网络关联:取socket_events表中的五元组数据和Bro Controller conn.log五元组数据进行关联

   6.2 实战

       6.2.1 可见、感知 --> 猎杀

1.在网络层看到的流量可以定位到由哪台主机、哪个用户、哪个进程发起的网络连接。
2.网络层拥有主机层完整的资产信息(系统、进程、网络连接等),同时可以实时查询主机层的资产信息。

 

tianyulab_Visibility_01.jpg

       6.2.2 部署脚本
# 注意:本项目仍处于测试阶段!
# 1.Bro Controller## 1.1 安装Bro(git版)和osquery Framwork
#!/bin/bash

set -e
# Any subsequent(*) commands which fail will cause the shell script to exit immediately
# 如果sha256sum检查失败,脚本退出# 记录脚本行为(排错目的),sh -x $0

exec 3>&1 4>&2trap 'exec 2>&4 1>&3' 0 1 2 3exec 1>log.out 2>&1

# Ubuntu 16.04
# 安装依赖软件包
apt-get -y install cmake make gcc g++ flex bison libpcap-dev libssl-dev python-dev swig zlib1g-dev

# 1.Install Bro From Git Source

git clone --recursive git://git.bro.org/brocd bro
./configure --prefix=/opt/bro --enable-debug
make && sudo make install

# 2.Install osquery Framwork

wget  
wget  
sha256sum -c tianyulab.osquery.tar.gz.sha256sum
tar xf tianyulab.osquery.tar.gz
cp -a osquery /opt/bro/share/bro/site/

# 3.Run Bro

echo "@load osquery" >> /opt/bro/share/bro/site/local.bro
/opt/bro/bin/broctl deploy

# 4.验证

/opt/bro/bin/broctl status
netstat -tupnl | grep 9999

######################################################################################### 

2.安装osquery Sensor(定制版Osquery)

#!/bin/bash
set -e
# Any subsequent(*) commands which fail will cause the shell script to exit immediately
# 如果sha256sum检查失败,脚本退出# 运行:sh -x $0 "Bro IP"

# 记录脚本行为(排错目的)exec 3>&1 4>&2trap 'exec 2>&4 1>&3' 0 1 2 3exec 1>log.out 2>&1

# Ubuntu 16.04

# 1.安装依赖软件包
sudo apt update && sudo apt-get -y install sudo make python ruby git bash curl python-pip

# 2.安装osquery Sensor

wget  
wget  
sha256sum -c osquery_sensor.deb.sha256sum
dpkg -i osquery_sensor.deb
wget https://github.com/tianyulab/Threat_Hunting_with_ELK/raw/master/Bro_osquery/osquery.bro.example.conf -O /etc/osquery/osquery.conf

# 3.配置&启动

# export bro_ip=`ip route get 1 | awk '{print $NF;exit}'` 
# 替换为:Bro IPexport bro_ip="$1"

sudo sed -i -e '/"bro_ip":/s/.*/"bro_ip": "'"$bro_ip"'",/' /etc/osquery/osquery.conf
sudo osqueryctl config-check
# sudo osqueryctl start
# /usr/bin/osqueryd --config_path=/etc/osquery/osquery.conf --pidfile=/var/run/osqueryd.pidfile
# systemd
sudo systemctl enable osqueryd
sudo systemctl start osqueryd

######################################################################################### 

3.配置ELK(可选项)使用Filebeat传送日志,logstash接收wget  
cp bro-osquery_logstash.conf /etc/logstash/conf.d/
wget  
cp bro_osq_filebeat.yml /etc/filebeat/filebeat.yml

# 启动顺序:logstash,filebeat

tianyulab_Visibility_02.png 


7.致谢

1.此项目原始由Steffen Haas开发,国内团队如果感兴趣可直接联系Hass(Email:haas@informatik.uni-hamburg.de)2.@Bro团队
3.特别感谢Steffen Haas提供的思路和帮助!

 


本文作者:天御实验室

本文为安全脉搏专栏作者发布,转载请注明:https://www.secpulse.com/archives/75782.html

Tags:
评论  (1)
快来写下你的想法吧!

天御实验室

文章数:6 积分: 60

安全问答社区

安全问答社区

脉搏官方公众号

脉搏公众号