Skip to content
No description, website, or topics provided.
Python
Branch: master
Clone or download
Pull request Compare This branch is 28 commits ahead of bts-webber:master.
Permalink
Type Name Latest commit message Commit time
Failed to load latest commit information.
.idea delete shell script Mar 2, 2017
Agent init agent May 10, 2017
Jobs init Job May 10, 2017
Utils Update HmmModel.py May 13, 2017
lib update jarlist Jun 19, 2017
pylib init pylib May 10, 2017
AppConfig.json init Appconfig.json May 10, 2017
README.md Update README.md May 10, 2017
StartJobShell.py init StartJobShell.py May 10, 2017
main.py update Mar 27, 2017

README.md

基于HMM的web异常参数检测

Agent

  • 说明

在Linux系统下监控网卡流量,提取HTTP请求数据、HTTP响应数据头,可以输出到屏幕、ES、Kafka。

  • 环境

TcpFlow python2.7

  • 使用

详见python2.7 agent.py --help

Job

  • 环境

Kafka、Hadoop、ES、Spark、Zookeeper

  • 使用
  1. 修改AppConfig.json,将对应的环境配置修改为自己的。
  1. 将spark依赖的jar包放到lib目录下
  1. 将python依赖的模块放到pylib下,可以是zip/egg文件,当然也可以在python解释器下安装好这些模块
  1. 在Spark Client节点使用StartJobShell.py提交任务,使用方法:python2.7 StartJobShell.py -j jobname,详见 --help
You can’t perform that action at this time.