mitmproxy 跳过瑞数js加密验证

mitmproxy消息拦截-突破瑞数js加密验证

老规矩先上效果图 :
mitproxy_1.gif

一 先介绍 mitmproxy :

>>请移步到官网: https://www.mitmproxy.org/

官网上图

二 反爬思考:

当需求网站js加密混淆, 动态cookies, 加密参数级别太高直接破解难度极高时
此时实现需求绕过反爬的方式有如下几种:

  1. selenium 模拟浏览器驱动


    image.png
  2. fiddler 抓包软件内部脚本


    image.png
  3. 谷歌-油猴编写 js hook插件 将加密参数通过sokect发送至后台

  4. 其他终端模拟程序 如:PyAutoGUI,PyUserInput 等

  5. 使用mitmproxy抓包拦截 原理可类比fiddler 支持三种模式 其中Python-API是神器


    image.png

三 python-api mitmdump 使用

1 实用范围:

几乎支持网络传输生命中的所有event事件处理:
插件通过事件与mitmproxy的内部机制挂钩。这些是在插件上作为一组众所周知的名称的方法实现的。许多事件接收流对象作为参数—通过修改这些对象,插件可以动态地改变流量。例如,这里是一个插件,添加了一个响应头的计数,响应的数量看到:

image.png
2 主要应用的三大事件:

1 HTTP Events;2 WebSocket Events; TCP Events 来源 >> https://docs.mitmproxy.org/stable/addons-events/

简单使用示例:

** HTTP Events **
在http请求流程中的各个阶段如 http_connect,request,responseheaders, response 都可以进行自定义消息处理
Example:

from mitmproxy import http

def request(flow: http.HTTPFlow) -> None:
    # 拦截指定站点链接 - 修改返回响应
    if flow.request.pretty_url == "http://example.com/path":
        # 自定义响应
        flow.response = http.HTTPResponse.make(
            200,  # (optional) status code
            b"Hello World",  # (optional) content
            {"Content-Type": "text/html"}  # (optional) headers
        )
        # 获取响应cookie
        cookies = flow.response.cookies
        print(cookies)

        # 修改响应内容
        js_script = '''<script> console.log('消息注入成功') </script> \n\r'''
        flow.response.text = js_script + flow.response.text
        # '''''''

基于如上的例子 这样就能在消息返回阶段做很多事情了
如:注入js代码(很多外挂就是这么干的);拦截获取cookies;直接保存响应html源码 等等
这样js,cookies ,动态加密等问题就浏览器环境直接帮我们做了 我们拦截拿现成的参数结果就行

四 最后代码

附上完整代码: 湖北省发改委 瑞数反爬虫

> Github地址 : https://github.com/Forbilly/ruishu_untispider
作者:Silva

瑞数反爬虫.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,607评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,239评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,960评论 0 355
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,750评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,764评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,604评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,347评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,253评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,702评论 1 315
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,893评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,015评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,734评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,352评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,934评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,052评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,216评论 3 371
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,969评论 2 355