当前位置：首页 > news >正文

网站列表页加密：三次请求后返回内容多\r

news 文章来源：https://blog.csdn.net/qq_43695167/article/details/133764804 2025/4/4 12:15:49

一、抓包第一次请求

url = 'aHR0cDovL2N5eHcuY24vQ29sdW1uLmFzcHg/Y29saWQ9MTA='

抓包，需要清理浏览器cookie，或者无痕模式打开网址，否则返回的包不全，依照下图中的第一个包进行requests请求

在这里插入图片描述

第一次请求后返回

<!DOCTYPE html><html xmlns="http://www.w3.org/1999/xhtml"><head><meta http-equiv="Content-Type" content="text/html; charset=UTF-8"/><meta http-equiv="Cache-Control" content="no-store, no-cache, must-revalidate, post-check=0, pre-check=0"/><meta http-equiv="Connection" content="Close"/><script type="text/javascript">function stringToHex(str){var val="";for(var i = 0; i < str.length; i++){if(val == "")val = str.charCodeAt(i).toString(16);else val += str.charCodeAt(i).toString(16);}return val;}function YunSuoAutoJump(){ var width =screen.width; var height=screen.height; var screendate = width + "," + height;var curlocation = window.location.href;if(-1 == curlocation.indexOf("security_verify_")){ document.cookie="srcurl=" + stringToHex(window.location.href) + ";path=/;";}self.location = "/Column.aspx?colid=10&security_verify_data=" + stringToHex(screendate);}</script><script>setTimeout("YunSuoAutoJump()", 50);</script></head><!--2023-10-11 11:55:23--></html>

其中stringToHex方法，用于将字符串转换为十六进制表示：

function stringToHex(str) {var val = "";for (var i = 0; i < str.length; i++) {if (val == "") val = str.charCodeAt(i).toString(16);else val += str.charCodeAt(i).toString(16);}return val;
}

用python实现

def stringToHex(data):valu = ''for i in range(0, len(data), 1):# 获取字符串中索引为 i 的字符的 Unicode 值，并转换为十六进制字符串表示unicode_value = ord(data[i])val = hex(unicode_value)[2:]  # [2:] 是为了去掉十六进制字符串前面的 '0x' 前缀valu = valu + val                     # 顺序不能反，否则转换的十六进制是倒着的return valu

YunSuoAutoJump()方法，设置了cookies中的一个srcurl值，还有第二次请求的url：

function YunSuoAutoJump() {var width = screen.width;var height = screen.height;var screendate = width + "," + height;var curlocation = window.location.href;if (-1 == curlocation.indexOf("security_verify_")) {document.cookie = "srcurl=" + stringToHex(window.location.href) + ";path=/;";}self.location = "/Column.aspx?colid=10&security_verify_data=" + stringToHex(screendate);
}

screendate是定值，因此

url2 = url + '&security_verify_data=313232302c363836'

二、第二次请求

观察浏览器抓到的第二个请求的cookies：

在这里插入图片描述

发现cookies中除srcurl还有security_verify_data，与第一次请求对比发现，在第一次请求时携带security_verify_data，如下图：

在这里插入图片描述

因此第二次请求的cookies为：

headers1 = resp1.headers.get('Set-Cookie')
result = headers1.split(';')[0]
cookies = {}
key, value = result.split('=')
cookies[key] = valuekey = 'srcurl'
value = stringToHex(url)
cookies[key] = value

进行第二次请求，返回

<!DOCTYPE html><html xmlns="http://www.w3.org/1999/xhtml"><head><meta http-equiv="Content-Type" content="text/html; charset=UTF-8"/><meta http-equiv="Cache-Control" content="no-store, no-cache, must-revalidate, post-check=0, pre-check=0"/><meta http-equiv="Connection" content="Close"/>
<script>var cookie_custom = {hasItem: function(sKey) {return (new RegExp("(?:^|;\\s*)" + encodeURIComponent(sKey).replace(/[\-\.\+\*]/g, "\\$&") + "\\s*\\=")).test(document.cookie);},removeItem: function(sKey, sPath) {if (!sKey || !this.hasItem(sKey)) {return false;}document.cookie = encodeURIComponent(sKey) + "=; expires=Thu, 01 Jan 1970 00:00:00 GMT" + (sPath ? "; path=" + sPath : "");return true;}
};function YunSuoAutoJump() {self.location = "aHR0cDovL2N5eHcuY24vQ29sdW1uLmFzcHg/Y29saWQ9MTA=";}
</script>
<script>setTimeout("cookie_custom.removeItem('srcurl');YunSuoAutoJump();", 50);</script></head></html>

由返回可知，第三次请求的url与第一次请求一致，cookies要除去第二次请求的srcurl这个键，再与浏览器中的第三次请求进行对比。

在这里插入图片描述

cookies中多了security_session_mid_verify这个键，同理可知，这个值在第二次请求的Set-Cookie处取得，cookies如下

headers2 = resp2.headers.get('Set-Cookie')
key, value = headers2.split(';')[0].split('=')
cookies[key] = value
cookies.pop('srcurl')    # 删去srcurl键值对

三、第三次请求

resp3 = requests.get(url, headers=headers, verify=False, cookies=cookies).content

此网站如果使用requests.get().text返回的内容不对，所以用content查看返回内容，发现是乱码，部分如下：

\xe5\x9b\xbe\xe7\x89\x87\xe6\x87\x92\xe5\x8a\xa0\xe8\xbd\xbd\r

先解码，再删去返回中的\r，即返回正文内容

text = resp3.decode().replace('\r', '')

网站列表页加密：三次请求后返回内容多\r

一、抓包第一次请求 url aHR0cDovL2N5eHcuY24vQ29sdW1uLmFzcHg/Y29saWQ9MTA抓包，需要清理浏览器cookie，或者无痕模式打开网址，否则返回的包不全，依照下图中的第一个包进行requests请求第一次请求后返回 <!DOCTYPE html>…...

编程日记 2023/10/15 1:39:56

12.JVM

一.JVM类加载机制:把类从硬盘文件加载到内存中 1.java文件,编写时是一个.java文件,编译后现成一个.class的字节码文件,运行的时候,JVM就会读取.class文件,放到内存中,并且构造类对象. 2.类加载流程: a.加载:找到.class文件,打开文件,读取内容,尝试解析文件内容. b.验证:检查…...

编程日记 2023/10/15 1:38:55

关于网络协议的若干问题(四)

1、QUIC 是一个精巧的协议，它有哪些特性？ 答：QUIC 还有其他特性，一个是快速建立连接。另一个是拥塞控制，QUIC 协议当前默认使用了 TCP 协议的 CUBIC（拥塞控制算法）。 CUBIC 进行了不同的设计&…...

编程日记 2023/10/15 1:37:54

opencv图像卷积操作和常用的图像滤波函数

文章目录 opencv图像卷积操作原理，opencv中常用的图像滤波函数一、图像卷积操作原理：1、卷积操作原理图： 二、opencv常用的图像滤波函数：这些函数的主要作用是对图像进行平滑处理或去除噪声(核心目的是减少图像中的噪声&#xff0…...

编程日记 2023/10/15 1:36:53

习题1. 31

话不多说先上代码 (defn product [ term a nxt b](defn iter [a result](if (> a b)1 (* (term a) (iter (nxt a) result))))(iter a 1)) 跟习题1.30比较起来，就是两个地方不同乘法不能乘0 必须是1。难度来讲，跟1.30难度是一样的。增加了迭代过…...

编程日记 2023/10/15 1:35:52

见微知著：从企业售后技术支持看云计算发展

作者：余凯售后业务中的细微变化作为阿里云企业容器技术支持的一员，每天会面对全球各地企业级客户提出的关于容器的各种问题，通过这几年的技术支持的经历，逐步发现容器问题客户的一些惯性，哪些是重度用户&#xff0…...

编程日记 2023/10/15 1:34:51

C++笔记之如何给 `const char*` 类型变量赋值

C笔记之如何给 const char* 类型变量赋值 code review! 文章目录 C笔记之如何给 const char* 类型变量赋值1.在C中，如果你要给一个 const char* 变量赋值，你通常有几种方法来做这件事，具体取决于你的需求。下面是一些常见的方法：…...

编程日记 2023/10/15 1:33:50

9.Linear Maps

线性映射线性映射是将向量作为输入并产生一些新向量作为输出的转换。从坐标定义开始(数组)，再到2，3，并展示它们是如何关联的线性映射的坐标表示最终是矩阵， 1.坐标定义（数组） 列向量是向量的坐标表示…...

编程日记 2023/10/15 1:32:49

大数据Doris（十）：添加BE步骤

文章目录添加BE步骤一、使用mysql连接二、添加be...

编程日记 2023/10/15 1:31:48

Vue2 +Element UI 表格行合并

如果相邻数据是一致的，则单元格的行合并,指定需要合并的列，下面我是指定合并了分类和类型这两列。先看效果 Element UI为我们的<el-table>提供了一个属性span-method：合并行或列的计算方法下面是一个示例: html部分 - 主要是在表上指…...

编程日记 2023/10/15 1:30:47

SuperEdge易学易用系列-一键搭建SuperEdge集群

条件说明： 系统公网IP 内网IP 服务器所在地 K8S版本 Centos7.9 114.116.101.254 192.168.0.245 北京 v1.22.6 Centos7.9 119.8.1.96 192.168.0.83 香港 v1.22.6 Ubuntu22 94.74.108.152 192.168.0.154 纽约 v1.22.6 1. 开始部署 1.1 两条指令从零搭建一个边缘集…...

编程日记 2023/10/15 1:29:46

农场养殖农产品商城小程序搭建

鸡鸭羊牛鱼养殖用户不少，其规模也有大有小，尤其对一些生态养殖企业，其产品需求度更高，同时他们也有实际的销售需求。由于具备较为稳定的货源，因此大规模多规格销售属性很足。通过【雨科】平台搭建农场养殖商城&…...

编程日记 2023/10/15 1:27:44

大语言模型之十七-QA-LoRA

由于基座模型通常需要海量的数据和算力内存，这一巨大的成本往往只有巨头公司会投入，所以一些优秀的大语言模型要么是大公司开源的，要么是背后有大公司身影公司开源的，如何从优秀的开源基座模型针对特定场景fine-tune模型具有广大的…...

编程日记 2023/10/15 1:25:41

UML组件图综合指南：设计清晰、可维护的软件系统

介绍： UML（Unified Modeling Language）组件图是软件系统设计中的重要工具，用于描绘系统的物理结构和组件之间的关系。在软件工程中，通过创建清晰的组件图，团队能够更好地理解系统的模块化结构和组织关系&a…...

编程日记 2023/10/15 1:24:40

深入浅出ThreadPoolExecutor(一)

文章目录线程池简诉ThreadPoolExecutor详解ThreadPoolExecutor参数详解创建线程池的工具类Executors 线程池简诉针对各种池子,比如连接池:用于管理和重复使用数据库连接，避免频繁创建和销毁数据库连接带来的性能开销。对象池：用于管理和重复使用对象…...

编程日记 2023/10/15 1:23:38

网站的常见攻击与防护方法

在互联网时代，几乎每个网站都存在着潜在的安全威胁。这些威胁可能来自人为失误，也可能源自网络犯罪团伙所发起的复杂攻击。无论攻击的本质如何，网络攻击者的主要动机通常是谋求经济利益。这意味着无论您经营的是电子商务项目还是小型商业网站…...

编程日记 2023/10/15 1:22:37

网络工程师知识点3

41、各个路由协议，在华为设备中的优先级？ 直连路由 0 OSPF 10 静态 60 42、OSPF：开放式最短路径优先路由协议，使用SPF算法发现和计算路由 OSPF的优点： 1、收敛速度快，无路由自环，适用于大型网络…...

编程日记 2023/10/15 1:21:36

mongoDB 性能优化

文章目录前言mongoDB 性能优化1. explain方法来查看查询的执行计划2. 查看mongoDB 集合的索引3. mongoDB 怎么添加索引4. 升序索引与降序索引是什么意思前言如果您觉得有用的话，记得给博主点个赞，评论，收藏一键三连啊，写作不易…...

编程日记 2023/10/15 1:20:35

10月13日，每日信息差

今天是2023年10月13日，以下是为您准备的13条信息差第一、欧盟投资4.5亿欧元在法国建设电池超级工厂。欧洲投资银行是欧盟的贷款机构，也是世界上最大的跨国银行之一第二、北京银行推出数字人民币智能合约平台数字人民币预付资金管理产品在商超场景…...

编程日记 2023/10/15 1:19:33

Spring Boot 中的 Redis 数据操作配置和使用

Spring Boot 中的 Redis 数据操作配置和使用 Redis（Remote Dictionary Server）是一种高性能的开源内存数据库，用于缓存、消息队列、会话管理和数据存储。在Spring Boot应用程序中，Redis被广泛用于各种用例，包括缓存、…...

编程日记 2023/10/15 1:18:33

rust宏

宏看起来和函数很像，只不过名称末尾有一个感叹号 ! 。宏并不产生函数调用，而是展开成源码，并和程序的其余部分一起被编译。 Rust宏和C不同，Rust的宏会展开为抽象语法树（AST，abstract syntax tree&#xff…...

编程日记 2023/10/15 1:17:32

性能测试之性能测试指标详解

前言刚开始，以为做性能测试，就是做些脚本、参数化、关联，压起来之后，再扔出一个结果。但实际上不止这些内容，还要加上性能分析，关注调优之后响应时间有多大的提升，TPS 有多大的提高&#xf…...

编程日记 2023/10/15 1:16:31

CustomNavBar 自定义导航栏视图

1. 创建偏好设置键 CustomNavBarTitlePreferenceKey.swift import Foundation import SwiftUI//State private var showBackButton: Bool true //State private var title: String "Title" //"" //State private var subtitle: String? "SubTitl…...

编程日记 2023/10/15 1:15:30

canal rocketmq

上篇文章canal 消费进度说到直接使用ClusterCanalConnector并发消费是有问题的，可以先用单点将canal事件发送到mq中，再由mq并发处理，另外mq还可以做到削峰的作用，让canal数据不至于阻塞。使用队列，可以自己起一个单实…...

编程日记 2023/10/15 1:14:29

【数据库系统概论】第九章关系查询处理何查询优化

9.1查询处理一：查询处理步骤关系数据库管理系统查询处理可以分为4个阶段： 查询分析查询检查查询优化查询执行 （1）查询分析任务：对查询语句进行扫描，分析词法、语法是否符合SQL语法规则如果没有语…...

编程日记 2023/10/15 1:13:28

bp盐丘模型波场数值模拟matlab

波场数值模拟是地震勘探和地震学研究中常用的工具，而BP（Backpropagation）盐丘模型是一种用于地下介质成像的方法。如果您想在MATLAB中进行波场数值模拟，并结合BP盐丘模型进行地下成像，可以按照以下步骤进行&#xff1a…...

编程日记 2023/10/15 1:12:27

结构体对齐规则

1.第一个成员在结构体变量偏移量为0的地址处。 2.其他成员变量对齐到某个数字(对齐数)的整数倍的地址处。(对齐数编译器默认的一个对齐数与该成员大小的较小值）注意：目前有且只有VS编译器有默认为8. 3.结构体总大小为最大对齐数的整数倍。 4.如果嵌套…...

编程日记 2023/10/15 1:11:26

css 如何让元素内部文本和外部文本一块显示省略号

实际上还是有这样的需求的 <div class"container"><span>啊啊啊啊啊啊啊啊</span>你好啊撒撒啊撒撒撒撒啊撒撒撒撒撒说</div>还是有这样的需求的哦。 div.container {width: 200px;white-space: nowrap;text-overflow: ellipsis;overflow:…...

编程日记 2023/10/15 1:10:25

SQL语句-中级

一、Mysql软件使用 1.启动/停止Mysql服务器任务管理器 cmd命令：以管理员的身份打开cmd命令行 net start mysql80//开启net stop mysql80//停止 2.连接与断开Mysql服务器注意要在bin目录下执行:-u用户名root，-p密码 mysql -u root -p 可能出现的…...

编程日记 2023/10/15 1:06:21

巧用h2-database.jar连接数据库

文章目录一、概述二、实践三、解决办法一、概述 H2 Database是一个开源的嵌入式数据库引擎，采用java语言编写，不受平台的限制，同时H2 Database提供了一个十分方便的web控制台用于操作和管理数据库内容。H2 Database还提供兼容模式&#…...

编程日记 2023/10/15 1:05:20

一、抓包第一次请求

二、第二次请求

三、第三次请求

相关文章：