当前位置： 首页 > news >正文

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

news 文章来源：https://blog.csdn.net/weixin_35770067/article/details/144351663 2025/1/19 17:08:52

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。

安装一次，后面调用就不会再去安装了

下载地址：https://github.com/FelisCatus/SwitchyOmega/releases

这两个文件随便那个都可以,下载后xpi改成zip或者crx改成zip解压到自己方便调用的地方
在这里插入图片描述
下面直接上代码

# -*- coding: utf-8 -*-
import warnings
warnings.filterwarnings('ignore')
import platform

相关文章：

爬虫自动化之drissionpage+SwitchyOmega实现随时切换代理ip

本文介绍了如何使用DrizzlePage进行爬虫自动化，并重点讲解了首次启动时设置代理IP以及通过SwitchyOmega插件实现随时切换代理IP的方法。 安装一次，后面调用就不会再去安装了 下载地址：https://github.com/FelisCatus/SwitchyOmega/releases 这两个文件随便那个都可以,下载…...

编程日记 2024/12/11 1:14:33

docker安装kettle（PDI）并实现web访问

我是MAC电脑M1版本，希望把软件交给docker进行管理，最近公司同事都通过kettle来实现外部数据对接，所以我本地也有安装kettle需求，在网上找到了这个解决方案操作很简单，但出现了无法访问的情况。我的排查方式是&#xff…...

编程日记 2024/12/11 1:12:31

[软件工程]十.可靠性工程（reliable engineering）

1.什么是可靠性工程 我们希望软件在给定的时间内，运行的时候不会崩溃或者发生失效，同时能保护我们的数据和个人信息。我们要能够信任我们所使用的软件，这意味着软件必须是可靠的。可靠性（reliability）：系统…...

编程日记 2024/12/11 1:10:29

【Makefile】编译日志之输出重定向符号 ＞

用法1 make all >& compilelog.txt make all > compilelog.txt这两个编译命令在功能上有一些细微的区别，主要在于标准输出和标准错误的处理方式。 make all >& compilelog.txt 这个命令会将标准输出（stdout）和标准错误&a…...

编程日记 2024/12/11 1:07:25

linux之less

less命令是Linux系统中一个功能强大的文件查看工具，它允许用户分页查看文件内容，并提供了多种快捷键和选项来增强用户体验。以下是less命令的一些常用操作： 基本使用 查看文件使用less命令的基本语法是less [选项] [文件名]。例如&#xff0…...

编程日记 2024/12/11 1:05:21

算法-字符串-165.比较版本号

一、题目 二、思路解析 1.思路： 比较的是两个版本号它们以“.”作为分割的部分的有效值（即数值）是否一致 2.常用方法： 1.s.split("\\规则")，将字符串按参数规则进行分割并存储在字符串数组中 String[] str …...

编程日记 2024/12/11 1:03:19

List与Set、数组与ArrayList、ArrayList与LinkedList的区别

List 与 Set 的区别： 项ListSet重复允许重复的对象（多个null也可以）不允许重复的对象（null也只能有一个）有序性有序的。 保持了每个元素的插入顺序。即输出顺序就是输入顺序。 有序和无序都有。 HashSet：无…...

编程日记 2024/12/11 0:59:13

如何在 Odoo18 视图中添加关联数据看板按钮 | 免费开源ERP实施诀窍

文 / 开源智造 Odoo亚太金牌服务 引言 关联数据看板按钮乃是 Odoo 当中的一项强效功能，它容许用户顺遂地访问相关记录，或者直接从模型的表单视图施行特定操作。它们为用户给予了对重要信息的疾速访问途径，并简化了工作流程，由此…...

编程日记 2024/12/11 0:58:12

Linux下mysql环境的搭建

1.mysql的下载 去MySQL官网下载mysql的linux压缩包 MySQL :: Download MySQL Community Server 如果下载慢请到网盘中自行下载 通过网盘分享的文件：mysql-8.0.40-1.el7.x86_64.rpm-bundle.tar 链接: https://pan.baidu.com/s/1vUJ-VuTwer1nLPT-haQCqw?pwd6342 提…...

编程日记 2024/12/11 0:56:10

视觉语言模型 Qwen2-VL

视觉语言模型 Qwen2-VL flyfish from PIL import Image import requests import torch from torchvision import io from typing import Dict from transformers import Qwen2VLForConditionalGeneration, AutoTokenizer, AutoProcessor from modelscope import snapshot_dow…...

编程日记 2024/12/11 0:55:09

浅谈新能源汽车感应钥匙一键启动的步骤和特点

随着汽车智能化技术的发展，无钥匙启动系统还可以与其他智能系统进行集成，如智能车载系统、远程控制系统等。这使得车主可以通过智能手机等智能设备远程控制车辆的启动、解锁、上锁等操作，进一步提升了使用的便捷性和智能化水平‌。新能源汽车…...

编程日记 2024/12/11 0:51:05

鸿蒙ArkTS语言基础语法详解

文章目录 鸿蒙ArkTS语言基础语法详解一、引言二、ArkTS语言概述1. ArkTS语言特点2. TypeScript基础语法2.1 类型注解2.2 接口2.3 泛型2.4 类的继承2.5 类的访问修饰符 三、ArkTS的基本组成3.1 装饰器3.2 UI描述3.3 自定义组件3.4 系统组件3.5 属性方法和事件方法 四、自定义组件…...

编程日记 2024/12/11 0:48:01

H5游戏出海如何获得更多增长机会？

海外H5小游戏的崛起给了国内众多中小厂商出海发展的机会，开发者如何在海外市场获得更多的增长机会？#APP出海# H5游戏如何在海外获得核心用户？ HTML5游戏的开发与运营者们首先可以利用量多质高的HTML5游戏，维持海外用户粘性&…...

编程日记 2024/12/11 0:43:56

Cmake+基础命令

一、版本要求&#xff1a; 检查 cmake 版本号的最低要求&#xff0c;不满足条件时报错。 cmake_minimum_required(VERSION <version>)参数&#xff1a; version&#xff1a;最低要求的版本号 例子&#xff1a; # 最低要求安装3.21版本的cmake cmake_minimum_required…...

编程日记 2024/12/11 0:39:51

python数据分析之爬虫基础：requests详解

1、requests基本使用 1.1、requests介绍 requests是python中一个常用于发送HTTP请求的第三方库&#xff0c;它极大地简化了web服务交互的过程。它是唯一的一个非转基因的python HTTP库&#xff0c;人类可以安全享用。 1.2、requests库的安装 pip install -i https://pypi.tu…...

编程日记 2024/12/11 0:37:46

PHP期末复习（通过30道填空题梳理知识点）

一、基本语法 PHP的开始标记是&#xff1a; <?php<?php 是PHP脚本的开始标签&#xff0c;所有PHP代码必须在这个标签内书写。 PHP文件的结束标记是&#xff1a; ?>?> 是PHP脚本的结束标签&#xff0c;在大多数PHP文件中&#xff0c;通常可以省略结束标记。 定…...

编程日记 2024/12/11 0:36:45

PostgreSQL 安装部署系列：使用YUM 方式在Centos 7.9 安装指定 PostgreSQL -15版本数据库

一、前言 千里之行始于足下&#xff0c;想学习一门数据库&#xff0c;首先要从安装部署开始&#xff0c;先拥有一套属于自己的学习测试库。为了更好的学习该数据库&#xff0c;可以选择一个在企业界使用率比较普及的操作系统&#xff0c;选择稳定版本的操作系统&#xff1b;如果…...

编程日记 2024/12/11 0:27:36

知识图谱8:深度学习各种小模型

1、知识图谱的展示有很多工具 Neo4j Browser - - - - 浏览器版本 Neo4j Desktop - - - - 桌面版本 graphX - - - - 可以集成到Neo4j Desktop Neo4j 提供的 Neo4j Bloom 是用户友好的可视化工具&#xff0c;适合非技术用户直观地浏览图数据。Cypher 是其核心查询语言&#xf…...

编程日记 2024/12/11 0:19:26

为什么 JavaScript 中的 `new` 运算符报错？

在 JavaScript 中&#xff0c;new 运算符通常用于创建一个新对象并调用构造函数来初始化对象。然而&#xff0c;new 运算符可能会引发一些错误&#xff0c;通常是由于以下原因导致的&#xff1a; 构造函数没有正确的定义&#xff1a; 如果使用 new 运算符调用的函数没有正确地定…...

编程日记 2024/12/11 0:18:24

Tomcat，javaweb， servlet , springBoot

在server.xml里配置服务器 <scope>provided</scope>打包的时候&#xff0c;这个jar包不会被打进去&#xff0c;因为tomcat已将封装了这个jar包&#xff0c;没必要要这个...

编程日记 2024/12/11 0:10:15

使用Kimi开发自己的问答应用

概述 Kimi是大家常用的一个人工智能助手&#xff0c;本文使用Kimi开发文档&#xff0c;以node作为后端&#xff0c;开发与一个问答系统 实现效果 Kimi简介 Kimi是由Moonshot AI开发的人工智能助手&#xff0c;擅长中文和英文对话。目标是帮助用户解决问题、提供信息和执行任…...

编程日记 2024/12/11 0:09:13

TypeScript进阶

Typescript进阶 基础知识 JavaScript 的核心特点就是灵活&#xff0c;但随着项目规模的增大&#xff0c;灵活反而增加开发者的心智负担。例如在代码中一个变量可以被赋予字符串、布尔、数字、甚至是函数&#xff0c;这样就充满了不确定性。而且这些不确定性可能需要在代码运行…...

编程日记 2024/12/11 0:08:09

jenkins邮件的配置详解

Jenkins邮件的配置涉及多个步骤和细节，以下是详细的配置指南： 一、前期准备 确定邮件服务：明确Jenkins将要使用的邮件服务，如QQ邮箱、163邮箱、公司邮箱（基于Microsoft 365或Exchange Server）等。获取SMTP配置信息：根据邮件服务类型，获取相应的SMTP服务器地址、端口号…...

编程日记 2024/12/11 0:07:06

小皮面板（PHPSTUDY）配置多个域名或IP

问题描述 小皮面板默认采用nginx的静态部署&#xff0c;按照使用nginx的习惯只需要额外添加一个server即可&#xff0c;但是会发现直接往配置文件里添加新的server是不生效的&#xff0c;小皮的官网论坛几乎已经停止维护&#xff0c;因此资料较少&#xff0c;原本也没有仔细使…...

编程日记 2024/12/11 0:04:02

【大语言模型】LangChain LCEL 表达式语言

【大语言模型】LangChain LCEL 表达式语言 一、简介二、LCEL的优势三、LCEL 的基本使用1、Runnable 对象 四、实战实例 一、简介 LangChain LCEL 的全称为 LangChain Expression Language 即可直译为 LangChain 表达式。 为了构造更复杂的 LLM 应用并且更为简便快捷的构造 LLM…...

编程日记 2024/12/10 23:58:57

Leetcode 3382. Maximum Area Rectangle With Point Constraints II

Leetcode 3382. Maximum Area Rectangle With Point Constraints II 1. 解题思路2. 代码实现 题目链接&#xff1a;3382. Maximum Area Rectangle With Point Constraints II 1. 解题思路 这一题是题目3380. Maximum Area Rectangle With Point Constraints I的进阶版&#…...

编程日记 2024/12/10 23:57:56

MitelMiCollab 身份绕过导致任意文件读取漏洞复现（CVE-2024-41713）

0x01 产品描述： Mitel MiCollab 是一个企业协作平台，它将各种通信工具整合到一个应用程序中，提供语音和视频通话、消息传递、状态信息、音频会议、移动支持和团队协作功能。0x02 漏洞描述： Mitel MiCollab 的 NuPoint 统一消息 (NPM) 组件中存在身份验证绕过漏洞，由于输入…...

编程日记 2024/12/10 23:55:49

DVWA 靶场 SQL 注入报错 Illegal mix of collations for operation ‘UNION‘ 的解决方案

在 dvwa 靶场进行联合 SQL 注入时&#xff0c;遇到报错 Illegal mix of collations for operation UNION报错如下图&#xff1a; 解决办法&#xff1a; 找到文件MySQL.php 大致位置在dvwaincludesDBMS 目录下 使用编辑器打开 检索$create_db 第一个就是 在{$_DVWA[ ‘db_d…...

编程日记 2024/12/10 23:53:47

京准电钟分享：医院网络内NTP时间同步服务器作用是什么？

京准电钟分享&#xff1a;医院网络内NTP时间同步服务器作用是什么&#xff1f; 京准电钟分享&#xff1a;医院网络内NTP时间同步服务器作用是什么&#xff1f; 时间同步技术必定将是整个大数据处理系统的重要支撑和保障。时间同步技术使数据产生与处理系统的所有节点具有全局…...

编程日记 2024/12/10 23:52:45

HTML DOM API

HTMLInputElement HTMLInputElement 接口提供了特定的属性和方法&#xff0c;用于管理 <input> 元素的选项、布局和外观。 HTMLInputElement 和 <input> 之间的关系可以理解为接口与具体元素的关系&#xff1a; <input> 元素&#xff1a; <input> 是…...

编程日记 2024/12/10 23:48:37

上海网站设计价/如何做好推广

文章目录前言一、客户服务二、虚拟助理三、用于电子商务和在线销售的聊天机器人四、医疗保健和医疗应用五、教育总结前言 ChatGPT发展到目前&#xff0c;其实网上已经有大量资料了&#xff0c;博主做个收口&#xff0c;会出一个ChatGPT探索系列的文章&#xff0c;帮助大家深入…...

编程日记 2025/1/19 16:48:30

wordpress wpdb类/深圳市seo网络推广哪家好

CSS布局总结TOP、RIGHT、BOTTOM、LEFT(简称TRBL)1.position:relative父级位置属性 TRBL本身 参照依据√/ √/ 以父结点为参考依据 无 以BODY的原始点为原始点注&#xff1a;他是参照父级的原始点为原始点&#xff0c;无父级则以BODY的原始点为…...

编程日记 2025/1/19 15:58:49

wordpress 上传大文件/微营销平台

窄带物联网&#xff08;Narrow Band Internet of Things&#xff09; 蜂窝网络 关键特性 低功耗&#xff0c;低成本&#xff0c;远距离&#xff0c;大连接 NB-IoT 用途 远程抄表&#xff0c;共享单车&#xff0c;宠物跟踪&#xff0c;无人售货&#xff0c;智能路灯&#xff0c;…...

编程日记 2025/1/19 12:59:37

深圳需要做网站的公司有哪些/四川seo整站优化

本文实例讲述了Java实现简易HashMap功能。分享给大家供大家参考&#xff0c;具体如下&#xff1a;创建节点类节点类含有的属性&#xff1a;键值对(value&#xff0c;key)以及指向下一节点的next&#xff1b;这些属性的get以及set方法代码如下&#xff1a;/*** 节点类* author H…...

编程日记 2025/1/19 11:57:39

做网站的一定要开80或8080端口/网站建设公司好

新年上班第一天&#xff0c;突然遇到一个socket连接No buffer space available的问题&#xff0c;导致接口大面积调用&#xff08;webservice,httpclient&#xff09;失败的问题&#xff0c;重启服务器后又恢复了正常。 问题详情 具体异常栈信息如下&#xff1a; Caused by: ja…...

编程日记 2025/1/19 11:21:56

企业网站建站 广州 视频/爱站网挖掘关键词

PDF签名仓库介绍介绍使用签名其他仓库介绍 仓库地址 该工具从签名照片中提取文字&#xff0c;并签名到PDF文档的指定位置。除此之外&#xff0c;该仓库还支持其他PDF操作&#xff0c;如合并、OCR、水印功能等。 介绍 该工具接受PDF文件和签名图片作为输入&#xff0c;并输出…...

编程日记 2025/1/19 6:53:22