- 博客(7)
- 收藏
- 关注
RSS订阅原创 几种方式巧妙解决动态换IP问题
因为2020开年有些特殊，但是我们相信春天永远不会迟来。居家办公，网上课程，网上办理业务，正由于网络的便捷，工作室、企业需要的数据抓取，网购抢购、营销等都会遇到IP被限制无法办公的窘境。例如：现在蓬勃发展的工作室。随着工作室的不断增加，都会被限制IP的问题，同一个IP下，就会有封号的危险，被系统检测甚至制裁。这对于工作来说无利于发展。多开账号、窗口如何实现单窗口单IP或者单机单IP？工作室都是...
2020-02-27 10:31:07
1044
原创 如何选择动态IP软件
现在随着我们的工作需要，越来越多的人已经开始使用换IP软件。现在市场上也有很多类的换IP软件，所以我们会在，如何选择换IP软件？什么换IP软件好用？的时候会比较迷茫，不知道该从哪入手。其实，在选择换IP软件时只需要考虑到以下4点就可以了。IP的可利用率可利用率，是指提取的这些代理IP中可以正常使用的比率。如果说我们无法使用这个代理IP请求某个网站、某个服务器或者访问时超时，那么就代表这...
2020-01-20 15:07:51
666
原创 浅谈数据抓取之 HTTP 基本原理
什么是 HTTPHTTP（Hyper Text Transfer Protocol 超文本传输协议） 是互联网上应用最为广泛的一种网络协议，是一个客户端和服务器端请求和应答的标准，用于从 www 服务器传输超文本到本地浏览器的传输协议，它可以使浏览器更加高效，使网络传输减少。HTTP 由万维网协会和 Internet 工作小组 IETF 共同合作制定的规范。HTTP 和 HTTPS说起 H...
2019-12-17 14:07:00
488
原创 数据抓取使用HTTP代理ip代码示例
HTTP Proxy Demo 代码1、Python#! -- encoding:utf-8 --import requests# 要访问的目标页面targetUrl = "http://ip.hahado.cn/ip"# 代理服务器proxyHost = "ip.hahado.cn"proxyPort = "39010"# 代理隧道验证信息proxyUser = "us...
2019-11-26 17:28:30
336
原创 简单几步设置电脑动态换ip
现在的网络环境多样复杂，有的是路由器，有的是交换机，有的是WIFI，又有的是局域网。那么，在这些网络环境下，如何实现电脑动态换IP? 今天就简单的介绍两种方法换电脑IP。第一种方法：修改本地(TCP/IP)协议第一步：查看本机的ip，看下面的链接(xp系统)。第二步：对着桌面的网上邻居，点击鼠标右键然后点击属性。第三步：对着本地连接按鼠标右键，点击“属性”。第四步：选中Interne...
2019-11-25 14:19:20
1659
原创 用代理ip怎么提高数据抓取工作效率？
随着互联网产业的不断发展，应时代需求，大数据爬虫应运而生，其主要是为获取更多有价值的数据，代理ip就是网络爬虫不可缺少的部分，每个网站都有自己独有的一些数据资源，并且对这些资源加强自我保护避免信息流失，也就增加了反爬取的机制，过验证码。因此，在网站限制的情况下，如何利用代理IP实现快速数据采集，提高工作效率？一、使用多线程+代理1.1、多线程方式就是使用多线程同时进行数据采集的工作...
2019-11-12 11:17:26
453
转载 数据抓取爬虫类必知——HTTP协议基础
HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web）服务器传输超文本到本地浏览器的传送协议。（HTTP代理用来数据抓取方案可以联系企鹅：56731523）HTTP是一个基于TCP/IP通信协议来传递数据（HTML文件,图片文件,查询结果等）。HTTP是一个属于应用层的面向对象的协议，由于其简捷、快...
2019-11-08 11:32:36
372
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人