Java语言怎样接入代码demo
创始人
2024-01-17 15:26:23
0

随着信息时代的到来,大数据作为互联网的重要组成部分,越来越多的企业倾向于通过互联网发展壮大自己,如何获取高价值的客户信息、行业信息尤其重要。因此,网络爬虫应运而生。那么在做数据抓取的时候,使用爬虫ip应该怎么接入代码demo呢?下文值得大家看看一看。

MAVEN引入如下依赖包:

cn.hutoolhutool-all5.3.5com.squareup.okhttp3okhttp4.7.1复制下面代码,新建Package:com.demo --> 新建Java类:Mainpackage com.demo;import cn.hutool.http.HttpUtil;import okhttp3.*;import java.io.*;import java.net.InetSocketAddress;import java.net.Proxy;import java.util.Objects;import java.util.concurrent.TimeUnit;public class Main {//    需要请求的目标网址private static final String TARGET_URL = "目标网址";//    提取链接private static final String API_URL = "提取链接";public static void main(String[] args) {String result = HttpUtil.get(API_URL);System.out.println("从接口获取的:" + result.strip());String proxyIp = result.strip();try {Proxies(TARGET_URL, proxyIp);Thread.sleep(500);} catch (Exception e) {e.printStackTrace();}}public static void Proxies(String urlString, String ipPort) {try {Response response = null;try {System.out.println("资源地址:" + ipPort);String ip = ipPort.split(":")[0];int port = Integer.parseInt(ipPort.split(":")[1]);Proxy proxy = new Proxy(Proxy.Type.HTTP, new InetSocketAddress(ip, port));OkHttpClient httpClient = new OkHttpClient().newBuilder().proxy(proxy).connectTimeout(10, TimeUnit.SECONDS).build();Request request = null;request = (new Request.Builder().url(urlString).build());response = httpClient.newCall(request).execute();System.out.println("输出结果2:" + Objects.requireNonNull(response.body()).string());} catch (IOException e) {System.out.println("请求出错1");e.printStackTrace();}} catch (Exception e) {System.out.println("请求出错2");e.printStackTrace();}}}

在我们使用时,会遇到一些错误代码。了解错误代码的含义,可以快速的帮助我们解决问题。今天就给大家详细介绍一下,常见的错误代码及释义。

错误代码 错误提示 说明

code:111 请在1秒后再次请求 提取链接请求太过频繁,超出限制

code:113 请将192.168.0.0设置为白名单! 白名单未添加/白名单掉了

code:114 余额不足 账户金额消耗完毕

code:115 请更换地区等条件重新生成api链接地址 没有资源或没有符合条件的数据

code:116 您的套餐今日已到达上限! 套餐内数量消耗完毕

code:117 您的套餐pack传参有误!请检测您现在的是否在套餐所在账户! 检测本地白名单是不是在账户下

code:118 您的账户异常,请联系客服! 账户处于被禁用状态

code:121 您的该套餐已经过期了! 套餐过期

code:401 IP:1.1.1.1:2000 Authentication failed! 白名单错误/使用的已经过期

code:403 Sorry!The site has been banned! 客户目标网站异常,联系客服处理

相关内容

热门资讯

AWSECS:访问外部网络时出... 如果您在AWS ECS中部署了应用程序,并且该应用程序需要访问外部网络,但是无法正常访问,可能是因为...
AWSElasticBeans... 在Dockerfile中手动配置nginx反向代理。例如,在Dockerfile中添加以下代码:FR...
AWR报告解读 WORKLOAD REPOSITORY PDB report (PDB snapshots) AW...
AWS管理控制台菜单和权限 要在AWS管理控制台中创建菜单和权限,您可以使用AWS Identity and Access Ma...
银河麒麟V10SP1高级服务器... 银河麒麟高级服务器操作系统简介: 银河麒麟高级服务器操作系统V10是针对企业级关键业务...
北信源内网安全管理卸载 北信源内网安全管理是一款网络安全管理软件,主要用于保护内网安全。在日常使用过程中,卸载该软件是一种常...
群晖外网访问终极解决方法:IP... 写在前面的话 受够了群晖的quickconnet的小水管了,急需一个新的解决方法&#x...
​ToDesk 远程工具安装及... 目录 前言 ToDesk 优势 ToDesk 下载安装 ToDesk 功能展示 文件传输 设备链接 ...
Azure构建流程(Power... 这可能是由于配置错误导致的问题。请检查构建流程任务中的“发布构建制品”步骤,确保正确配置了“Arti...
不能访问光猫的的管理页面 光猫是现代家庭宽带网络的重要组成部分,它可以提供高速稳定的网络连接。但是,有时候我们会遇到不能访问光...