动态拉取接口数据
创始人
2024-03-25 00:35:14
0

通过工具类动态拉取接口数据

写在前言:

使用工具类拉取接口中的数据,存放在自己的数据库,进行展示。
自己去看工具类中的注释,按照自己的需求去修改。

在这里插入图片描述

一、工具类

1、整理需求

想通过工具类把接口数据存放在数据库,并且别人接口中的数据发生变化。自己数据库中的数据也要发生变化。

2、技术显现

1、需要通过登录拿到token
2、把token放入全局的作用域
3、定时任务。自动到时间去请求接口。(5分钟一次,把请求过来的数据,存放在数据库中)


import com.baidu.util.TokenUtil;
import org.springframework.stereotype.Component;import java.io.*;
import java.net.HttpURLConnection;
import java.net.URL;/*** jdk 调用第三方接口* @author hsq*/
@Component
public class HttpClientUtil2 {public static String doPost(String pathUrl, String data){OutputStreamWriter out = null;BufferedReader br = null;String result = "";try {URL url = new URL(pathUrl);//打开和url之间的连接HttpURLConnection conn = (HttpURLConnection) url.openConnection();//设定请求的方法为"POST",默认是GET//post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。conn.setRequestMethod("POST");//设置30秒连接超时conn.setConnectTimeout(30000);//设置30秒读取超时conn.setReadTimeout(30000);// 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在http正文内,因此需要设为true, 默认情况下是false;conn.setDoOutput(true);// 设置是否从httpUrlConnection读入,默认情况下是true;conn.setDoInput(true);// Post请求不能使用缓存conn.setUseCaches(false);//设置通用的请求属性conn.setRequestProperty("accept", "*/*");conn.setRequestProperty("connection", "Keep-Alive");  //维持长链接//            application/json;charset=utf-8;conn.setRequestProperty("Content-Type", "application/json");//连接,从上述url.openConnection()至此的配置必须要在connect之前完成,conn.connect();/*** 下面的三句代码,就是调用第三方http接口*///获取URLConnection对象对应的输出流//此处getOutputStream会隐含的进行connect(即:如同调用上面的connect()方法,所以在开发中不调用上述的connect()也可以)。out = new OutputStreamWriter(conn.getOutputStream(), "UTF-8");//发送请求参数即数据out.write(data);//flush输出流的缓冲out.flush();/*** 下面的代码相当于,获取调用第三方http接口后返回的结果*///获取URLConnection对象对应的输入流InputStream is = conn.getInputStream();//构造一个字符流缓存br = new BufferedReader(new InputStreamReader(is));String str = "";while ((str = br.readLine()) != null){result += str;}System.out.println(result);//关闭流is.close();//断开连接,disconnect是在底层tcp socket链接空闲时才切断,如果正在被其他线程使用就不切断。conn.disconnect();} catch (Exception e) {e.printStackTrace();}finally {try {if (out != null){out.close();}if (br != null){br.close();}} catch (IOException e) {e.printStackTrace();}}return result;}/*** 以get方式调用对方接口方法* @param pathUrl*/public static String doGet(String pathUrl){BufferedReader br = null;String result = "";try {URL url = new URL(pathUrl);//打开和url之间的连接HttpURLConnection conn = (HttpURLConnection) url.openConnection();//设定请求的方法为"GET",默认是GET//post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。conn.setRequestMethod("GET");//设置30秒连接超时conn.setConnectTimeout(30000);//设置30秒读取超时conn.setReadTimeout(30000);// 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在http正文内,因此需要设为true, 默认情况下是false;conn.setDoOutput(true);// 设置是否从httpUrlConnection读入,默认情况下是true;conn.setDoInput(true);// Post请求不能使用缓存(get可以不使用)conn.setUseCaches(false);//设置通用的请求属性conn.setRequestProperty("accept", "*/*");conn.setRequestProperty("connection", "Keep-Alive");  //维持长链接conn.setRequestProperty("Content-Type", "application/x-www-form-urlencoded;charset=utf-8");//连接,从上述url.openConnection()至此的配置必须要在connect之前完成,conn.connect();/*** 下面的代码相当于,获取调用第三方http接口后返回的结果*///获取URLConnection对象对应的输入流InputStream is = conn.getInputStream();//构造一个字符流缓存br = new BufferedReader(new InputStreamReader(is, "UTF-8"));String str = "";while ((str = br.readLine()) != null){result += str;}System.out.println(result);//关闭流is.close();//断开连接,disconnect是在底层tcp socket链接空闲时才切断,如果正在被其他线程使用就不切断。conn.disconnect();} catch (Exception e) {e.printStackTrace();}finally {try {if (br != null){br.close();}} catch (IOException e) {e.printStackTrace();}}return result;}
}

二、通过工具类解析接口

1、通过上面的工具类解析token

1、通过fastjson进行解析接口数据
2、通过工具类获得接口中的token

  com.alibabafastjson1.2.79

3、请自行创建包名,类名。这里就是通过fastjson,添加接口中必须要填写的参数。通过工具类获得token

package com.baidu.demo.task;import com.alibaba.fastjson.JSONObject;
import com.baidu.demo.controller.tool.HttpClientUtil2;
import com.baidu.demo.util.TokenUtil;
import org.springframework.scheduling.annotation.Scheduled;
import org.springframework.stereotype.Component;@Component
public class GetTokenTask {public void getToken(){System.err.println("token....");JSONObject jsonObject = new JSONObject();jsonObject.put("apiKey","dc8cfd3022326d91");jsonObject.put("phone","18100366586");jsonObject.put("apiSecret","U2FsdGVkX18flru9PHgEvF9Gmlc9dI67qG4Tt1XZU+M=");HttpClientUtil2 httpClientUtil2 = new HttpClientUtil2();String result = httpClientUtil2.doPost("http://140.249.50.65:22/phone/auth", String.valueOf(jsonObject));System.out.println("返回数据:"+result);JSONObject resultJson = JSONObject.parseObject(result);String token = resultJson.getString("data");System.err.println(token);TokenUtil.token.setToken(token);}
}

三、将解析到的token 放入全局的作用域。

1、通过创建token 的工具类,将token放入全局作用域

Config包

package com.baidu.demo.config;public class TokenEntity {public String token;public String getToken() {return token;}public void setToken(String token) {this.token = token;}
}

util包

package com.baidu.demo.util;import com.baidu.demo.config.TokenEntity;public class TokenUtil {public static TokenEntity token = new TokenEntity();
}

这样就可以通过 TokenUtil.token.getToken() 获取token数据了;

四、修改工具类

1、其他接口拿到token之后才能访问数据

上面只是通过工具类拿到token,但是其他的接口都需要拿到token之后,才能放回数据。所以上面的工具类需要修改。

2、最终工具类

1、doPost方法(下面的第一张图片,是每一个接口要拿到token之后才能方位的方法)
2、doPostToken方法(是登录 接口返回token 的方法)
在这里插入图片描述

package com.baidu.controller.tool;import com.baidu.util.TokenUtil;
import org.springframework.stereotype.Component;import java.io.*;
import java.net.HttpURLConnection;
import java.net.URL;/*** jdk 调用第三方接口* @author hsq*/
@Component
public class HttpClientUtil2 {/*** 以post方式调用对方接口方法* @param pathUrl*/public static String doPost(String pathUrl, String data){OutputStreamWriter out = null;BufferedReader br = null;String result = "";try {URL url = new URL(pathUrl);//打开和url之间的连接HttpURLConnection conn = (HttpURLConnection) url.openConnection();//设定请求的方法为"POST",默认是GET//post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。conn.setRequestMethod("POST");//设置30秒连接超时conn.setConnectTimeout(1000000000);//设置30秒读取超时conn.setReadTimeout(1000000000);// 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在http正文内,因此需要设为true, 默认情况下是false;conn.setDoOutput(true);// 设置是否从httpUrlConnection读入,默认情况下是true;conn.setDoInput(true);// Post请求不能使用缓存conn.setUseCaches(false);//设置通用的请求属性conn.setRequestProperty("accept", "*/*");conn.setRequestProperty("connection", "Keep-Alive");  //维持长链接conn.setRequestProperty("Authorization", TokenUtil.token.getToken());  //维持长链接//            application/json;charset=utf-8;conn.setRequestProperty("Content-Type", "application/json");//连接,从上述url.openConnection()至此的配置必须要在connect之前完成,conn.connect();/*** 下面的三句代码,就是调用第三方http接口*///获取URLConnection对象对应的输出流//此处getOutputStream会隐含的进行connect(即:如同调用上面的connect()方法,所以在开发中不调用上述的connect()也可以)。out = new OutputStreamWriter(conn.getOutputStream(), "UTF-8");//发送请求参数即数据out.write(data);//flush输出流的缓冲out.flush();/*** 下面的代码相当于,获取调用第三方http接口后返回的结果*///获取URLConnection对象对应的输入流InputStream is = conn.getInputStream();//构造一个字符流缓存br = new BufferedReader(new InputStreamReader(is));String str = "";while ((str = br.readLine()) != null){result += str;}System.out.println(result);//关闭流is.close();//断开连接,disconnect是在底层tcp socket链接空闲时才切断,如果正在被其他线程使用就不切断。conn.disconnect();} catch (Exception e) {e.printStackTrace();}finally {try {if (out != null){out.close();}if (br != null){br.close();}} catch (IOException e) {e.printStackTrace();}}return result;}public static String doPostToken(String pathUrl, String data){OutputStreamWriter out = null;BufferedReader br = null;String result = "";try {URL url = new URL(pathUrl);//打开和url之间的连接HttpURLConnection conn = (HttpURLConnection) url.openConnection();//设定请求的方法为"POST",默认是GET//post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。conn.setRequestMethod("POST");//设置30秒连接超时conn.setConnectTimeout(30000);//设置30秒读取超时conn.setReadTimeout(30000);// 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在http正文内,因此需要设为true, 默认情况下是false;conn.setDoOutput(true);// 设置是否从httpUrlConnection读入,默认情况下是true;conn.setDoInput(true);// Post请求不能使用缓存conn.setUseCaches(false);//设置通用的请求属性conn.setRequestProperty("accept", "*/*");conn.setRequestProperty("connection", "Keep-Alive");  //维持长链接//            application/json;charset=utf-8;conn.setRequestProperty("Content-Type", "application/json");//连接,从上述url.openConnection()至此的配置必须要在connect之前完成,conn.connect();/*** 下面的三句代码,就是调用第三方http接口*///获取URLConnection对象对应的输出流//此处getOutputStream会隐含的进行connect(即:如同调用上面的connect()方法,所以在开发中不调用上述的connect()也可以)。out = new OutputStreamWriter(conn.getOutputStream(), "UTF-8");//发送请求参数即数据out.write(data);//flush输出流的缓冲out.flush();/*** 下面的代码相当于,获取调用第三方http接口后返回的结果*///获取URLConnection对象对应的输入流InputStream is = conn.getInputStream();//构造一个字符流缓存br = new BufferedReader(new InputStreamReader(is));String str = "";while ((str = br.readLine()) != null){result += str;}System.out.println(result);//关闭流is.close();//断开连接,disconnect是在底层tcp socket链接空闲时才切断,如果正在被其他线程使用就不切断。conn.disconnect();} catch (Exception e) {e.printStackTrace();}finally {try {if (out != null){out.close();}if (br != null){br.close();}} catch (IOException e) {e.printStackTrace();}}return result;}/*** 以get方式调用对方接口方法* @param pathUrl*/public static String doGet(String pathUrl){BufferedReader br = null;String result = "";try {URL url = new URL(pathUrl);//打开和url之间的连接HttpURLConnection conn = (HttpURLConnection) url.openConnection();//设定请求的方法为"GET",默认是GET//post与get的不同之处在于post的参数不是放在URL字串里面,而是放在http请求的正文内。conn.setRequestMethod("GET");//设置30秒连接超时conn.setConnectTimeout(30000);//设置30秒读取超时conn.setReadTimeout(30000);// 设置是否向httpUrlConnection输出,因为这个是post请求,参数要放在http正文内,因此需要设为true, 默认情况下是false;conn.setDoOutput(true);// 设置是否从httpUrlConnection读入,默认情况下是true;conn.setDoInput(true);// Post请求不能使用缓存(get可以不使用)conn.setUseCaches(false);//设置通用的请求属性conn.setRequestProperty("accept", "*/*");conn.setRequestProperty("connection", "Keep-Alive");  //维持长链接conn.setRequestProperty("Content-Type", "application/x-www-form-urlencoded;charset=utf-8");//连接,从上述url.openConnection()至此的配置必须要在connect之前完成,conn.connect();/*** 下面的代码相当于,获取调用第三方http接口后返回的结果*///获取URLConnection对象对应的输入流InputStream is = conn.getInputStream();//构造一个字符流缓存br = new BufferedReader(new InputStreamReader(is, "UTF-8"));String str = "";while ((str = br.readLine()) != null){result += str;}System.out.println(result);//关闭流is.close();//断开连接,disconnect是在底层tcp socket链接空闲时才切断,如果正在被其他线程使用就不切断。conn.disconnect();} catch (Exception e) {e.printStackTrace();}finally {try {if (br != null){br.close();}} catch (IOException e) {e.printStackTrace();}}return result;}
}

五、定时任务

1、定时拉取数据到自己的数据库

https://juejin.cn/post/6844903968292732941
1、在启动类上开启定时任务的注解 @EnableScheduling
2、在需要调用的方法上加上@Scheduled 注解

下面的意思是每5分钟去调用这个方法。(这个方法里面写了添加到自己数据库的操作)

@Slf4j
@Component
@Transactional(rollbackFor = Exception.class)
public class ConnectTeamTask {@Autowiredprivate AlarmListTool alarmListTool;@Scheduled(cron = "0 0/5 * * * ? ")public void clearTodayHotDistrict() {alarmListTool.alarmList(0);alarmListTool.alarmList(1);alarmListTool.alarmList(2);}
}

cron 在线生成器,若依框架上也有
https://cron.qqe2.com/

相关内容

热门资讯

监控摄像头接入GB28181平... 流程简介将监控摄像头的视频在网站和APP中直播,要解决的几个问题是:1&...
Windows10添加群晖磁盘... 在使用群晖NAS时,我们需要通过本地映射的方式把NAS映射成本地的一块磁盘使用。 通过...
protocol buffer... 目录 目录 什么是protocol buffer 1.protobuf 1.1安装  1.2使用...
在Word、WPS中插入AxM... 引言 我最近需要写一些文章,在排版时发现AxMath插入的公式竟然会导致行间距异常&#...
Fluent中创建监测点 1 概述某些仿真问题,需要创建监测点,用于获取空间定点的数据࿰...
educoder数据结构与算法...                                                   ...
MySQL下载和安装(Wind... 前言:刚换了一台电脑,里面所有东西都需要重新配置,习惯了所...
MFC文件操作  MFC提供了一个文件操作的基类CFile,这个类提供了一个没有缓存的二进制格式的磁盘...
有效的括号 一、题目 给定一个只包括 '(',')','{','}'...
【Ctfer训练计划】——(三... 作者名:Demo不是emo  主页面链接:主页传送门 创作初心ÿ...