https://blog.csdn.net/csdn_wangchen/article/details/79402097

继上一次的redis集成后,有了很大的改观,但是缺少数据的同步。------>集成quartz

SpringBoot封装了对Quartz的集成 ,使用非常方便。

添加依赖:compile('org.springframework.boot:spring-boot-starter-quartz')

① 编写任务类

public class WeatherDataSyncJob extends QuartzJobBean
重写其中的方法
  1. @Override
  2. protected void executeInternal(JobExecutionContext context) throws JobExecutionException {
  3. }

方法体中写的就是quartz循环执行的。

②编写配置类

  1. @Configuration
  2. public class QuartzConfiguration {
  3. private static final int TIME = 1800;
  4. /**
  5. * Job Detail
  6. * @return
  7. */
  8. @Bean
  9. public JobDetail weatherDataSyncJobDeatil(){
  10. return JobBuilder.newJob(WeatherDataSyncJob.class)
  11. .withIdentity("weatherDataSyncJob")
  12. .storeDurably()
  13. .build();
  14. }
  15. @Bean
  16. public Trigger weatherDataSyncTrigger(){
  17. SimpleScheduleBuilder scheduleBuilder = SimpleScheduleBuilder.simpleSchedule()
  18. .withIntervalInSeconds(TIME)
  19. .repeatForever();
  20. return TriggerBuilder.newTrigger().forJob(weatherDataSyncJobDeatil())
  21. .withIdentity("weatherDataSyncTrigger")
  22. .withSchedule(scheduleBuilder)
  23. .build();
  24. }
  25. }

③ 根据本系统指定查询的任务

由于系统调用的时第三方的接口 所以为了减少调用的次数  需要半小时同步一次数据到redis缓存中。读取数据需要知道所有城市的id或名字  此时需要将xml文件读取解析为对象

第一步:将xml文件解析为java bean

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <c c1="0">
  3. <d d1="101280101" d2="广州" d3="guangzhou" d4="广东"/>
  4. <d d1="101280102" d2="番禺" d3="panyu" d4="广东"/>
  5. <d d1="101280103" d2="从化" d3="conghua" d4="广东"/>
  6. <d d1="101280104" d2="增城" d3="zengcheng" d4="广东"/>
  7. <d d1="101280105" d2="花都" d3="huadu" d4="广东"/>
  8. <d d1="101280201" d2="韶关" d3="shaoguan" d4="广东"/>
  9. <d d1="101280202" d2="乳源" d3="ruyuan" d4="广东"/>
  10. <d d1="101280203" d2="始兴" d3="shixing" d4="广东"/>
  11. <d d1="101280204" d2="翁源" d3="wengyuan" d4="广东"/>
  12. <d d1="101280205" d2="乐昌" d3="lechang" d4="广东"/>
  13. <d d1="101280206" d2="仁化" d3="renhua" d4="广东"/>
  14. <d d1="101280207" d2="南雄" d3="nanxiong" d4="广东"/>
  15. <d d1="101280208" d2="新丰" d3="xinfeng" d4="广东"/>
  16. <d d1="101280209" d2="曲江" d3="qujiang" d4="广东"/>
  17. <d d1="101280210" d2="浈江" d3="chengjiang" d4="广东"/>
  18. <d d1="101280211" d2="武江" d3="wujiang" d4="广东"/>
  19. <d d1="101280301" d2="惠州" d3="huizhou" d4="广东"/>
  20. <d d1="101280302" d2="博罗" d3="boluo" d4="广东"/>
  21. <d d1="101280303" d2="惠阳" d3="huiyang" d4="广东"/>
  22. <d d1="101280304" d2="惠东" d3="huidong" d4="广东"/>
  23. <d d1="101280305" d2="龙门" d3="longmen" d4="广东"/>
  24. <d d1="101280401" d2="梅州" d3="meizhou" d4="广东"/>
  25. <d d1="101280402" d2="兴宁" d3="xingning" d4="广东"/>
  26. <d d1="101280403" d2="蕉岭" d3="jiaoling" d4="广东"/>
  27. <d d1="101280404" d2="大埔" d3="dabu" d4="广东"/>
  28. <d d1="101280406" d2="丰顺" d3="fengshun" d4="广东"/>
  29. <d d1="101280407" d2="平远" d3="pingyuan" d4="广东"/>
  30. <d d1="101280408" d2="五华" d3="wuhua" d4="广东"/>
  31. <d d1="101280409" d2="梅县" d3="meixian" d4="广东"/>
  32. <d d1="101280501" d2="汕头" d3="shantou" d4="广东"/>
  33. <d d1="101280502" d2="潮阳" d3="chaoyang" d4="广东"/>
  34. <d d1="101280503" d2="澄海" d3="chenghai" d4="广东"/>
  35. <d d1="101280504" d2="南澳" d3="nanao" d4="广东"/>
  36. <d d1="101280601" d2="深圳" d3="shenzhen" d4="广东"/>
  37. <d d1="101280701" d2="珠海" d3="zhuhai" d4="广东"/>
  38. <d d1="101280702" d2="斗门" d3="doumen" d4="广东"/>
  39. <d d1="101280703" d2="金湾" d3="jinwan" d4="广东"/>
  40. <d d1="101280800" d2="佛山" d3="foshan" d4="广东"/>
  41. <d d1="101280801" d2="顺德" d3="shunde" d4="广东"/>
  42. <d d1="101280802" d2="三水" d3="sanshui" d4="广东"/>
  43. <d d1="101280803" d2="南海" d3="nanhai" d4="广东"/>
  44. <d d1="101280804" d2="高明" d3="gaoming" d4="广东"/>
  45. <d d1="101280901" d2="肇庆" d3="zhaoqing" d4="广东"/>
  46. <d d1="101280902" d2="广宁" d3="guangning" d4="广东"/>
  47. <d d1="101280903" d2="四会" d3="sihui" d4="广东"/>
  48. <d d1="101280905" d2="德庆" d3="deqing" d4="广东"/>
  49. <d d1="101280906" d2="怀集" d3="huaiji" d4="广东"/>
  50. <d d1="101280907" d2="封开" d3="fengkai" d4="广东"/>
  51. <d d1="101280908" d2="高要" d3="gaoyao" d4="广东"/>
  52. <d d1="101281001" d2="湛江" d3="zhanjiang" d4="广东"/>
  53. <d d1="101281002" d2="吴川" d3="wuchuan" d4="广东"/>
  54. <d d1="101281003" d2="雷州" d3="leizhou" d4="广东"/>
  55. <d d1="101281004" d2="徐闻" d3="xuwen" d4="广东"/>
  56. <d d1="101281005" d2="廉江" d3="lianjiang" d4="广东"/>
  57. <d d1="101281006" d2="赤坎" d3="chikan" d4="广东"/>
  58. <d d1="101281007" d2="遂溪" d3="suixi" d4="广东"/>
  59. <d d1="101281008" d2="坡头" d3="potou" d4="广东"/>
  60. <d d1="101281009" d2="霞山" d3="xiashan" d4="广东"/>
  61. <d d1="101281010" d2="麻章" d3="mazhang" d4="广东"/>
  62. <d d1="101281101" d2="江门" d3="jiangmen" d4="广东"/>
  63. <d d1="101281103" d2="开平" d3="kaiping" d4="广东"/>
  64. <d d1="101281104" d2="新会" d3="xinhui" d4="广东"/>
  65. <d d1="101281105" d2="恩平" d3="enping" d4="广东"/>
  66. <d d1="101281106" d2="台山" d3="taishan" d4="广东"/>
  67. <d d1="101281107" d2="蓬江" d3="pengjiang" d4="广东"/>
  68. <d d1="101281108" d2="鹤山" d3="heshan" d4="广东"/>
  69. <d d1="101281109" d2="江海" d3="jianghai" d4="广东"/>
  70. <d d1="101281201" d2="河源" d3="heyuan" d4="广东"/>
  71. <d d1="101281202" d2="紫金" d3="zijin" d4="广东"/>
  72. <d d1="101281203" d2="连平" d3="lianping" d4="广东"/>
  73. <d d1="101281204" d2="和平" d3="heping" d4="广东"/>
  74. <d d1="101281205" d2="龙川" d3="longchuan" d4="广东"/>
  75. <d d1="101281206" d2="东源" d3="dongyuan" d4="广东"/>
  76. <d d1="101281301" d2="清远" d3="qingyuan" d4="广东"/>
  77. <d d1="101281302" d2="连南" d3="liannan" d4="广东"/>
  78. <d d1="101281303" d2="连州" d3="lianzhou" d4="广东"/>
  79. <d d1="101281304" d2="连山" d3="lianshan" d4="广东"/>
  80. <d d1="101281305" d2="阳山" d3="yangshan" d4="广东"/>
  81. <d d1="101281306" d2="佛冈" d3="fogang" d4="广东"/>
  82. <d d1="101281307" d2="英德" d3="yingde" d4="广东"/>
  83. <d d1="101281308" d2="清新" d3="qingxin" d4="广东"/>
  84. <d d1="101281401" d2="云浮" d3="yunfu" d4="广东"/>
  85. <d d1="101281402" d2="罗定" d3="luoding" d4="广东"/>
  86. <d d1="101281403" d2="新兴" d3="xinxing" d4="广东"/>
  87. <d d1="101281404" d2="郁南" d3="yunan" d4="广东"/>
  88. <d d1="101281406" d2="云安" d3="yunan" d4="广东"/>
  89. <d d1="101281501" d2="潮州" d3="chaozhou" d4="广东"/>
  90. <d d1="101281502" d2="饶平" d3="raoping" d4="广东"/>
  91. <d d1="101281503" d2="潮安" d3="chaoan" d4="广东"/>
  92. <d d1="101281601" d2="东莞" d3="dongguan" d4="广东"/>
  93. <d d1="101281701" d2="中山" d3="zhongshan" d4="广东"/>
  94. <d d1="101281801" d2="阳江" d3="yangjiang" d4="广东"/>
  95. <d d1="101281802" d2="阳春" d3="yangchun" d4="广东"/>
  96. <d d1="101281803" d2="阳东" d3="yangdong" d4="广东"/>
  97. <d d1="101281804" d2="阳西" d3="yangxi" d4="广东"/>
  98. <d d1="101281901" d2="揭阳" d3="jieyang" d4="广东"/>
  99. <d d1="101281902" d2="揭西" d3="jiexi" d4="广东"/>
  100. <d d1="101281903" d2="普宁" d3="puning" d4="广东"/>
  101. <d d1="101281904" d2="惠来" d3="huilai" d4="广东"/>
  102. <d d1="101281905" d2="揭东" d3="jiedong" d4="广东"/>
  103. <d d1="101282001" d2="茂名" d3="maoming" d4="广东"/>
  104. <d d1="101282002" d2="高州" d3="gaozhou" d4="广东"/>
  105. <d d1="101282003" d2="化州" d3="huazhou" d4="广东"/>
  106. <d d1="101282004" d2="电白" d3="dianbai" d4="广东"/>
  107. <d d1="101282005" d2="信宜" d3="xinyi" d4="广东"/>
  108. <d d1="101282006" d2="茂港" d3="maogang" d4="广东"/>
  109. <d d1="101282101" d2="汕尾" d3="shanwei" d4="广东"/>
  110. <d d1="101282102" d2="海丰" d3="haifeng" d4="广东"/>
  111. <d d1="101282103" d2="陆丰" d3="lufeng" d4="广东"/>
  112. <d d1="101282104" d2="陆河" d3="luhe" d4="广东"/>
  113. </c>

编写对应的java bean

  1. @Data
  2. @XmlRootElement(name="d")
  3. @XmlAccessorType(XmlAccessType.FIELD)
  4. public class City {
  5. @XmlAttribute(name="d1")
  6. private String cityId;
  7. @XmlAttribute(name="d2")
  8. private String cityName;
  9. @XmlAttribute(name="d3")
  10. private String cityCode;
  11. @XmlAttribute(name="d4")
  12. private String province;
  13. }
  1. @Data
  2. @XmlRootElement(name="c")
  3. @XmlAccessorType(XmlAccessType.FIELD)
  4. public class CityList {
  5. @XmlElement(name="d")
  6. private List<City> cityList;
  7. }

将xml文件解析到对象中:

  1. @Service
  2. @Slf4j
  3. public class CityDataServiceImpl implements CityDataService{
  4. @Override
  5. public List<City> getCityList(){
  6. //读取xml文件   ClasspathResource  Spring提供的 直接指定文件的名称即可
  7. Resource resource = new ClassPathResource("citylist.xml");
  8. BufferedReader br = null;
  9. StringBuffer sb = null;
  10. CityList cityList = null;
  11. try{
  12. br = new BufferedReader(new InputStreamReader(resource.getInputStream(),"utf-8"));
  13. sb = new StringBuffer();
  14. String line = "";
  15. while((line = br.readLine()) != null){
  16. sb.append(line);
  17. }
  18. br.close();
  19. //将数据转为java 对象
  20. cityList = (CityList) XmlBuilder.xmlStrToObject(CityList.class,sb.toString());
  21. }catch (Exception e){
  22. e.printStackTrace();
  23. log.error("getCityList e={}",e);
  24. }
  25. return cityList.getCityList();
  26. }
  27. }
  1. public class XmlBuilder {
  2. /**
  3. * 将xmlStr 解析为 java bean
  4. * @param clazz
  5. * @param xmlStr
  6. * @return
  7. */
  8. public static Object xmlStrToObject(Class<?> clazz,String xmlStr) throws Exception{
  9. Object xmlObject = null;
  10. JAXBContext context = JAXBContext.newInstance(clazz);
  11. //实例一个xml--->对象的接口
  12. Unmarshaller unmarshaller = context.createUnmarshaller();
  13. Reader reader = null;
  14. reader = new StringReader(xmlStr);
  15. xmlObject = unmarshaller.unmarshal(reader);
  16. if(reader != null){
  17. reader.close();
  18. }
  19. return xmlObject;
  20. }
  21. }

第二步:根据id访问第三方平台  将返回的数据写入到redis缓存

  1. /**
  2. * 根据CityId 同步数据
  3. * @param cityId
  4. */
  5. @Override
  6. public void syncDataByCityId(String cityId) {
  7. String url = WEATHER_URL + "citykey=" + cityId;
  8. this.saveWeatherData(url);
  9. }
  10. /**
  11. * 同步天气数据  将url作为key存入到redis缓存中
  12. * @param url
  13. */
  14. private void saveWeatherData(String url){
  15. String responseBody = null;
  16. ValueOperations<String,String> ops = stringRedisTemplate.opsForValue();
  17. //获取到url返回的内容  String类型
  18. ResponseEntity<String> responseEntity = restTemplate.getForEntity(url, String.class);
  19. int statusCode = responseEntity.getStatusCodeValue();
  20. if(statusCode == 200){
  21. responseBody = responseEntity.getBody();
  22. }
  23. //写入缓存  30分钟过期
  24. logger.info("redis 添加缓存 ,key={}",url);
  25. ops.set(url,responseBody,TIME_OUT, TimeUnit.SECONDS);
  26. }

④  完善定时任务类

    1. public class WeatherDataSyncJob extends QuartzJobBean {
    2. private static final Logger logger = LoggerFactory.getLogger(WeatherDataSyncJob.class);
    3. @Autowired
    4. private CityDataService cityDataService;
    5. @Autowired
    6. private WeatherDataService weatherDataService;
    7. @Override
    8. protected void executeInternal(JobExecutionContext context) throws JobExecutionException {
    9. logger.info("WeatherDataSyncJob start  ...");
    10. //获取到城市id列表
    11. List<City> cityList = cityDataService.getCityList();
    12. //遍历城市id 存入数据
    13. for(City city : cityList){
    14. weatherDataService.syncDataByCityId(city.getCityId());
    15. logger.info("当前缓存城市id = {},城市名字={}",city.getCityId(),city.getCityName());
    16. }
    17. logger.info("WeatherDataSyncJob end ....");
    18. }
    19. }
05-06 05:22