当前位置:   article > 正文

数据爬取遇到EventStream是个什么东西?EventSource与websocket有何区别?Java后台如何获取爬取数据并入库?EventStream后台服务怎么写?

eventstream

好久没更新了,今天办完房子装修手续,有点空咱们更新一下。

今天更新的内容是以前工作中采集数据的时候遇到的,目前我遇到的通过EventSource方式给前端提供数据的方式比较少,只见过这一种但是这种方式感觉还是有很多优势。

我们开始之前先看一下这几个问题。

  1. 数据爬取遇到EventStream是个什么东西?

在一次采集数据的过程中遇到这样一幕,一般我们的请求都是http,请求结束以后就释放连接,耗时也很低,大部分我们很容易发现调用的接口就直接获取数据了,但是我在本次采集中没有找到相关的数据接口,这就有些纳闷了,我就想她是如何提供数据的呢?接着我想他肯定是用了websocket或dwr技术推送给前端数据,我就查看相关页面源码最后也没找到,打开调试以后发现有一个特别耗时的链接,引起了我的注意。我就跟进去了,如下图:

EventSource方式获取数据

正常http请求

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/盐析白兔/article/detail/406332
推荐阅读
相关标签
  

闽ICP备14008679号