Java httpClient实现 爬虫 怎么取到浏览器中sessionStorage的值

Question

背景

我用httpClent来实现爬虫，在获取到其中一个页面，要进行下一步操作的时候，发现网址请求是在js文件中发起的，并且这个url是动态的，根据点击的链接的value值传到js中为key，然后用这个key去sessionStorage里面去取一个对应的秘钥值回来组装成url发出get请求。

问题

1. 我有没有办法监控到sessionStorage的赋值操作。（我自己试了下，没成功，不知道是不是方法不对）

2. 我有没有方法通过httpClient获取到sessionStorage里面的值？

取不到这个秘钥就无法得到对应的请求url，下一步就进行不下去了。

请各位大佬相助。

先在此谢过！

Answer 1

没有没有sessionStorage是浏览器本地存储，不在网络上传输。爬虫是HTTP协议。你需要解决的是 sessionStorage里面存的key哪来的？一般是请求后端拿回来的，你把这个链接爬一下