(java)jsoup爬取动态网页的另辟方法

    技术2022-07-13  69

    jsoup爬取

    jsoup只适用于爬取静态网页,爬取动态网页时往往获取不到数据,此时不想使用其他框架可参照以下自创方法获取: 1.打开先要爬取的页面按f12用定位光标将elements内容全部展开,复制elements中的全部内容 2.打开eclipse创建一个动态web项目并创建一个html文件 3.将复制的elements中的内容粘贴在html中并运行 4.jsoup爬取本地运行tomcat网址就可以按照正常网页爬取步骤进行爬取

    注:此方法只适用于暂时不太熟悉爬虫框架并且少量爬取工程,如有精力还是要好好深入学习爬虫,如有用处请给博主点个赞

    Processed: 0.009, SQL: 9