详解java爬虫jsoup解析多空格class数据
作者：243644739 发布时间：2021-12-30 14:47:41
在使用jsoup爬取其他网站数据的时候，发现class是带空格的多选择，如果直接使用doc.getElementsByClass(“class的值”),这种方法获取不到想要的数据。
1、问题描述：
在使用jsoup爬取其他网站数据的时候，发现class是带空格的多选择，如果直接使用doc.getElementsByClass(“class的值”),这种方法获取不到想要的数据。
爬取网站页面结构如下：
2、其中文章列表的div为：<div class="am-cf inner_li inner_li_abtest"></div>
我们可以看到其class的值为：am-cf inner_li inner_li_abtest。带空格的。多值的。
如果我们还是用getElementsByClass这个方法获取的话，是获取不到的。eclipse中断点如下：
3、可以看到获取的值的长度size=0。没有获取到数据。
经过各方搜索，发现解决方案：使用的不是getElementsByClass方法，可以使用其他方法。
先上成功后截图：
4、我们可以看到数据的长度size=20了。说明获取到数据了。
下面讲解select方法使用：
Elements org.jsoup.nodes.Element.select(String cssQuery)
5、样式选择器。
查看源码：
6、我们知道这个可以多个。
在看看我们案例中使用的是：div.am-cf.inner_li.inner_li_abtest。为什么要这么写呢？
查看需要爬取文章的页面结构：
总结：以上就是关于java爬虫jsoup解析多空格class数据的详细内容，感谢大家的阅读和对脚本之家的支持。
来源：https://jingyan.baidu.com/article/c85b7a64bfca85003bac95ed.html
0
投稿猜你喜欢
- 1.前言string是属于引用类型的，这个大家都知道吧？但是平常在使用的过程中，发现它还是拥有一些值类型的特征的，这到底是为什么呢？原因就是
- 本文实例讲述了java取两个字符串的最大交集的实现方法，分享给大家供大家参考。具体实现方法如下：package com.itheima.ne
Java synchronized 关键字 可以将一个代码块或一个方法标记为同步代码块。同步代码块是指同一时间只能有一个线程执行的代码，并且- springboot 启动找不到主类利用eclipse的maven插件，清理了了一下springboot的项目，结果再启动就找报找不到主类的
- 一般，我们的web应用都是只有在用户登录之后才允许操作的，也就是说我们不允许非登录认证的用户直接访问某些页面或功能菜单项。我还记得很久以前我
- 一、微服务结构微服务这种方案需要技术框架来落地，全球的互联网公司都在积极尝试自己的微服务落地技术。在国内最知名的就是SpringCloud和
- 在使用feign调用其它服务时，发现获取的参数是null,当参数是对象是，是执行的Post请求，所以要在方法参数前加@RequestBody
- 1.概述本文中，我将向你介绍Spring Cloud Netflix Turbine。它将多个Hystrix Metrics Streams
- //字符串的内存驻留机制 public static v
- 前两年写的东西，现在整理一下发出来！以前公司需要做WebService，并且对WebService的SoapHeader进行加密，所以就写了
- 前言日常开发中，特别是音视频开发，需要在界面上渲染视频，比如制作一个播放器、或者视频编辑工具、以及视频会议客户端。通常拿到的是像素格式数据，
- MyBatis框架提供了二级缓存接口，我们只需要实现它再开启配置就可以使用了。特别注意，我们要解决缓存穿透、缓存穿透和缓存雪崩的问题，同时也
- RunnableRunnable接口非常简单,就定义了一个方法run(), 实现Runnable接口的run方法就可以实现多线程// 函数式
- 一、整体设计1、需求分析池化技术是计算机中的一种设计模式，内存池是常见的池化技术之一，它能够有效的提高内存的申请和释放效率以及内存碎片等问题
- 1、不必要的自动装箱。自动装箱是将基础数据类型转换为相应的复杂类型，在HashMap的追加删除调查中充满了自动装箱问题，因此尽量避免Hash
- Mybatis typeAlias配置1.定义别名<typeAliases> <ty
- 系列文章已完成，目录如下：commons-logging与jdk-logging、log4j1、log4j2、logback的集成原理slf
- 实现比较两个List之间的差异，包括获取两List的差集，交集，并集(不去重&去重)的API解法和优化解法的解决方案。求差集/**
- Comparable 比较器，内置定义的比较方法，实现比较 较简单Comparator 策略模式，需要定义不同的策略和比较的对象，实现比较
- Zuul 简介Zuul 的主要功能是路由转发和过滤器。路由功能是微服务的一部分，比如 /api/admin 转发到到 Admin 服务，/a
