python抓取京东小米8手机配置信息
作者：谢公子 发布时间：2021-10-12 15:55:32
标签：python,抓取,京东
本文代码是使用python抓取京东小米8手机的配置信息
首先找到小米8商品的链接：https://item.jd.com/7437788.html
然后找到其配置信息的标签，我们找到其配置信息的标签为 <div class="Ptable">
然后再分析其配置信息的页面的规律，我们发现都是dl中包含了dt和dd，而一个dt对应的一个dd，dt对应的是参数，dd对应的是参数具体的值
下面是源代码
import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的标签
data=DataFrame(columns=["参数","值"]) #定义一个二元的DataFrame
dls=divSoup.find_all("dl")
for dl in dls:
dts=dl.find_all("dt")
dds=dl.find_all("dd")
if len(dts)==len(dds):
for i in range(len(dts)):
f=dts[i].getText();
p=dds[i].getText();
data=data.append(Series([f,p],index=["参数","值"]),ignore_index=True);
print(data)
这是最终抓取到的配置信息，一共有64行，这里我就不一一列举出来了
来源：https://blog.csdn.net/qq_36119192/article/details/83050274
0
投稿猜你喜欢
在Python中将字符串转换为集合使用 set() 类将字符串转换为集合，例如 my_set = set(my_str)。 set() 类将- 前言在golang当中，defer代码块会在函数调用链表中增加一个函数调用。这个函数调用不是普通的函数调用，而是会在函数正常返回，也就是re
- 本文介绍了Vue.js 常用模板语法，分享给大家，具体如下：一、文本渲染Vue支持动态渲染文本，即在修改属性的同时，实时渲染文本内容。同时为
- 引言对 axios 二次封装,更加的可配置化、扩展性更加强大灵活通过 class 类实现，class 具备更强封装性(封装、继承、多态)，通
- 作者：做梦的人（小姐姐）出处：https://www.cnblogs.com/chongyou/python读取yaml文件使用，有两种方式
- 开发需求python 3.7+pygame 1.9+演示项目地址https://github.com/Mr-han11/PythonSupe
- MySQL 日期时间教程 在本教程中，我将通过示例解释 MySQL DATE 和 TIME 函数。 DA
- 直接上代码定义一个upload_img来返回显示图片的html定义显示图片说明和allow_tagsmark_safe方法于django.u
- 一、题目1.主题：逻辑回归2.描述：假设你是某大学招生主管，你想根据两次考试的结果决定每个申请者的录取机会。现有以往申请者的历史数据，可以此
- 代码如下:ADODB.Connection 错误 '800a0e7a' 未找到提供程序。该程序可能未正确安装。 /连接“网站
- 之所以有这样一篇文章，是因为在前几天的一个晚上，要下班的时候，业务方忽然有一个需求，是需要恢复一个表里面的数据，当时问了下情况
- 题目：一个六位数，分别用2，3，4，5，6乘它，得到的五个新数仍是由原数中的六个数字组成，只是位置不同，则此六位数是多少？function
- 简单使用csv.DictReader()方法示例代码1：import csvf = open('sample','r
- 在cmd输入：python -m django --version来源：https://blog.csdn.net/ShellDawn/ar
- 一、浮点数是什么？浮点数，是属于有理数中某特定子集的数的数字表示，在计算机中用以近似表示任意某个实数。浮点数在计算机中主要用来表示小数，浮点
- 文章中有不正确的或者说辞不清的地方，麻烦大家指出了～～～与PHP字符串转义相关的配置和函数如下： 1.magic_quotes_runtim
- 前言最近公司服务器到期，需要进行数据迁移，而数据库属于多而繁琐，通过图形化界面一个一个备份所需时间成本很大，所以想着写一个sql脚本来执行。
- 本文实例讲述了Python实现压缩文件夹与解压缩zip文件的方法。分享给大家供大家参考，具体如下：直接上代码#coding=utf-8#甄码
- 参考文章ubuntu源码安装python3linux 编译安装python3.6的教程详解准备工作安装工具sudo apt updatesu
- 前言本文主要给大家介绍了解决apahce部署python程序出现503错误的相关内容，下面话不多说了，下一起看看详细的介绍吧。发现问题今天更
