python抓取京東小米8手機配置信息
更新時間：2018年11月13日 15:39:34 作者：謝公子
這篇文章主要為大家詳細介紹了python抓取京東手機配置信息，具有一定的參考價值，感興趣的小伙伴們可以參考一下
本文代碼是使用python抓取京東小米8手機的配置信息
首先找到小米8商品的鏈接：https://item.jd.com/7437788.html
然后找到其配置信息的標(biāo)簽，我們找到其配置信息的標(biāo)簽為 <div class="Ptable">
然后再分析其配置信息的頁面的規(guī)律，我們發(fā)現(xiàn)都是dl中包含了dt和dd，而一個dt對應(yīng)的一個dd，dt對應(yīng)的是參數(shù)，dd對應(yīng)的是參數(shù)具體的值
下面是源代碼
import requests
from bs4 import BeautifulSoup
from pandas import Series
from pandas import DataFrame
response=requests.get("https://item.jd.com/7437788.html")
html=response.text
soup=BeautifulSoup(html,"html.parser")
divSoup=soup.find("div",attrs={"class","Ptable"}) ##找到其配置信息的標(biāo)簽
data=DataFrame(columns=["參數(shù)","值"]) #定義一個二元的DataFrame
dls=divSoup.find_all("dl")
for dl in dls:
dts=dl.find_all("dt")
dds=dl.find_all("dd")
if len(dts)==len(dds):
for i in range(len(dts)):
f=dts[i].getText();
p=dds[i].getText();
data=data.append(Series([f,p],index=["參數(shù)","值"]),ignore_index=True);
print(data)
這是最終抓取到的配置信息，一共有64行，這里我就不一一列舉出來了
以上就是本文的全部內(nèi)容，希望對大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
python抓取京東商城手機列表url實例分享，大家參考使用吧2013-12-12
Python機器學(xué)習(xí)NLP自然語言處理基本操作新聞分類
本文是Python機器學(xué)習(xí)NLP自然語言處理系列文章，開始我們自然語言處理 (NLP) 的學(xué)習(xí)旅程. 本文主要學(xué)習(xí)NLP自然語言處理基本操作新聞分類2021-09-09
今天小編就為大家分享一篇Python分割指定頁數(shù)的pdf文件方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-10-10
對python while循環(huán)和雙重循環(huán)的實例詳解
今天小編就為大家分享一篇對python while循環(huán)和雙重循環(huán)的實例詳解，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08
基于python實現(xiàn)微信收紅包自動化測試腳本(測試用例)
這篇文章主要介紹了基于python實現(xiàn)微信收紅包自動化測試腳本，本文通過實例代碼給大家介紹的非常詳細，對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值，需要的朋友參考下吧2021-07-07
這篇文章主要為大家介紹了python裝飾器類方法classmethod的使用場景，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪2023-06-06
這篇文章主要為大家詳細介紹了python實現(xiàn)超市掃碼儀計費，文中示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2018-05-05
Python學(xué)習(xí)之循環(huán)方法詳解
循環(huán)是有著周而復(fù)始的運動或變化的規(guī)律；在 Python 中，循環(huán)的操作也叫做 遍歷。與現(xiàn)實中一樣，Python 中也同樣存在著無限循環(huán)的方法與有限循環(huán)的方法。本文將通過示例詳細講解Python中的循環(huán)方法，需要的可以參考一下2022-03-03
這篇文章主要介紹了shelve 用來持久化任意的Python對象實例代碼的相關(guān)資料,需要的朋友可以參考下2016-10-10
Python實現(xiàn)將MySQL中所有表的數(shù)據(jù)都導(dǎo)出為CSV文件并壓縮
這篇文章主要為大家詳細介紹了如何使用Python將MySQL數(shù)據(jù)庫中所有表的數(shù)據(jù)都導(dǎo)出為CSV文件到一個目錄,并壓縮為zip文件到另一個目錄下,需要的可以了解下2025-03-03