最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Python網(wǎng)絡(luò)爬蟲信息提取mooc代碼實(shí)例

 更新時間:2020年03月06日 09:20:09   作者:159566  
這篇文章主要介紹了python網(wǎng)絡(luò)爬蟲與信息提取mooc,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下

實(shí)例一--爬取頁面

import requests
url="https//itemjd.com/2646846.html"
try:
 r=requests.get(url)
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[:1000])
except:
 print("爬取失敗")

正常頁面爬取

實(shí)例二--爬取頁面

import requests
url="https://www.amazon.cn/gp/product/B01M8L5Z3Y"
try:
 kv={'user-agent':'Mozilla/5.0'}
 r=requests.get(url,headers=kv)
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[1000:2000])
except:
 print("爬取失敗")

對訪問用戶名有限制,模擬瀏覽器對網(wǎng)站請求

實(shí)例三--爬取搜索引擎

#百度的關(guān)鍵詞接口:http://www.baidu.com/s?wd=keyword
#360的關(guān)鍵詞接口:http://www.so.com/s?q=keyword
import requests
keyword="python"
try:
 kv={'wd':keyword}
 r=requests.get("http://www.baidu.com/s",params=kv)
 print(r.request.url)
 r.raise_for_status()
 print(len(r.text))
except:
 print("爬取失敗")
--------------------------------------------------
import requests
keyword="python"
try:
 kv={'q':keyword}
 r=requests.get("http://www.so.com/s",params=kv)
 print(r.request.url)
 r.raise_for_status()
 print(len(r.text))
except:
 print("爬取失敗")

實(shí)例四--:爬取圖片

import requests
import os
url="http://image.nationalgeographic.com.cn/2017/0211/20170211061910157.jpg"
root="F://pics//"
path=root+url.split('/')[-1]
try:
 if not os.path.exists(root):
  os.mkdir(root)
 if not os.path.exists(path):
  r=requests.get(url)
  with open(path,'wb') as f:
   f.write(r.content)
   f.close()
   print("文件保存成功")
 else:
  print("文件已經(jīng)存在")
except:
 print("爬取失敗")

爬取并保存圖片

實(shí)例五--IP地址歸屬地查詢:

http://m.ip138.com/ip.asp?ip=ipaddress

url="http://www.ip138.com/iplookup.asp?ip="
try:
 r=requests.get(url+'202.204.80.112'+'&action=2')
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[-500:])
except:
 print("爬取失敗")

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。

相關(guān)文章

  • Python bsonrpc源碼解讀

    Python bsonrpc源碼解讀

    這篇文章主要介紹了Python bsonrpc源碼的相關(guān)資料,幫助大家更好的理解和學(xué)習(xí)使用python,感興趣的朋友可以了解下
    2021-03-03
  • Python時間模塊datetime、time、calendar的使用方法

    Python時間模塊datetime、time、calendar的使用方法

    這篇文章主要介紹了Python時間模塊的使用方法,主要包括三大模塊datetime、time、calendar,感興趣的小伙伴們可以參考一下
    2016-01-01
  • python中os模塊詳解

    python中os模塊詳解

    os模塊提供了多數(shù)操作系統(tǒng)的功能接口函數(shù).當(dāng)os模塊被導(dǎo)入后,它會自適應(yīng)于不同的操作系統(tǒng)平臺,如posix或NT系統(tǒng)平臺,os模塊會根據(jù)不同的平臺進(jìn)行相應(yīng)的操作.本節(jié)內(nèi)容將對os模塊提供的函數(shù)進(jìn)行詳細(xì)的解讀.
    2016-10-10
  • python3將變量輸入的簡單實(shí)例

    python3將變量輸入的簡單實(shí)例

    在本篇文章里小編給大家整理的是一篇關(guān)于python3將變量輸入的簡單實(shí)例內(nèi)容,有需要的朋友們可以參考下。
    2020-08-08
  • 如何解決mmcv無法安裝或安裝之后報錯問題

    如何解決mmcv無法安裝或安裝之后報錯問題

    這篇文章主要介紹了如何解決mmcv無法安裝或安裝之后報錯問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2025-04-04
  • Django contenttypes 框架詳解(小結(jié))

    Django contenttypes 框架詳解(小結(jié))

    這篇文章主要介紹了Django contenttypes 框架詳解(小結(jié)),小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2018-08-08
  • python獲取文件路徑、文件名、后綴名的實(shí)例

    python獲取文件路徑、文件名、后綴名的實(shí)例

    下面小編就為大家分享一篇python獲取文件路徑、文件名、后綴名的實(shí)例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2018-04-04
  • Python實(shí)現(xiàn)的簡單線性回歸算法實(shí)例分析

    Python實(shí)現(xiàn)的簡單線性回歸算法實(shí)例分析

    這篇文章主要介紹了Python實(shí)現(xiàn)的簡單線性回歸算法,結(jié)合實(shí)例形式分析了線性回歸算法相關(guān)原理、功能、用法與操作注意事項(xiàng),需要的朋友可以參考下
    2018-12-12
  • Windows下PyCharm配置Anaconda環(huán)境(超詳細(xì)教程)

    Windows下PyCharm配置Anaconda環(huán)境(超詳細(xì)教程)

    這篇文章主要介紹了Windows下PyCharm配置Anaconda環(huán)境,本文給大家分享一篇超詳細(xì)教程,通過圖文并茂的形式給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2020-07-07
  • Python any()函數(shù)的使用方法

    Python any()函數(shù)的使用方法

    這篇文章主要介紹了Python any()函數(shù)的使用方法,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-10-10

最新評論

乐亭县| 呼和浩特市| 怀远县| 固原市| 吴堡县| 从江县| 沂源县| 黑山县| 沂源县| 江门市| 金塔县| 章丘市| 江北区| 林芝县| 中西区| 宁安市| 岳池县| 新龙县| 大宁县| 安徽省| 卫辉市| 石阡县| 留坝县| 潮州市| 元谋县| 岳阳市| 保德县| 深水埗区| 吉隆县| 加查县| 长宁县| 德兴市| 海安县| 印江| 日喀则市| 鄯善县| 平乐县| 淮南市| 云龙县| 凤阳县| 榆林市|