成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

字體反爬蟲的原理和破解方法

安全 應用安全
通過對源網頁中的占位數據和字體進行比對,我們發現將源數據中的&#x替換成$,然后將字符串首字母大寫,就變成了字體對應的字符串了。

[[429151]]

大家好,我是志斌~

之前給大家介紹了一種SVG映射反爬蟲,今天在給大家介紹另外一種通過映射關系來進行反爬蟲的方式。

不知道大家有沒有遇到過這種情況,在寫爬蟲程序之前我們需要對目標數據進行觀察,但是在我們觀察時發現目標數據在網頁中是以這種奇怪的方式出現的。

這種反爬蟲就是字體反爬蟲,今天志斌就來跟大家分享一下如何繞過這類反爬蟲。

一、原理

在之前,網站開發者在設計網頁時只能使用公用的字體來展示網頁中的數據。

但是,隨著CSS樣式的深入開發,網站開發者可以將自己的字體放到服務器中。當用戶在訪問Web界面時,對應的字體就會被瀏覽器自動下載到用戶的計算機中,然后通過CSS樣式進行調用。

之后,通過一種映射關系,使得網頁中的源數據變為真正的數據進行展示。

通過這種方式,使得這樣就使得網站開發者進行網頁設計時,只需要使用特殊字符進行占位即可,不需要將真正的數據放到頁面中去。這樣,爬蟲程序如果不知道這種映射關系的話,就無法從字體中獲取正確的數據,從而實現反爬蟲。

二、破解

破解這類字體反爬蟲有以下幾步。

1.下載字體woff文件

從上面我們知道,字體是在服務器上進行存儲,并通過瀏覽器下載到我們的電腦上的,那么我們就可以在網站上找到加載的字體文件,下載下來。

下載下來之后,打開它進行觀察,這里給大家分享一個再點字體編譯器網站,使用它可以很方便打開woff文件。網址:http://font.qqe2.com/index-en.html。

打開字體文件之后,我們發現,每個數字都對應一個字符串,如7對應的是$E9C7。

2.尋找映射關系

通過對源網頁中的占位數據和字體進行比對,我們發現將源數據中的&#x替換成$,然后將字符串首字母大寫,就變成了字體對應的字符串了。

3.構建映射算法

在上面我們已經找到了字體之間映射關系,那么我們現在就可以開始用Python來構建映射算法,從而使得爬蟲可以獲取一個正確的數據。

構建代碼如下:

  1. data = { 
  2.    '&#xe9c7' : 7, 
  3.    '&#xf57b' : 1, 
  4.    '&#xe7df' : 2, 
  5.    '&#xe339' : 6, 
  6.    '&#xe624' : 9, 
  7.    '&#xea16' : 5, 
  8.    '&#xf19a' : 3, 
  9.    '&#xee76' : 0, 
  10.    '&#xf593' : 4, 
  11.    '&#xefd4' : 8, 

之后,我們即可對網頁進行爬取,然后將對應的源數據與data進行比如,從而獲得正確數據。

三、小結

1. 本文詳細介紹了如何破解字體反爬蟲,由于這種反爬蟲是使用CSS進行加載和映射的,所以即使使用一些自動化軟件或者渲染工具也無法獲得真正的數據。

2. 這類反爬蟲的破解只需要將woff文件中的字體與頁面數據之間的對應關系找到,構建好即可。

3. 找到woff文件進行下載是關鍵。

4. 有興趣的讀者可以找志斌要一下網站自己嘗試一下。 

5. 本文僅供學習參考,不做它用。

 

責任編輯:武曉燕 來源: 志斌的python筆記
相關推薦

2021-06-28 18:57:15

CSS網頁爬蟲

2021-06-09 18:22:11

反爬蟲破解

2021-06-06 19:53:05

爬蟲處理字體反爬

2022-11-24 10:24:32

2016-10-13 15:51:50

2022-09-14 23:06:45

2020-10-20 10:47:51

破解MassLogge

2009-04-27 21:28:56

2022-09-20 07:02:20

網絡爬蟲反爬蟲

2022-07-03 10:43:23

JS逆向破解

2018-01-29 09:28:44

2024-06-07 08:56:43

HTTPPythonSelenium

2021-06-10 18:24:59

反爬蟲驗證碼爬蟲

2017-05-15 10:39:48

爬蟲應對機制

2017-04-27 20:45:48

爬蟲反爬蟲

2010-04-27 10:08:49

2016-10-14 16:35:39

2009-12-10 10:49:21

PHP eval加密

2018-08-09 11:35:40

Python網絡爬蟲語言編程

2020-09-29 10:10:42

破解iPhone 5和
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 久草在线| 91精品国产乱码久久久久久久久 | 久久精品视频一区二区三区 | 国产精品国产三级国产aⅴ原创 | 国产高清无av久久 | 成人免费网站 | 国产精品久久久久久久久久久久 | 国产激情在线看 | 婷婷桃色网 | 99精品国产一区二区三区 | 亚洲天堂中文字幕 | 久久精品一区二区三区四区 | www.狠狠干 | 欧美日本高清 | 欧美精品一区久久 | 亚洲精品久久久久久首妖 | 一区二区三区亚洲精品国 | 日韩欧美三级电影在线观看 | 国产精品一区二区不卡 | 亚洲欧美日韩电影 | 午夜影院在线观看版 | 国产精品亚洲欧美日韩一区在线 | 日韩欧美国产精品一区二区 | 男人天堂999 | 中国人pornoxxx麻豆 | 逼逼网| 中文字幕在线精品 | 国产精品揄拍一区二区 | 一区二区精品 | 国产精华一区 | 精品国模一区二区三区欧美 | 精品日韩 | 国产精品夜夜春夜夜爽久久电影 | 欧美国产激情 | 91精品国产一区二区三区 | 中文字幕久久精品 | 久久精品国产99国产精品亚洲 | 欧美一级电影免费 | 亚洲日本视频 | 91精品久久久久久久久久入口 | 日本天堂一区二区 |