Web Scraping with Python

• Programming 經驗，最好是在 Python 方面。如果參與者具備 Python 以外的程式語言經驗，培訓可以擴展以包含更多 Python 的入門練習。

觀眾

• 開發人員

Web Scraping是一種從網站提取數據然後將其保存到本地文件或數據庫的技術。

這種由講師指導的現場培訓（現場或遠程）面向希望使用Python自動化爬行許多網站以提取數據以進行處理和分析的開發人員。

在培訓結束時，參與者將能夠：

• 安裝和配置Python及所有相關套件。
• 檢索和解析存儲在多個網站中的數據。
• 了解網站的運作方式及其HTML的結構。
• 構建爬蟲以大規模爬取網頁。
• 使用Selenium爬取AJAX驅動的網頁。

課程格式

• 互動式講座和討論。
• 大量練習和實作。
• 在實時實驗環境中進行動手實作。

課程自定義選項

• 本課程假設學員具備編程知識。
• 如需為本課程定制培訓，請聯繫我們進行安排。

介紹

設置開發環境

Python 入門：數據結構、條件、文件處理等。

Python 網頁抓取套件：Scrapy 和 BeautifulSoup

網站如何運作

HTML 是如何構建的

發出 Web 請求

抓取 HTML 頁

使用 XPath 和 CSS

使用常規 Express離子過濾數據

創建網路爬蟲

使用 Selenium 抓取 AJAX 和 JavaScript 頁面。

網頁抓取最佳實踐

故障排除

總結和結論