104學習精靈

網頁爬蟲

網頁爬蟲
關注
邀請朋友
邀請朋友

Line

Facebook

複製連結

取消
關於教室
關注人數 2 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
關於教室
關注人數 2 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
Hi~ 歡迎分享學習資源,有學習問題可匿名向Giver發問!
我要分享
我要提問

網頁爬蟲 學習推薦

全部
影片
文章
一零四獨家新知識

nabi總知識長

2023/09/08

1分鐘讓你了解Python自學的三大要點(附範例)
在近年的數據中,尤其隨著人工智慧和大數據領域的迅速發展我們可以看到一個鮮明的趨勢:全球超過40%的新進軟體工程師都選擇以Python作為他們的首選語言,95%的數據科學家選擇Python作為他們的主要工具,不僅如此,根據最新的學術研究,學習Python的過程也有助於增強邏輯思維和問題解決能力。這種趨勢和研究結果再次凸顯了「Python自學」的重要性。在這個科技驅動的世界中,「Python自學」不僅是一個選擇,更是一個為未來做準備的必要途徑。如果你希望在這個資訊化時代保持競爭力,那麼「Python自學」絕對值得你投入時間和心力。
【一、為何選擇Python】
選擇學習一門新的程式語言時,首先需要明白為何選擇它。Python是一種高階、解釋型的程式語言,於1991年由Guido van Rossum創建。其主要特點包括:
📌易讀性: Python具有明確的結構和語法,它鼓勵使用空白和縮排來組織代碼,這使得代碼更易於閱讀和維護。
📌標準庫: Python擁有一個豐富的標準庫,提供了眾多實用的模組和函數,能夠支援從文件操作、網路通訊到圖形介面的開發等各種功能。
📌多用途: Python是多用途的語言,被廣泛用於網頁開發、數據分析、人工智慧、機器學習、自動化、遊戲開發等眾多領域。
Python已經成為世界上最受歡迎的程式語言之一,部分原因包括非常適合初學者。此外,Python具有強大的標準庫和第三方庫,適用於網頁開發、數據分析、人工智慧、遊戲開發等多個領域。
【二、Python學習資源】
在自學Python時,有許多免費和付費的學習資源可供選擇。一些熱門的免費學習平台如 Codecademy, Coursera, 和 edX 通常都有提供Python入門課程。而書籍方面,《Python Crash Course》和《Automate the Boring Stuff with Python》是初學者的最佳選擇。另外,Python的官方文件也是一個深入學習的好地方。
而中文的部份,學習Python的中文資源非常多,以下是一些推薦的中文學習資源:
書籍:
📘《簡明Python教程》: 為初學者提供了一個清晰、簡單的Python入門指南。
📘《Python核心編程》: 涵蓋Python的基礎知識到高階技巧,適合有一定程式基礎的讀者深入學習。
📘《Python網頁爬蟲實戰》: 專注於如何使用Python進行網頁資料的抓取。
網路課程:
💻菜鳥教程 (Runoob): 提供了一個完整的Python教學,從基礎語法到進階功能,適合初學者。
💻魚C工作室: 透過視頻形式教授Python,內容生動且深入淺出。
線上平台:
🌐LeetCode: 雖然是一個算法和數據結構的練習平台,但它有許多中文社群和解題教學,可以學習如何用Python解決具體問題。
🌐CSDN: 中國最大的IT社群網站之一,有大量的Python教學和技術博客。
當然,這只是冰山一角,還有許多優質的中文Python學習資源分散在網路上。建議根據自己的學習風格和需求,選擇最適合的資源進行學習。
【三、實際操作】
只閱讀教程或看課程並不足夠。學習程式的最佳方式是通過實際操作。建議您在學習過程中持續撰寫代碼,解決實際問題。可以從小項目開始,如計算機、待辦事項清單或小遊戲,然後再逐步擴大至更複雜的專案。
讓我們從最基礎的一個範例開始:製作一個程式,該程式能夠詢問使用者的名字和年齡,然後計算出使用者在某年的年齡。
def main():
# 取得使用者的名字和當前年齡
name = input("請輸入您的名字: ")
age = int(input("請輸入您的年齡: "))
# 計算使用者在100年後的年齡
age_in_100_years = age + 100
# 輸出結果
print(f"您好, {name}!100年後,您將會是{age_in_100_years}歲。")
if __name__ == "__main__":
main()
這個程式首先定義了一個main函數,該函數會詢問使用者的名字和年齡,然後計算出使用者在100年後的年齡並輸出結果。if __name__ == "__main__":是Python的一個常見模式,確保當這個腳本被執行時,main函數會被呼叫。
當您執行這個程式,您可以輸入您的名字和年齡,然後程式會告訴您在100年後的年齡。
透過這樣的簡單範例,您可以學習到Python的基礎語法,如何定義函數、如何獲取和處理使用者輸入,以及如何輸出結果。隨著時間和練習的增加,您可以開始嘗試更複雜的項目和功能。
1 1 2134 1

熱門精選

104學習精靈

產品

05/10 12:22

【首購好禮】單筆滿千送100元Line Points點數
活動名稱:【首購好禮】單筆滿$1,000以上送100元Line Points點數回饋
活動期間:2024/5/13 11:00- 2024/5/23 23:59
活動說明:活動期間於104課程中心付費購買「104課程中心x緯育TibaMe」指定課程,首次購買單筆滿$1,000以上 ( 若有使用相關優惠折扣碼優惠,其結帳金額須扣除優惠後需滿$1,000以上;且不累送) 即可獲贈100元Line Points點數回饋。(限量100名)
【EXCEL救星】
🟠 ChatGPT x Excel | 職場必學商務數據分析術
🟠【函數入門】別再土法煉鋼!你一定要懂的Excel函數
🟠【資料整理術】Excel資料整理分析入門
🟠 無痛起步-Excel VBA超入門實戰
🟠 【進階函數】Excel高效秘訣!上班族不可不知的進階函數
⚡本次活動⚡更多課程清單看這裡 ▶️ https://bit.ly/3UJvoW4
【AI、ChatGpt 應用】
🔵AI簡報3項思考力,ChatGPT倍速提升商業競爭力!
🔵成為 AI 科學家|打造數學基礎與統計地基,輕鬆開拓機器學習應用之城
🔵告別新手村FB與IG廣告投放攻略|AI助你輕鬆提高廣告效率
🔵開發者必學:OpenAI API應用與開發
⚡本次活動⚡更多課程清單看這裡 ▶️ https://bit.ly/3UJvoW4
【工程師與PM增能課程】
基礎扎根、應用職場技能....等學習。
🔷C# 從零開始前進.NET物件導向程式全攻略
🔷C# .Net Framework系統基礎實作攻略
🔷成為前端工程師|JavaScript 入門:帶你逐步培養網頁開發技能
🔷透過 HTML 與 CSS 認識網頁設計,從 0 到 1 打造實用介面 (上集)
🔷學程式也能很好玩:不背語法寫Java
⚡本次活動⚡更多課程清單看這裡 ▶️ https://bit.ly/3UJvoW4
【python增能】
🟡Python 基礎程式設計|開外掛勇闖 Python 異世界
🟡Python新學法 - 實作6個Terminal APP快速入門
🟡Python進階實作-用Flask開發Line影像辨識智能機器人
🟡Python 網路爬蟲 | 數據分析的第一步就是要學會爬
⚡本次活動⚡更多課程清單看這裡 ▶️ https://bit.ly/3UJvoW4
【外語加強:聽說讀寫樣樣來】
針對額外時間加強外語能力,或是準備多益考試的學習推薦!
🔻超實用英語會話必備 700 句
🔻NEW TOEIC 新多益線上高分速成班
活動注意事項:
1. 獲贈資格須符合下列說明:
(a)首購意指於2024/5/13 11:00 前未曾在104課程中心購買付費課程。
(b)指定課程為緯育TibaMe上架於104課程中心之線上課程,購買者必須於104課程中心系統完成付費紀錄。( 特別提醒: 購買者於TibaMe 官網線上消費不包含在此次活動 資格;可參考200+課程清單: https://bit.ly/3UNkkY6。 )
(c)訂單成立且完成付款時間皆須於2024年5月23日23:59前,且於7天內完成課程兌換,亦符合獲贈點數回饋的資格;最後獲贈者將於公告於本活動網站,中間姓名會隱藏。
(d)限量100名,採上述依照訂單完成付款後且完成兌換的前100名,符合上述資格的前100名會員,每人即有乙次資格,您的回饋點數將於2024/6/3-2024/6/11期間,寄送至您填寫的e-mail電子郵件信箱。
2.本次贈送的100元Line Points點數,點數發送出後須於2026/4/18前兌換,另點數兌換後於180天內須使用完畢,逾期失效。
3.如您有任何問題,歡迎來信nabiservice@104.com.tw
4.104課程中心保有最終修改、變更、活動解釋及取消本活動之權利。
2 0 8546 0
104學習精靈精選課程
看更多課程
想提升職場競爭力?專業技能課程看起來👇
Mike Ku

Learn Code With Mike品牌創辦人

2022/01/19

一定要懂的Scrapy框架結合Gmail寄送爬取資料附件秘訣
本文將爬取的結果存入CSV檔案後,透過Gmail附件郵寄給使用者。在開始之前,大家可以先參考[Python實戰應用]Python寄送Gmail電子郵件實作教學文章( https://www.learncodewithmike.com/2020/02/python-email.html )的第二節步驟,取得Gmail的應用程式密碼,以便能夠利用它的SMTP(簡易郵件傳輸協定)來發送郵件。
Q: Scrapy MailSender結合Gmail發送郵件
在Scrapy網頁爬蟲框架中,想要實作發送電子郵件的功能,可以使用內建的MailSender模組(Module),透過基本的設定即可達成。開啟Scrapy專案的settings.py設定檔,加入以下的Gmail SMTP設定:
MAIL_HOST = "smtp.gmail.com"
MAIL_PORT = 587
MAIL_FROM = "申請Gmail應用程式密碼所使用的電子郵件帳號"
MAIL_PASS = "Gmail應用程式密碼"
MAIL_TLS = True
並且,將[Scrapy教學7]教你Scrapy框架匯出CSV檔案方法提升資料處理效率文章( https://www.learncodewithmike.com/2021/01/scrapy-export-csv-files.html )中所建立的CsvPipeline資料模型管道設定開啟,如下範例:
ITEM_PIPELINES = {
'news_scraper.pipelines.CsvPipeline': 500,
}
設定完成後,開啟ITEM PIPELINE資料模型管道(pipelines.py)檔案,引用Scrapy框架的設定檔及MailSender模組(Module),如下範例:
from itemadapter import ItemAdapter
from news_scraper import settings
from scrapy.mail import MailSender
接著,在CsvPipeline類別(Class)的close_spider()方法(Method)中,來建立Scrapy MailSender物件,以及指定Gmail的附件,包含「附件顯示的名稱(attach_name)」、「網際網路媒體類型(mime_type)」及「檔案物件(file_object)」,如下範例:
class CsvPipeline:
...
def close_spider(self, spider):
self.exporter.finish_exporting()
self.file.close()
mail = MailSender(smtphost=settings.MAIL_HOST,
smtpport=settings.MAIL_PORT,
smtpuser=settings.MAIL_FROM,
smtppass=settings.MAIL_PASS,
smtptls=settings.MAIL_TLS)
attach_name = "posts.csv"
mime_type = "application/vnd.openxmlformats-officedocument.spreadsheetml.sheet"
file_object = open("posts.csv", "rb")
return mail.send(to=["example@gmail.com"],
subject="news",
body="",
attachs=[(attach_name, mime_type, file_object)])
如果想要學習更多的Python應用教學,歡迎前往Learn Code With Mike(https://www.learncodewithmike.com/2021/02/scrapy-sending-gmail.html
)網站觀看更多精彩內容。
2 0 276 0

推薦給你

知識貓星球

喵星人

2小時前

如何利用Excel計算出包含文字的總筆數?
在 Excel 中,您可以使用 COUNTIF 和 COUNTIFS 函數來計算包含特定文字或符合多個條件的儲存格數目。這些函數在數據分析和報告中非常有用,特別是在處理大量數據時。以下是這兩個函數的介紹及其使用步驟:
1. 首先輸入COUNTIF 函數(範圍:條件),接著點選滑鼠左鍵,選擇想要計算符合條件的儲存格所在的範圍,像是B2:B6
2. 指定文字或數字條件,這時候需使用雙引號將其包圍,如”男”表要找出男性成員,”素” 表要找出素食者,”>=80”表要找出≥80的數
3. 最後函數成果為=COUNTIF(B2:B6:”男”),因此我們能得知男性的數量
4. COUNTIFS 函數用於計算範圍內符合多個條件的儲存格數目。這個函數適合用於需要多條件篩選的情況,例如同時考慮性別和薪水範圍的統計
5. 若想多加上條件可使用COUNTIFS(範圍:條件, 條件, 條件…),像是男性薪水四萬元以上,男性薪水四萬以下,=COUNTIFS(A2:A11, "男", B2:B11, ">=40000"),=COUNTIFS(A2:A11, "男", B2:B11, "<40000")
想了解更多關於excel實用的小技巧,歡迎追蹤超級辦公室達人~
0 0 21 0
你可能感興趣的教室