EXCEL VBA大數據分析視覺化程式設計
完整文字與影音連結:https://terry55wu.blogspot.com/2021/01/excel-vba.html
本學期應邀回母校台師大開課課程主要是:
用EXCEL VBA做大數據分析視覺化程式設計
另一個母校,東吳大學也邀請我開課,但限於自己的時間無法排出適合的時間,
於是系主任便推薦我開設遠距課程於是,
便有了可以在台師大上課,並將上課錄影除了提供上課學生複習,
也可以將後製後的影片,提供東吳的遠距課程的想法,
這樣我只要認真地把一次課程作法,就可以讓兩邊的學生都學習的好辦法。
於是開學後,台師大受限電腦教室,選修人數只有50人,加上加選5人,
有55位學生,幾乎是秒殺,至於東吳遠距課程,沒有這樣的限制,
所以選課人數近百人,有95位選修。
一、課程大綱:
期中前,主要從EXCEL高階函數、巨集錄製到VBA程式設計,
資料來源為政府開放資料,配合樞紐分析表。
期中後,網路爬蟲+樞紐分析到視覺化圖報表,用EXCEL內建功能與錄製巨集寫爬蟲,
無法抓取資料則用IE物件,將IE瀏覽器嵌入EXCEL VBA程式中,只要能連結的網頁,單可以下載裡面的資料。
課程進行中提供雲端講義,裡面有說明、畫面與老師自己寫的程式碼,並隨課全程錄影,
後製後上傳YOUTUBE,建立播放清單,直接件給學生複習與學習。
建立一個GOOGLE論壇,只有學生可以加入,
課後會將上課的YOUTUBE影片建立播放清單,並貼到論壇,
好處就是會自動轉信給學生,這樣我就不用一個一個的郵寄了,
用了超過十年覺得沒什麼問題,只是雖是論壇,
但討論的介面做的很不好,最好用的還是分享上課影片清單。
二、修課人數/學院分布
三、期中專題作業
四、期末專題作業
五、本學期授課心得:
1.兩學分真的有點趕,因此輔以影音錄製與雲端講義,對認真學習學生幫助很大。
2.期中專題有範圍,但許多學生都能加入自己的需求和想法,加上EXCEL容易上手,雖說需要撰寫VBA程式,但因為懂得錄製巨集與修改的方式,都能完成理想專題。
3.期末專題為難度很高的網路爬蟲+製作圖表,但結果超過預期的好,可見學生接受度很好,以學生回饋意見可知,上課錄影可重複學習備查,與雲端講義助益很大。
4.遠距學習(東吳)結果因為有影音與雲端輔助,成果不遜於實體上課。
非資訊背景教程式設計
非資訊卻講程式設計二十一年(89年巨匠教VB)
比較沒包袱,能從非資訊角度看學習與應用
重視實作,很多人看的懂書上寫的但寫不出程式
程式寫作要會寫,還要熟練,更需要完全正確(99分程式還是無法執行)
教學的核心都在如何幫助學生學會寫程式。
從EXCEL函數開始,再學習錄製巨集,再慢慢進入VBA程式設計的世界
如何幫學生寫出又快會好又正確程式
1.所有程式都是自己預先多次撰寫,用自己的寫作風格撰寫,不要求學生有標準答案,可以用自己的方式與邏輯寫程式。
2.提供雲端即時講義,取名雲端白板,有解答程式畫面結果與文字敘述。
3.隨課錄影,並課後上傳YOUTUBE播放清單用用GOOGLE論壇分享。
4.期中報告以開放資料為資料來源,用EXCEL樞紐分析圖表、函數、巨集與VBA完成專題。
5.期末報告以網路爬蟲取得資料(GET與POST),用EXCEL製作圖表與VBA完成專題。
Pyhton V.S. VBA
自己也教Pyhton發現還是比VBA來的困難
1.安裝環境
2.有EXCEL可以存資料,甚至當資料庫
3.有錄製巨集可以產生不會寫的程式
4.樞紐分析 vs Pandas
5.圖表 vs Matplotlib
入門的學生與非資訊相關科系,建議可以先從學習VBA設計下手
第14次上課教學影片分享:
(期末專題作業說明&全省氣溫改為跨工作表與物件的使用&跨工作表說明與用IE物件)
教學論壇:
https://groups.google.com/forum/#!forum/excel2vba2020
吳老師 2021/1/20 分享
同時也有17部Youtube影片,追蹤數超過4萬的網紅吳老師教學部落格,也在其Youtube影片中提到,[進階]網頁資料擷取、分析與資料視覺化能力8(用selenium下載網頁&安裝外掛Katalon_Recorder與輸出程式&下載觀測站資料&Matplotlib繪製圖表&解決Matplotlib中文亂碼&TQCPLUS試題第4類重點與ending) 01_重點回顧與用selenium下載網頁 0...
「matplotlib下載」的推薦目錄:
- 關於matplotlib下載 在 吳老師excel函數與vba大數據教學 Facebook 的最佳貼文
- 關於matplotlib下載 在 吳老師excel函數與vba大數據教學 Facebook 的精選貼文
- 關於matplotlib下載 在 吳老師教學部落格 Youtube 的最讚貼文
- 關於matplotlib下載 在 吳老師教學部落格 Youtube 的最讚貼文
- 關於matplotlib下載 在 吳老師教學部落格 Youtube 的精選貼文
- 關於matplotlib下載 在 [問題] mac安裝matplotlib問題- 看板Python - 批踢踢實業坊 的評價
- 關於matplotlib下載 在 Python Taiwan | Facebook 的評價
- 關於matplotlib下載 在 Python-Crawling-Tutorial 基礎爬蟲實戰 - GitHub 的評價
- 關於matplotlib下載 在 NumPy 及Matplotlib :-: Python 專案開發入門的十堂課 - YouTube 的評價
- 關於matplotlib下載 在 Colab 進行matplotlib繪圖時顯示繁體中文 的評價
- 關於matplotlib下載 在 [Python] 使用Selenium 爬蟲下載當前頁面驗證碼圖片 - 薛惟仁 ... 的評價
matplotlib下載 在 吳老師excel函數與vba大數據教學 Facebook 的精選貼文
單元01_建置Python開發環境(用懶人包快速建立)
開發環境和EXCEL VBA相較,Python真的太麻煩了,
VBA只要開啟開發人員標籤,就可以開始寫程式了,
另外EXCEL本身就可以充當資料庫來使用,資料也可以隨時存放,但這些都是Python無法做到的,原因應該和商用軟體(OFFICE)和自由軟體(PYTHON)的差異,商用軟體有收費自然就有必要幫大家把需要的環境做好,但衍生的就是需要不斷收費,但自由軟體因為不用收費,只要不是商業用途,都沒有費用問題,但也就需要什麼都自己來,有點像自助餐的概念,什麼都要自己來,所有建置環境也就需要自己準備好,甚至,建置環境的方法至少幾十種,
那一種最好?
我想為了Python的教學便利,不讓大家太麻煩,
所以幫大家準備好Pyhon建置環境懶人包,
只要將兩個檔案解壓縮到D碟(或C碟)中,
在直接執行Eclipse的執行檔就好,Eclipse是免安裝程式,可是是為Python相當好用的編輯器,開啟後在和Pyhton連結就好,再設定好編碼方式為UTF-8,就可以開始寫Python程式了,至於後面的VBA可以把EXCEL當成存取資料和資料庫來用,後面會再講解對應到Python的檔案與資料庫使用,以下說明如何使用。
教學影音(完整版在論壇):
https://terry55wu.blogspot.com/2020/02/01python.html
使用懶人包
先下載
eclipse_python.zip [下載]
Python37-32.zip [下載]
結語:
和EXCEL VBA相較之下,Pyhton的開發環境麻煩太多,
但帶來的好處是費用上的節省,
和未來有用不完的外掛可以擴充,所以如果你的應用需求很簡單,
建議用VBA就好,但如果需要更複雜的處理工作,
也不想付錢給軟體公司,Python是很好的選項。
課程理念與課程介紹:
因應大數據分析、物聯網、工業4.0的需求,能更容易的學會網路爬蟲、機器學習、物聯網、影像辨識、自動圖像報表等需求,其中以EXCEL VBA與Python程式開發最為熱門,因此將VBA的自動化延伸到PYTHON設計,讓學員能夠比較兩個工具的長處,並能相互協同應用。
課程內容
單元01_建置Python開發環境與程式測試
單元02_基本語法與結構控制件
單元03_迴圈資料結構與自訂函數
單元04_串列、字典與檔案與資料庫處理
單元05-1_開放資料處理CSV和JSON資料處理(停車與PM2.5)
單元05-2_開放資料處理練習題_新北市開放資料JSON
單元05-3_GOOGLE雲端當CSV來源與CSV處理
單元05-4_網頁資料擷取基礎與外匯
單元05-5_網頁資料擷取台彩與股市資料
單元05-6_擷取網頁上櫃股票行情
單元06_使用Pandas與處理_Excel_試算表
單元07_VBA與Phython連結MYSQL資料庫
單元08_視覺化報表使用圖表繪製Matplotlib
吳老師 2020/2/10
matplotlib下載 在 吳老師教學部落格 Youtube 的最讚貼文
[進階]網頁資料擷取、分析與資料視覺化能力8(用selenium下載網頁&安裝外掛Katalon_Recorder與輸出程式&下載觀測站資料&Matplotlib繪製圖表&解決Matplotlib中文亂碼&TQCPLUS試題第4類重點與ending)
01_重點回顧與用selenium下載網頁
02_安裝外掛Katalon_Recorder與輸出程式
03_用selenium下載觀測站資料
04_用Matplotlib繪製圖表
05_繪製長條圖與圓餅圖
06_解決Matplotlib中文亂碼問題
07_練習題學生成績折線圖
08_TQCPLUS試題第4類重點與ending
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/26
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PY
matplotlib下載 在 吳老師教學部落格 Youtube 的最讚貼文
[進階]網頁資料擷取、分析與資料視覺化能力8(用selenium下載網頁&安裝外掛Katalon_Recorder與輸出程式&下載觀測站資料&Matplotlib繪製圖表&解決Matplotlib中文亂碼&TQCPLUS試題第4類重點與ending)
01_重點回顧與用selenium下載網頁
02_安裝外掛Katalon_Recorder與輸出程式
03_用selenium下載觀測站資料
04_用Matplotlib繪製圖表
05_繪製長條圖與圓餅圖
06_解決Matplotlib中文亂碼問題
07_練習題學生成績折線圖
08_TQCPLUS試題第4類重點與ending
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/26
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PY
matplotlib下載 在 吳老師教學部落格 Youtube 的精選貼文
[進階]網頁資料擷取、分析與資料視覺化能力8(用selenium下載網頁&安裝外掛Katalon_Recorder與輸出程式&下載觀測站資料&Matplotlib繪製圖表&解決Matplotlib中文亂碼&TQCPLUS試題第4類重點與ending)
01_重點回顧與用selenium下載網頁
02_安裝外掛Katalon_Recorder與輸出程式
03_用selenium下載觀測站資料
04_用Matplotlib繪製圖表
05_繪製長條圖與圓餅圖
06_解決Matplotlib中文亂碼問題
07_練習題學生成績折線圖
08_TQCPLUS試題第4類重點與ending
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/26
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PY
matplotlib下載 在 Python Taiwan | Facebook 的推薦與評價
https://www.tomorrowtides.com/download-python.html. Download Python ... 我知道的日期變數常常隱藏在網址或Doc內的head, 再不然就是有直接下載鈕可以直接抓). ... <看更多>
matplotlib下載 在 Python-Crawling-Tutorial 基礎爬蟲實戰 - GitHub 的推薦與評價
Python -Crawling-Tutorial 基礎爬蟲實戰. 相關資源. 最新的投影片放在slideshare 上, 會不定期更新, 程式碼可透過這個頁面右邊的Clone or download 下載 demo. ... <看更多>
matplotlib下載 在 [問題] mac安裝matplotlib問題- 看板Python - 批踢踢實業坊 的推薦與評價
由於研究需要使用到繪圖
所以下載了matplotlib 1.1.0 for mac OS X 並且安裝好(版本都符合)
當我import matplotlib.pyplot as plt時
他居然跑出錯誤 如下顯示
ImportError: dlopen(/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/site-packages/matplotlib/_path.so, 2):
no suitable image found. Did find:
/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/
site-packages/matplotlib/_path.so:
no matching architecture in universal wrapper
請問是怎麼回事呢@@?
還是我根本沒安裝好!?
(應該不可能呀 下載完就照著步驟按繼續繼續這樣安裝
而且如果直接import matplotlib 也沒出現錯誤@@)
雖然可以import matplotlib
但是我發現似乎沒有matplotlib.pyplot存在 ( import後help(pyplot)查不到
有請前輩示下!
是不是我搞錯了什麼呢?
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 61.57.67.209
※ 編輯: whatbb123 來自: 61.57.67.209 (04/12 22:55)
... <看更多>