😇很榮幸受邀到 women in data science 2020 演講😇
題目:在網路聲量定產品好壞的年代,我們需要好的機器學習來翻轉👌🏻
在電商時代趨勢下,消費者在購物前習慣透過商品歷史客戶評價(Customer Reviews)來進行選購,就像我在淘寶買衣服之前,一定會看其他消費者穿搭照片一樣,有時候會瞬間滅火,有些衣服在模特身上是玲瓏有緻,穿在一般老百姓身上就是灌香腸。
或是某些客戶習慣A商品頁面攻擊B商品,或是趁機打其他商品廣告,試圖把潛在客戶引開。
客戶評價以往大多採用人工的方式進行審核,但在評價數量與日俱增,我們需要機器學習演算法來簡化人類的工作量🤗,透過演算法的方式針對商品評價進行篩選,不僅可減少人力支出,更可以有效的進行模型優化。
◽️分析工具:
SQL database🐬
python pandas scikit-learn 🐍
◽️實務分析流程:
整理特徵-->處理樣本不平衡-->特徵選擇-->羅吉斯迴歸-->評估指標(recall rate)-->決定臨界值-->結合多模型成就最終版數學模型
◽️白話文:
Customer Reviews是由購買和使用過該產品的顧客對產品進行的評論。
一個新的 評價 進來,丟入最終版數學模型後,模型會給此 評價 一個分數,此時若算出來的 分數>0.75 我們就會直接將這條 評價 放到 電商平台網站上,若 分數< 0.75 則會進一步交由人工小組審查,若通過人工小組審查則放上網站,反之移除。
🍊有趣的小常識:
此次用到的演算法叫羅吉斯回歸(Logistic regression)
,很多朋友都在問為什麼要叫做regression呢?
從前從前英國科學家想要研究“身高都很高的夫妻,是否會生下更高的兒女?”,於是發現父母特徵的確會遺傳給後代,但是並不會產生極端身高的族群。當父母的身高已經遠離平均身高時,生下的兒女身高並沒有持續「遠離」平均,而會稍微「靠近」平均,也就是相對矮了一點。
把這個「極端」往「平均」移動的現象稱為「 regression to the mean 」,很有趣吧🙈🙈
🐶Mina IG : https://reurl.cc/8GZZjb
----------
最後謝謝
讀書會 Republic of AI Developer
研討會 Women in Data Science Taipei
還有週末被我逼迫聽我rehearsal 的朋友們 😆😆
同時也有55部Youtube影片,追蹤數超過4萬的網紅吳老師教學部落格,也在其Youtube影片中提到,[進階]網頁資料擷取、分析與資料視覺化能力7(正規表示法&證照201搜尋字詞用re的findall方法算詞頻&抓取email與圖片網址與電話號碼&202美元收盤匯率&203台灣彩券程式差異與204題&301學生成績&如何用Pandas讀與寫CSV與EXCEL&301&303果菜批發市場拍賣行情) ...
「python pandas書」的推薦目錄:
- 關於python pandas書 在 Mina 安米娜 Facebook 的最讚貼文
- 關於python pandas書 在 軟體開發學習資訊分享 Facebook 的精選貼文
- 關於python pandas書 在 軟體開發學習資訊分享 Facebook 的最佳貼文
- 關於python pandas書 在 吳老師教學部落格 Youtube 的最佳解答
- 關於python pandas書 在 吳老師教學部落格 Youtube 的最佳貼文
- 關於python pandas書 在 吳老師教學部落格 Youtube 的最佳解答
- 關於python pandas書 在 [問題] 能否推薦Panda的書? - 看板Python - 批踢踢實業坊 的評價
- 關於python pandas書 在 [分享] 2020 推薦Python資料科學的書- PTT精華區 的評價
- 關於python pandas書 在 Python 資料科學與人工智慧, profile picture - Facebook 的評價
- 關於python pandas書 在 【运筹OR帷幄|数据科学】pandas实战教程系列电子书 - GitHub 的評價
- 關於python pandas書 在 python数据分析数据科学中文英文工具书籍下载-持续更新 的評價
- 關於python pandas書 在 Python Pandas 資料分析- 基礎教學By 彭彭 - YouTube 的評價
- 關於python pandas書 在 11 用Pandas讀取EXCEL與Dataframe說明 - YouTube 的評價
- 關於python pandas書 在 09 如何用Pandas讀與寫CSV與EXCEL - YouTube 的評價
python pandas書 在 軟體開發學習資訊分享 Facebook 的精選貼文
--限時 5 折特價電子書--
書籍介紹
PyTorch 是一個機器學習框架,專注於深度神經網路。因為它強調基於 GPU 的加速,PyTorch 在易於使用的硬體上表現出色,並且在較大的系統很容易擴充。再加上它是 Pythonic!由於其計算圖模型的執行定義,PyTorch 可以很好地與 Python 資料科學生態系統配合使用。如果你正在使用 Numpy、Pandas 或其他類似工具,應該會駕輕就熟。
PyTorch 很容易上手。它可以最大限度地減少認知消耗,同時不會犧牲對進階功能的用處,這意味著你可以專注於最重要的事情 – 建構和培訓最新最好的深度學習模型,並在世界有初步進展。 PyTorch 也很容易擴充和延展,且和其他 Python 工具配合得很好。 PyTorch 已被數百名深度學習從業者和幾個一流的玩家採用,如 FAIR、OpenAI、FastAI 和 Purdue。
> 有需要 5 折優惠折扣碼請在下方留言
https://softnshare.com/meap-deep-learning-with-pytorch/
python pandas書 在 軟體開發學習資訊分享 Facebook 的最佳貼文
--限時 5 折特價電子書--
書籍介紹
PyTorch 是一個機器學習框架,專注於深度神經網路。因為它強調基於 GPU 的加速,PyTorch 在易於使用的硬體上表現出色,並且在較大的系統很容易擴充。再加上它是 Pythonic!由於其計算圖模型的執行定義,PyTorch 可以很好地與 Python 資料科學生態系統配合使用。如果你正在使用 Numpy、Pandas 或其他類似工具,應該會駕輕就熟。
PyTorch 很容易上手。它可以最大限度地減少認知消耗,同時不會犧牲對進階功能的用處,這意味著你可以專注於最重要的事情 – 建構和培訓最新最好的深度學習模型,並在世界有初步進展。 PyTorch 也很容易擴充和延展,且和其他 Python 工具配合得很好。 PyTorch 已被數百名深度學習從業者和幾個一流的玩家採用,如 FAIR、OpenAI、FastAI 和 Purdue。
>有需要 5 折優惠折扣碼請在下方留言
https://softnshare.com/meap-deep-learning-with-pytorch/
python pandas書 在 吳老師教學部落格 Youtube 的最佳解答
[進階]網頁資料擷取、分析與資料視覺化能力7(正規表示法&證照201搜尋字詞用re的findall方法算詞頻&抓取email與圖片網址與電話號碼&202美元收盤匯率&203台灣彩券程式差異與204題&301學生成績&如何用Pandas讀與寫CSV與EXCEL&301&303果菜批發市場拍賣行情)
01_重點回顧與正規表示法
02_證照201搜尋字詞用re的findall方法算詞頻
03_正規表示法抓取email與圖片網址與電話號碼
04_證照201問題說明與證照202美元收盤匯率
05_203台灣彩券爬取大樂透開獎資料
06_203台灣彩券程式差異與204題
07_204 新北市大專院校名單
08_格式化與證照301學生成績
09_如何用Pandas讀與寫CSV與EXCEL
10_用Pandas讀取CSV說明
11_用Pandas讀取EXCEL與Dataframe說明
12_ 證照301學生成績排序與修改資料
13_證照303果菜批發市場拍賣行情
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/23
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝
python pandas書 在 吳老師教學部落格 Youtube 的最佳貼文
[進階]網頁資料擷取、分析與資料視覺化能力7(正規表示法&證照201搜尋字詞用re的findall方法算詞頻&抓取email與圖片網址與電話號碼&202美元收盤匯率&203台灣彩券程式差異與204題&301學生成績&如何用Pandas讀與寫CSV與EXCEL&301&303果菜批發市場拍賣行情)
01_重點回顧與正規表示法
02_證照201搜尋字詞用re的findall方法算詞頻
03_正規表示法抓取email與圖片網址與電話號碼
04_證照201問題說明與證照202美元收盤匯率
05_203台灣彩券爬取大樂透開獎資料
06_203台灣彩券程式差異與204題
07_204 新北市大專院校名單
08_格式化與證照301學生成績
09_如何用Pandas讀與寫CSV與EXCEL
10_用Pandas讀取CSV說明
11_用Pandas讀取EXCEL與Dataframe說明
12_ 證照301學生成績排序與修改資料
13_證照303果菜批發市場拍賣行情
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/23
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝
python pandas書 在 吳老師教學部落格 Youtube 的最佳解答
[進階]網頁資料擷取、分析與資料視覺化能力7(正規表示法&證照201搜尋字詞用re的findall方法算詞頻&抓取email與圖片網址與電話號碼&202美元收盤匯率&203台灣彩券程式差異與204題&301學生成績&如何用Pandas讀與寫CSV與EXCEL&301&303果菜批發市場拍賣行情)
01_重點回顧與正規表示法
02_證照201搜尋字詞用re的findall方法算詞頻
03_正規表示法抓取email與圖片網址與電話號碼
04_證照201問題說明與證照202美元收盤匯率
05_203台灣彩券爬取大樂透開獎資料
06_203台灣彩券程式差異與204題
07_204 新北市大專院校名單
08_格式化與證照301學生成績
09_如何用Pandas讀與寫CSV與EXCEL
10_用Pandas讀取CSV說明
11_用Pandas讀取EXCEL與Dataframe說明
12_ 證照301學生成績排序與修改資料
13_證照303果菜批發市場拍賣行情
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入):
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包:
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類:
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類:
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰:處理 CSV 檔和 JSON 資料 3
10 實戰:PM2.5即時監測顯示器轉存資料庫 3
11 實戰:下載台銀外匯、下載YAHOO股市類股 3
12 實戰:下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類:資料處理能力 3
14 TQC+Python 3第2類:網頁資料擷取與轉換 6
15 TQC+Python 3第3類:資料分析能力 6
16 TQC+Python 3第4類:資料視覺化能力 6
上課用書:
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者: 鄧文淵/總監製, 文淵閣工作室/編著
出版社:碁峰 出版日期:2016/11/29
吳老師 109/8/23
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝
python pandas書 在 [分享] 2020 推薦Python資料科學的書- PTT精華區 的推薦與評價
第一本: Data Science from Scratch中文版(第二版):用Python學資料科學 ... https://tinyurl.com/y6vkkmqx 大名鼎鼎的Pandas套件作者Wes McKinney ... ... <看更多>
python pandas書 在 Python 資料科學與人工智慧, profile picture - Facebook 的推薦與評價
【 免費電子書: Learning Pandas 】 Pandas 是Python 處理資料最重要的套件,這本含41 章的電子書內整理了大量常用的實作範例!... ... <看更多>
python pandas書 在 [問題] 能否推薦Panda的書? - 看板Python - 批踢踢實業坊 的推薦與評價
小弟最近對Panda有高度興趣
之前其實就對於 awk sed 正規表示式有濃厚興趣也玩過許多年
前陣子無意間碰過panda套件後 驚為天人
這簡直是 awk sed 正規表示式的富人版啊
不過我查了一下
訪間好像沒有專門針對panda撰寫的書
不知道各位知道有哪些書 在講解panda部分比較生動有趣 內容也比較多和完整的呢?
感謝喔!!!
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.184.226.199
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1547892754.A.449.html
... <看更多>