104學習

數據整理

數據整理
關注
邀請朋友
邀請朋友

Line

Facebook

複製連結

取消
「數據整理:負責收集、整理及分析大量數據,以支持業務決策和策略規劃。需熟悉數據庫管理和數據清理流程,具備一定的數據分析工具(如Excel、SQL)的使用能力。此角色要求良好的邏輯思維及細心,並需與各部門密切合作,確保數據的準確性與一致性。在台灣職場中,面對快速變化的市場環境,數據整理人員需能迅速適應並解決各種數據挑戰,以驅動公司業務增長。」
關於教室
關注人數 43 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
關於教室
關注人數 43 人
104人力銀行從職缺中挑選出常見技能所成立的官方教室,提供大家進行共學互動。
學習主持人
持續分享知識,
有機會成為官方教室主持人
教室標籤
Hi~ 歡迎分享學習資源,有學習問題可匿名向Giver發問!
我要分享
我要提問

數據整理 學習推薦

104學習

產品

2022/01/09

VLOOKUP功成身退!全新函數XLOOKUP霸氣取而代之!
更多免費學習與證照資訊,都可加入【104學習精靈】官方帳號
VLOOKUP 會針對lookup_value 搜尋及傳回值的儲存格範圍。 您可以使用命名範圍或資料表,而且您可以在引數中使用名稱,而不是儲存格參照。
使用XLOOKUP 函數來按列尋找表格或範圍中的專案。 例如,以零件編號來查看汽車零件的價格,或根據員工識別碼尋找員工名稱。
菜鳥救星Excel教學:最新函數XLOOKUP取代VLOOKUP
在網路看到這個學習新知,與大家分享唷!
看更多
3 0 3770 2
蔡明淳

作者

2022/01/02

行銷必備! 《使用數據的技術》文組生也能快速上手的方法
大數據正夯!許多人都想跨進數據的領域,成為資料分析師或資料科學家。就算不是立志想成為資料分析師,也越來越多人了解數據的重要性,希望將數據運用在自己的工作上,像是會計、行銷、管理等等,甚至使用數據來幫助自己做出投資理財更好的決策。但是從學生時代數學就很差,跟數字不熟,是文組生……到底怎麼跨入數據的領域呢?
此篇文章分享非常實用的一本書—《使用數據的技術:韓國星巴克第一數據科學家》,作者寫得很淺顯易懂,舉了很多比喻及實例,數據初學者也能快速上手!
以下整理書中的內容及融入個人的經驗:
1.1提出問題
數據是用來服務我們的,提出問題的那一刻,數據才有可能幫助我們,否則拿到再多數據都沒有意義。
解決任何問題之前,都要有不滿足及好奇心,好奇為什麼這個月業績成長了?而不是看到業績成長就「噢!好棒」……沒了。
1.2 設計數據
針對想解決的問題,好奇的問題,接下來要知道我們該如何設計數據,需要運用哪些數字解答。書中建議的方法很實用,叫做:拆解問題語句變成數據。
以一句話舉例:最近很流行的電商網站,那裡的包包賣得比其他地方便宜。
接著拆解:
.最近:具體時間點是什麼時候?可以用幾年、幾個月、幾週或是幾天說明嗎?
.很流行:很流行指的是什麼?銷售規模大嗎?銷售排行或成長率高嗎?是在特定族群中受歡迎嗎?在全台灣嗎?在台北嗎?還是特定年齡層經常使用的網站或服務?
.比其他地方:此電商網站的競爭對手是誰?有哪些和這個電商網站類似的商店?是只有賣包包的店嗎?還是只賣特定品牌的店?或是有賣各式各樣品牌的店?
.便宜:有多便宜?便宜幅度是10%嗎?跟全世界價格相比最便宜嗎?在網路或實體中最便宜嗎?是販賣正貨產品業者中,最便宜的嗎?所有的包包都賣得很便宜嗎?其他產品價格都差不多,但這個產品比較便宜嗎?整年度都很便宜,還是只有特定期間才便宜?
1.3 搜尋數據
接下來要用拆解句子裡的元素蒐集數據。蒐集數據不是一件簡單的事,世界上有很多很棒的公司從事販賣數據的服務,但這些服務以個人的身份未必能取可(可能價錢太高或資格不符)。
因此作者建議我們,需要絞盡腦汁思考:能夠拿到哪些數據?如果權限不足拿不到數據,有沒有其他的方法,或是有沒有哪些類似的數據可以替代?
數據依處理程度可分為四大類:
1.Log數據(原始資料)
2.數據表格(簡單加工)
3.商業儀表板(可直接應用,但難以從源頭變化)
4.報告書(可直接運用,方便操作,但沒什麼能更換的地方)
1.4 分析數據
這個步驟是作者說大家最想學,但又最難教的部分。作者建議初學者分析數據時必須抱持「大處著眼,小處著手」的心態。
大處著眼:先挑出數據中最好找,又能看到整體面貌的來仔細檢視,先做一份最有代表性的圖表,像是每日銷售、每月銷售或年度銷售等,數字隨時間推移的長條圖。
小處著手:親手從非常簡單的圖表畫起,用Excel也好,先確認歷史銷售型態,而不是先用演算模型預測銷售走向。如果自己親手做過一次,並了解其含義,下次碰到同樣情況,就能懂得運用相同手法。
2.1 拼出數據的拼圖
不要期待一個數字就能成為公司的轉捩點,重點在於要懂得用數據說故事。將多項分析洞察結果蒐集起來,能決定看到的方向。如果只靠單一分析結果難以斷定,多項數據的準確度就會提升。將分析的結果分門別類,重新排列分類好的內容,讓故事說得通順有理。
以做生意來說,可以用六何法(Who/When/Where/What/How/Why)整理答案,建議以消費者為主詞,也可以用特定店面或特定情況作為主詞。
在拼圖的過程中,若發現空白的地方要追加分析。但也要給自己決定的期限,不能無止盡分析下去。因為藉由數據得到洞察,進而採取動作改變市場,才是最重要的。
2.2 提出方向
提出方向不能講一些虛無飄渺的內容,也不能講一些人人都會講的內容,而是要提出以數據為基礎,具體且符合現實的行動方案。
範例:
(X)為了做出大眾會喜歡的產品,必須從多個角度檢視。
(X)必須做出OO口為的飲料,用OO色的包裝,必須在OO超市販賣。
(O)喜歡OO的顧客群,通常偏好OO口味和OO色。該客群經常在OO超市出沒。
2.3 數據分享
可透過商業儀表板或報告書分享數據,或選擇藉由兩者之中類似Data Studio等視覺化工具。向不同聽者報告時,需設計不同的故事大綱。(這點跟簡報的原則是類似的。)
看更多
2 0 566 2

104學習精選課程

看更多課程
想提升職場競爭力?專業技能課程看起來👇
Python全方位期貨課程 - 從基礎、爬蟲、回測、LINE提醒到AI應用(2025年2月更新)
課程範例展示 完整分析期貨策略風險與報酬,並快速優雅的產出精美圖表。(圖上報酬為模擬示意) 利用回測框架演算期貨策略最適參數及其對應的報酬、MDD及Sharpe Ratio,迅速算出策略最適合參數。 (下欄位與參數數值為模擬,實際值以課程為主) 利用手邊現有資料,開發出市場警示、提醒程式,利用排程自動執行並透過Line Notify服務通知。 除基本的介紹與機器學習模型應用,我們使用一些深度學習及強化學習模型預測期貨價格、漲跌、交易等。(強化學習將於500%解鎖章節教授) 課程說明 您最需要的Python期貨程式交易,都盡在此課! 使用Python做出程式交易全方位的應用,讓你在程式交易的領域面對何種需求都能輕鬆應對,尤其是針對期貨保證金交易的模式,仍然能得心應手。當你學會期貨程式的撰寫之後,就算轉戰股票市場你也會覺得相當輕鬆,反之由股票交易程式轉戰期貨交易程式時常讓人手足無措。 (本課程包含三堂少量的用於股票的應用,因考量到台股高權值股對於台指的重大影響,因此在一些市場偵測的章節會有部分股票應用) 您是否有以下疑問? 還在人工看技術指標評估自己的策略? AI看起來很高深的樣子,完全不敢接觸 想出了好策略或是好的輔助指標卻不知道如何做成服務 市面上大多數是股票課程,課程偏少,網路上資源也較少 1.學會用程式,幾秒鐘即可獲得全面的策略分析! 許多投資者仍然是看著手機APP與技術指標來驗證自己的策略,這樣不僅速度慢,而且不全面。許多人人工驗證了其中一年就確信了自己的策略可行,實際操作時虧損慘重。如果你懂了程式,十年的資料可以在數秒鐘就回測完成,並且透過套件可以獲得非常全面的策略分析,我們會帶著你應用backtrader回測框架快速驗證期貨策略。 2.強大的AI模型,就算是程式小白也可以應用! AI確實是一門非常學術且具備高門檻的領域,但你我可能都並非是走研究學術路線,有了許多巨人替大家開發許多好用強大的AI模型,我們可以很輕易地呼叫這些強大的模型去學習自己的目標,應用並不困難。在本課程中我們將會示範機器學習(Machine Learning)與深度學習(Deep Learning)如何快速簡易的應用在期貨市場,並於解鎖課程中加入強化學習(Reinforcement Learning)的應用。 3. 運用程式進行盤中檢測 當你有好策略或是好的市場掃描程式,卻不知道如何做成服務嗎? 我們會教你如何使用windows排程自動執行你的程式,並讓程式透過Line Notify很簡單的發送Line訊息給你的使用者。時刻監控市場,並達到及時提醒。 4. 少見的全方位期貨課程 是的,不僅是課程,網路上的資源期貨也是偏少。股票的受眾較廣,且程式設計上較為容易,但期貨為保證金交易模式,許多程式設計或是回測框架這部分都會顯得比較複雜,本課程會點出一些關鍵的要點,讓你掌握期貨這方面的程式設計。 這堂課適合誰 苦於人工驗證交易策略,想要高速回測期貨策略 對期貨交易軟體感到無法滿足需求,想要高度自由化 對於Python於期貨市場的應用有高度興趣的初學者 對於爬蟲感到陌生,尤其是動態網頁更是不知所措 有良好的想法,但苦於不知道如何自動化並作成簡單的服務 想要生成專業又漂亮的策略回測結果圖表,卻不知從何下手 對於AI模型無基礎,但又想要嘗試看看,體驗模型的效果 教師介紹 張峮瑋 Arleigh Chang 黃仕勳 Ryan Huang 【老師的話】 大家好,我是《Python全方位期貨課程》的老師峮瑋(Arleigh)。 我曾經待過野村投信(NOMURA),也曾在東吳自然語言處理實驗室研究過模型與金融市場的議題 現在則替私人操盤手撰寫交易程式, 以Python為主,範圍包含程式交易、策略回測、AI應用於市場、資料採集、市場監測機器人等。 這些範疇正是我在課程中想要教給你的,我會將現在的工作環境會使用到的技術,在課程中透過實戰的方式讓你融會貫通。 歡迎大家一起加入這門線上課程!有任何問題歡迎提問,我會親自回覆。 【出版書籍】 - 著有《Python金融市場賺錢聖經》,曾榮登多個平台新書暢銷榜 【學歷】 - 就讀臺科大資管所,研究 AI 應用於金融交易市場 - 畢業於臺科大資工系 輔系財金系 【工作資歷】 - 現任野村投信(NOMURA) IT部門實習生 - 臺科大資工系資料探勘與社群網路分析實驗室成員 - 曾任臺科大 資管所行動計算與資料探勘實驗室成員 - 曾任程式語言家教,協助多位無程式經驗學生從0開始 - 多項AI產學合作經驗,涵蓋深度學習、自然語言處理、社群網路分析 - 曾任 IOH 開發開放個人經驗平台校園大使,演講 10 所高中職 - 曾於 IOH 分享個人講座 課程大綱 PART 1:PYTHON基礎教學 – 基礎講解+2道實戰上手PYTHON 1-1:Python下載、編譯器推薦、pip管理套件、虛擬環境 1-2:變數、運算元、運算子、資料型態及應用場景 1-3:for迴圈、while、if else判斷式、class簡介、def函式、經典套件介紹Pandas & numpy、Enumerate、Break/continue/pass、try/except 1-4:刷Leetcode簡單Two sum - 實戰演練1 1-5:手寫經典指標移動平均 – 實戰演練2 PART 2:資料來源與技術指標 – 熟悉爬蟲,資料來源無虞 2-1:台指資料分K轉換與計算技術指標 2-2:爬蟲介紹與基本SOP、Selenium應用場域 2-3:爬蟲實戰1: 證交所三大法人資訊 2-4:爬蟲實戰2: 期交所報價爬取 (Selenium) 2-5:爬蟲實戰3: 三大法人多空方口數與未平倉口數 2-6:即時資料 - 永豐API基本使用介紹(Shioaji) PART 3:盤中監測市場 – 計算專屬指標,LINE隨時提醒 3-1:Line Notify介紹 3-2:Windows排程呼叫程式自動運行 3-3:實戰1 – 三大法人買賣超統計資訊(股票) 3-4:實戰2 – 各大類股漲跌情況統計(股票) 3-5:實戰3 – 開盤前,昨日收盤指標有觸發訊號的提醒 PART 4:BACKTRADER回測策略+風險分析套件 – 高速回測策略,檢視完整報告 4-1:Backtrader介紹& Pyfolio示範 4-2:實戰回測1: 5ma & 60ma交叉策略 4-3:實戰回測2: 布林通道策略 4-4:實戰回測3: Momentum + 移動停利停損 4-5:實戰回測4: 以實戰1-3擇一為例,完整示範回測流程、演算最佳參數到pyfolio評估 PART 5:AI+期貨 – 玩玩模型應用在市場,體驗最新潮流 5-1:Deep Learning & Machine Learning & Reinforcement Learning簡介與資源推薦 5-2:實戰1: ML預測期貨漲跌 5-3:實戰2: DL預測期貨價格 5-4:實戰3: DL預測期貨漲跌 解鎖章節 200%:backtrader回測成果網頁可視化 500%:強化學習用於期貨交易學習範例 700%:python結合永豐API程式自動交易台指期範例 800%:回測配對交易範例
Mastertalks
推薦證照
Steve Sue 蘇書平

執行長

2021/12/23

學好數據分析的第一步,先學會拆解「句子」!
大數據時代,人人都有機會接觸到數據,將來可能還會變成每個人都需要具備的能力,但不是專業的數據分析師,也能學會數據分析及使用的技術嗎?
韓國星巴克第一數據科學家說:「可以的!」即使你是文科生,只要懂得思考,並經常練習拆解問題語句,慢慢的,你就可以從數據堆中發掘出意義。
看更多
1 0 207 1
你可能感興趣的教室