路線圖 2024 - 西班牙語資料工程
又一個包含西班牙語資料工程基本概念、技術挑戰和資源的儲存庫?
您想為儲存庫做出貢獻嗎?訪問貢獻指南
注意:以下學習路線是根據個人判斷設計的,目的是透過我在網路上找到的免費西班牙語材料來促進對資料工程感興趣的人的學習。它不是一個明確的指南或課程,而是一個資源列表,隨著時間的推移,可以透過社區的貢獻進行改進。
數據工程英文書籍
英語 DE 設計模式
程式設計
基礎知識
我們從理解程式設計和邏輯的基本概念開始。本部分可以在學習您選擇的程式語言的同時進行開發。
- 課程:Platzi 基礎編程
- 影片:演算法與 TodoCode 程式設計簡介
- 影片:TodoCode 偽代碼練習
- 影片:Datademia 命令列
- 影片:Fazt 的 Bash 腳本
- 閱讀:Linux 命令列和 Shell 簡介,來自 Microsoft Learn
?程式設計語言
我建議從 Python 開始,因為它的學習曲線友好且在當今行業中很流行。然而,值得注意的是,資料處理也可以使用 R、Java、Scala、Julia 等來完成。
- 影片:Python from 0 by PildorasInformáticas
- 課程:FreeCodeCamp 的 Python 科學計算
- 課程:FreeCodeCamp 的 Python 大學代數
- 課程:哈佛 CS50 的 Python 程式設計簡介,由 FreeCodeCamp 副標題
- 課程:來自 FreeCodeCamp 的中級 Python 副標題
- 課程:Kaggle Pandas
- 影片:Ada Lovecode 的正規表示式
- 影片:BettaTech 物件導向程式設計原理
- 影片:Absolute 使用 Minecraft 解釋物件導向編程
- 課程:米格爾·拉茲 (Miguel Raz) 為匆忙的人準備的 Julia
Excel
使用 Git 進行版本控制
了解版本控制不僅在團隊工作時很有價值,而且還使我們能夠追蹤、理解和管理對專案所做的更改,從而保持高效和協作的開發。
- 影片:什麼是版本控制以及為什麼它對程式設計如此重要?透過數據德米亞
- 課程:MoureDev 的 Git 和 Github
- 影片:TodoCode 的 Git 和 Github
- 閱讀:Attlasian 的《正確使用 Git》
- 遊戲:學習 Git 分支
更多工具
- 筆記本:Google Collab、Jupyter 或 Deepnote
- 文字編輯器:VSCode、Spyder 或 Google IDX
資料庫
基礎知識
在這種情況下,是時候學習資料庫了。儘管我個人推薦 PostgreSQL 用於結構化數據,而 MongoDB 用於非結構化數據,但選擇使用的資料庫管理器由您自行決定。然而,還有許多其他選擇:MySQL、SQLite 等。
- 影片:TodoCode 資料庫簡介
- 閱讀:TodoPostgreSQL的DDL、DML和DCL的區別
- 影片:預存程序#1,作者:Héctor de León
- 影片:預存程序#2,作者:Héctor de León
- 影片:Fazt 的 MongoDB
- 影片:MitoCode 的 MongoDB
SQL
您還將學習 SQL,一種用於管理和操作關聯式資料庫的查詢語言。
- 影片:來自拉丁美洲數據工程的 SQL
- Kaggle 的 SQL 簡介
- Kaggle 進階 SQL
?設計
現在我們繼續更進階的概念,這將幫助我們設計資料庫、資料湖、資料倉儲、模式等。
- 影片:何時使用 SQL,何時使用 NoSQL?作者:赫克托·德·萊昂
- 影片:NoSQL 資料庫如何建模?來自你好世界
- 閱讀:Oracle 面向圖形的資料庫
- 影片:圖資料庫、Datahack 基礎知識和實踐
大數據
接下來是了解大數據的一些概念。此外,無需深入鑽研,獲取有關人工智慧、商業智慧和數據分析的基礎知識也是很有趣的。
基礎知識
- 影片:面向 Datahack 傻瓜的大數據
- 閱讀:大數據:它是什麼以及它如何幫助我的業務?來自 Salesforce
- 認證:使用羅薩裡奧大學的大數據設計和程式設計物聯網解決方案
- 認證:加州大學聖地牙哥分校大數據
- 影片:大數據和 Databits 隱私
- 影片:智慧數據資料治理
- 影片:軟體大師如何在不超出預算的情況下開始資料治理
分析和數據探索
- 認證:數據分析專業基礎知識,來自 Microsoft 和 LinkedIn
- 認證:Google資料分析專業證書
- 認證:IBM 資料分析師專業證書
- 課程:FreeCodeCamp 的 Python 資料分析
- 影片:說故事:如何將您的內容變成故事?透過編碼器屋
統計數據
?人工智慧
- 課程:FreeCodeCamp 的 Python 機器學習
- 頻道:LearnIA 與 Ligdi Gonzalez
- 影片:從 Dot CSV 學習人工智慧
- 影片:如何在 Datalytics 資料工程中使用 ChatGPT
- 課程:人工智慧,哥倫比亞大學副標題
?商業智能
- 影片:Google 商業智慧證書,副標題為 Google Career
- 影片:適合所有人的商業智慧!通過皮爾卡拉
數據視覺化
資料處理
本節是資料工程的核心,我們將了解什麼是資料管道、什麼是 ETL、編排器等等。另外,我留下了一個關鍵概念的列表,我將在將來使用它們各自的資源進行更新,如果您有興趣詳細學習它們,您可以搜尋儲存庫中上傳的書籍。
- 頻道:CodinEric
- 頻道:拉丁美洲數據工程
- 頻道:Datademia
- 通路:數據分析
- 部落格:開始(英文)
- DataWars學習平台
? ETL 和資料管道
- 影片:資料工程:RockingData 資料專案的核心之旅
- 影片:如何成為真正的資料工程師?透過資料位
- 影片:Rocio Chavez 用 Python 進行資料預處理
- 影片:R 中的數據預處理,作者:Rocio Chavez
- 影片:A/B 測試:來自 SantanDev 的數據,而非意見
- 增量負載
- 訊息佇列
- 規劃任務表達式
❄️ 高級資料庫
- 關係模型
- 維度模型
- 事實和維度
- 資料湖、資料集市、資料倉儲和 Dataqube
- 基於列和基於行的佈局
- 星型和雪花型方案
- 關於讀取和寫入方案
?協調者
- 影片:來自 Data Engineering LATAM 的 Airflow
- 影片:使用 Apache Airflow 自動化創意 - Software Guru 的 Yesi Díaz
- 影片:LEARNING-BI 的 Pentaho Spoon
- 影片:Luigi,西雅圖數據專家字幕
- 閱讀:微軟的 Azure 資料工廠
?架構
- 大量資料處理
- 即時處理或串流處理
- Lambda 和 kappa 架構
- 閱讀:AWS OLAP 和 OLTP 之間的主要區別
- 影片:使用 Databits Spark 批量和串流建立 ETL
- 閱讀:Atlassian 虛擬機器和容器比較
- 影片:剝皮書呆子的碼頭工人
- 影片:Kubernetes,作者:Pelado Nerd
- 正在閱讀:什麼是分散式系統?透過 Atlassian
- 影片:來自拉丁美洲數據工程的 Spark
- 影片:Spark Mexico 資料工程的基礎設施即程式碼
- 影片:NullSafe Architect 的 Apache Spark
- 影片:NullSafe 架構師的 Apache Kafka
?測試
- 影片:遠大前程:CodingEric 在 PyConAr 2020 上像專業人士一樣驗證資料管道
- 影片:Patricio Miner 在 #QSConf 2023 上使用 Python 進行 ETL 測試及其自動化
雲
了解雲端運算知識很有用。在這一點上,我建議考慮準備官方認證。儘管這些考試通常需要付費,但您可以從業內最著名的提供者那裡找到免費的官方準備資源。
☁️ 雲端基礎知識
- 影片:Datahack 雲端運算基礎知識
- 閱讀:發現 Platzi 雲的優點和缺點
- 閱讀:Platzi 的雲端大數據架構
官方認證
- 谷歌雲端資料工程
- 影片:學習大數據的 Google Cloud (GCP)
- 微軟Azure資料工程
- 影片:拉丁美洲資料工程 Azure
- 影片:學習大數據的 Azure 認證
- 使用 Microsoft Azure Fabric 進行資料工程
- AWS 資料工程
職位搜尋
最後,我給您留下一些閱讀材料和視頻,提供與系統領域求職相關的建議和經驗。稍後,將添加與該主題相關的技術挑戰和其他資源。
?尖端
- 影片:如何獲得資料工程領域的第一份工作?從墨西哥火花
- 影片:TodoCode IT 世界的工作技巧
- 影片:進入 Maxi Program 系統的必備要素
- 主題:填寫 @natayadev 的 LinkedIn 個人資料的提示
- 主題:@natayadev 提供的有關獲得 IT 遠端工作的提示
- 主題:如何創建簡潔易讀的簡歷,作者:@iamdoomling
- 主題:我給你留下了這些在人力資源面試中生存的技巧,來自 @iamdoomling
- 影片:在公司、新創公司或自由工作者中編程哪個更好?透過@iamdoomling
- 影片:我完成了程式設計訓練營,現在做什麼?透過@iamdoomling
- 影片:來自阿根廷的承包商@iamdoomling
- 播客:Jonatan Ariste 的 DevRock
技術挑戰
- (2023) 儲存庫:MoureDev 社群程式碼挑戰
- (2024) 儲存庫:MoureDev 社群程式設計挑戰路線圖
進行中 ?
如果您覺得這個儲存庫有用,請給我一個星星