proginn1433465165
0獲贊0關注0粉絲
實踐場景:解決Spark流處理產生的小文件
背景 做流批一體，湖倉一體的大數(shù)據(jù)架構，常見的做法就是： 數(shù)據(jù)源->spark Streaming->ODS（數(shù)據(jù)湖）->spark streaming->DWD（數(shù)據(jù)湖）->... 那么數(shù)據(jù)源->spark Streaming->ODS，以這段為例，...
proginn1433465165
0
Python 或 大數(shù)據(jù)學習的來(個人技術群招人了)
Python相關 Python基礎 爬蟲 數(shù)據(jù)分析AI 點擊關注 目前0-1個人學習的大綱 現(xiàn)邀請有python共同學習的戰(zhàn)友一起從0-1學習 【注意】：Python群沒有大神，基本上都是0-1學習者 大數(shù)據(jù)相關 大數(shù)據(jù)群，從2021開始到現(xiàn)在，聚...
proginn1433465165
0