<p style="text-align: justify;"><strong>指南者學(xué)員投稿</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>申請(qǐng)經(jīng)驗(yàn)分享</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>學(xué)員背景</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">X同學(xué)</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>本科：</strong>四川大學(xué) 信息管理與信息系統(tǒng)專業(yè)</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>GPA：</strong>86.42</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>錄取院校：</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><span style="color: #1890ff;"><a style="color: #1890ff;" title="香港科技大學(xué) 大數(shù)據(jù)科技" href="http://pnemnih.cn/majr_49717" target="_blank" rel="noopener">香港科技大學(xué) 大數(shù)據(jù)科技</a></span></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">我有一年gap的經(jīng)歷，這一年我在一家公司從事大數(shù)據(jù)相關(guān)工作，碩士也是申到了科大的大數(shù)據(jù)科技，所以我會(huì)就<strong>DS的申請(qǐng)和就業(yè)</strong>給大家做一些分享。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong><span class="h1">大數(shù)據(jù)行業(yè)介紹</span></strong></li> </ul> <p>&nbsp;</p> <p style="text-align: justify;">首先我先介紹一下大數(shù)據(jù)行業(yè)，就我一年的體驗(yàn)來(lái)講，它其實(shí)就是對(duì)于<strong>數(shù)據(jù)的采存管用</strong>，也就是采集、存儲(chǔ)、管理和使用等一系列操作。采集這一塊就非常清楚了，大家利用一些腳本，然后對(duì)于離線或者實(shí)時(shí)的數(shù)據(jù)做一個(gè)獲取，這些獲取到的數(shù)據(jù)其實(shí)是雜亂無(wú)章的。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">假如大家做過(guò)什么爬蟲或者一些大規(guī)模的一些數(shù)據(jù)的抽取，都知道數(shù)據(jù)其實(shí)是雜亂無(wú)章的，我們就需要根據(jù)我們的業(yè)務(wù)需求對(duì)他做一些<strong>ETL操作</strong>。你們可能覺(jué)得ETL看起來(lái)比較生澀，它其實(shí)就是抽取、轉(zhuǎn)換和加載這三個(gè)單詞的縮寫，這個(gè)時(shí)候我們就把數(shù)據(jù)轉(zhuǎn)化成了我們需要的數(shù)據(jù)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">接下來(lái)我們就需要把它們集中存儲(chǔ)起來(lái)，把這些多元異構(gòu)的數(shù)據(jù)做集中存儲(chǔ)。多源異構(gòu)就是多來(lái)源，并且每一個(gè)結(jié)構(gòu)都不一樣，比如說(shuō)它是結(jié)構(gòu)化的數(shù)據(jù)或者文本化的數(shù)據(jù)或者一些音頻視頻，然后我們把它建立成一個(gè)<strong>數(shù)據(jù)湖或者數(shù)據(jù)倉(cāng)庫(kù)</strong>，我們?cè)谑褂玫臅r(shí)候才會(huì)對(duì)數(shù)據(jù)湖做一些邏輯的處理，那數(shù)據(jù)倉(cāng)庫(kù)就是在我們使用之前就做完非常嚴(yán)密的邏輯處理，然后用的時(shí)候直接提取就可以了。所以這兩個(gè)的區(qū)別就是數(shù)據(jù)湖事先存再使用，然后先存再處理，而數(shù)據(jù)倉(cāng)庫(kù)是先處理再存。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">之后的管理其實(shí)就是對(duì)它做一個(gè)<strong>界面的分裝</strong>，然后用戶可以用一些可視化的界面來(lái)操縱數(shù)據(jù)，可以更快地找到數(shù)據(jù)并使用它。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">使用這一塊其實(shí)也不用多說(shuō)，大家都明白，我們可以做一些算法建模，然后把這些干凈的數(shù)據(jù)拿出來(lái)，用算法套進(jìn)去之后，得出來(lái)我們想要的一些商業(yè)分析或者一些報(bào)表統(tǒng)計(jì)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">這大概就是整個(gè)大數(shù)據(jù)行業(yè)的介紹。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong><span class="h1">大數(shù)據(jù)行業(yè)職務(wù)概況</span></strong></li> </ul> <p>&nbsp;</p> <p style="text-align: justify;">首先最高層的肯定就是<strong>CIO首席信息官</strong>，他其實(shí)是將數(shù)據(jù)科學(xué)家、IT人員、數(shù)據(jù)分析師等做的所有數(shù)據(jù)的處理，上升到一個(gè)信息的高度，<strong>用數(shù)據(jù)去輔助決策</strong>。我們剛進(jìn)這個(gè)行業(yè)，肯定不可能做到那么高的一個(gè)級(jí)別，它應(yīng)該是我們未來(lái)努力的方向。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">我著重介紹以下的三個(gè)職業(yè)：<strong>數(shù)據(jù)科學(xué)家、IT人員和運(yùn)維人員</strong>。首先是數(shù)據(jù)科學(xué)家，它其實(shí)是我們這個(gè)行業(yè)里邊職業(yè)壽命非常長(zhǎng)的，到50歲左右都是非常黃金的工作年齡，因?yàn)閷?duì)于數(shù)據(jù)科學(xué)家來(lái)說(shuō)，他積累的行業(yè)外的經(jīng)驗(yàn)越豐富，他就是越有經(jīng)驗(yàn)，然后在這個(gè)行業(yè)也做得越好。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">他需要有兩方面的知識(shí)儲(chǔ)備，一方面就是要了解一門跟業(yè)務(wù)相關(guān)的，比如說(shuō)電子商務(wù)、工業(yè)、交通等這樣的學(xué)科，<strong>明白這個(gè)學(xué)科的特點(diǎn)</strong>。同時(shí)要有另外一個(gè)知識(shí)儲(chǔ)備，就是能夠使用<strong>統(tǒng)計(jì)學(xué)、數(shù)學(xué)、計(jì)算機(jī)科學(xué)</strong>開展一些工作，把這兩個(gè)知識(shí)儲(chǔ)備結(jié)合到一起，其實(shí)就是他的技能要求。對(duì)于這個(gè)職業(yè)來(lái)說(shuō)，一般對(duì)口的專業(yè)就是計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、應(yīng)用數(shù)學(xué)，然后信息管理等。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">下一個(gè)角色就是IT人員，IT人員這一塊其實(shí)大家都知道，跟業(yè)務(wù)的聯(lián)系就比較的淺。它主要分為兩個(gè)方向，一是前端的開發(fā)，這個(gè)跟行業(yè)關(guān)系不是很大，它其實(shí)就是實(shí)現(xiàn)一些頁(yè)面，然后再?gòu)慕涌讷@取一些數(shù)據(jù)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">對(duì)于大數(shù)據(jù)行業(yè)，它比較特殊的就是有后端開發(fā)的IT人員，需要去<strong>跟大數(shù)據(jù)整個(gè)生態(tài)系統(tǒng)的一些服務(wù)去打交道，主要使用Java</strong>，然后能夠?qū)崿F(xiàn)一些比較復(fù)雜的、數(shù)學(xué)科學(xué)家無(wú)法實(shí)現(xiàn)的一些數(shù)據(jù)處理過(guò)程，以及對(duì)于它的存儲(chǔ)的一些優(yōu)化。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">比如說(shuō)你在存儲(chǔ)的時(shí)候，學(xué)過(guò)計(jì)算機(jī)的同學(xué)就知道會(huì)有行式存儲(chǔ)和列式存儲(chǔ)，他們面對(duì)的分析和存儲(chǔ)都是不一樣的，這個(gè)時(shí)候我們就需要根據(jù)數(shù)據(jù)科學(xué)家提供的業(yè)務(wù)需求，IT人員去做一個(gè)分析，最后設(shè)計(jì)出來(lái)一個(gè)非常完善的存儲(chǔ)模型，讓數(shù)據(jù)科學(xué)家或者前端的開發(fā)人員都能非常快速的存取數(shù)據(jù)，然后使用數(shù)據(jù)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">第三個(gè)職業(yè)就是<strong>運(yùn)維人員</strong>，這也是一個(gè)大數(shù)據(jù)生態(tài)系統(tǒng)里邊非常特殊的職位，因?yàn)閯偛盼覀冋f(shuō)過(guò)了，大數(shù)據(jù)生態(tài)系統(tǒng)其實(shí)是一個(gè)非常紛繁復(fù)雜的生態(tài)系統(tǒng)，它的更新?lián)Q代非常的快，同時(shí)它的每一個(gè)服務(wù)都不是一個(gè)完美的服務(wù)，它都是貼合不同的業(yè)務(wù)需求，所有的服務(wù)都是有他的好處和壞處，沒(méi)有一項(xiàng)是完美的，所以運(yùn)維人員就是為了解決這樣一個(gè)問(wèn)題而產(chǎn)生的。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">他需要具備的能力其實(shí)就是對(duì)于所有的服務(wù)做一個(gè)統(tǒng)籌，一旦出現(xiàn)集群掛掉了的情況，比如說(shuō)一個(gè)服務(wù)停了，他就要去追蹤這個(gè)問(wèn)題究竟在哪，并且去分析這個(gè)問(wèn)題要怎么解決，然后解決的時(shí)候就可能牽扯到有關(guān)資源的協(xié)調(diào)能力，比如說(shuō)給服務(wù)分配多少，才能讓他們完整的運(yùn)轉(zhuǎn)起來(lái)。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong><span class="h1">如何提升在這個(gè)行業(yè)的競(jìng)爭(zhēng)力</span></strong></li> </ul> <p>&nbsp;</p> <p style="text-align: justify;">針對(duì)于以上的這些行業(yè)和職位，我們?cè)鯓尤ヌ嵘约旱哪芰?，第一個(gè)就是<strong>學(xué)習(xí)的能力</strong>。在這一年的工作中，其實(shí)我感觸最深的就是因?yàn)榇髷?shù)據(jù)它的生態(tài)系統(tǒng)更新迭代特別的快，所以說(shuō)你經(jīng)常要閱讀一些技術(shù)文獻(xiàn)，然后找到它跟上一個(gè)版本的區(qū)別，或者說(shuō)你完全入手一個(gè)新的服務(wù)的時(shí)候，學(xué)習(xí)這個(gè)服務(wù)到底是用來(lái)解決什么。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">這個(gè)能力其實(shí)在大學(xué)的時(shí)候是很好去培養(yǎng)的，因?yàn)榇髮W(xué)的老師也經(jīng)常會(huì)讓你們做一些文獻(xiàn)調(diào)研，或者跟技術(shù)有關(guān)的，就會(huì)做一些技術(shù)的官方文檔的閱讀，然后會(huì)讓你們?nèi)懸粋€(gè)報(bào)告。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">那我就建議大家在產(chǎn)出調(diào)研報(bào)告的時(shí)候，幾個(gè)問(wèn)題必須要搞清楚，這個(gè)服務(wù)產(chǎn)生的背景是什么？然后他能解決什么問(wèn)題，他要怎么用，以及它用完之后能夠產(chǎn)生的效果是什么？解決這四個(gè)問(wèn)題，能夠在你讀技術(shù)官方文檔的時(shí)候產(chǎn)生一個(gè)思維導(dǎo)圖，大家應(yīng)該都知道思維導(dǎo)圖，不管是哪一個(gè)氣泡，它其實(shí)都是跟另外一個(gè)大氣泡或者小氣泡連接起來(lái)的，這樣就保證了找出一個(gè)知識(shí)點(diǎn)，其他所有的知識(shí)點(diǎn)都能被串起來(lái)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">這個(gè)能力對(duì)于我們大數(shù)據(jù)行業(yè)是必須的，因?yàn)樵絹?lái)越多的服務(wù)擠到你的腦子里，假如你沒(méi)有一個(gè)體系化的學(xué)習(xí)，就會(huì)成為一盤散沙。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">第二個(gè)能力就是<strong>數(shù)據(jù)分析的能力</strong>，大家可能都會(huì)問(wèn)我要去做數(shù)據(jù)分析或者機(jī)器學(xué)習(xí)或者一些Python算法的學(xué)習(xí)，我應(yīng)該怎么樣去提高？</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">這里我就建議大家去<strong>多參加一些競(jìng)賽</strong>，因?yàn)閿?shù)據(jù)分析就是以解決問(wèn)題為導(dǎo)向的，所以就推薦大家去kaggle上面去看一些，先從簡(jiǎn)單的開始看起，循序漸進(jìn)，然后去找一些競(jìng)賽做。剛開始做競(jìng)賽的時(shí)候，你不要想著把它做到完美再提交，其實(shí)這樣對(duì)于你的自信心是一個(gè)非常大的打擊。主要是要去看它提出來(lái)的問(wèn)題，比如說(shuō)非常經(jīng)典的非常簡(jiǎn)單的泰坦尼克號(hào)，生存的人員的背景和它生存率的一個(gè)關(guān)系，這就非常簡(jiǎn)單，其實(shí)用python非?？炀涂梢詫懗鰜?lái)，或者當(dāng)你面對(duì)這個(gè)問(wèn)題的時(shí)候，你就要明白讓你實(shí)現(xiàn)的功能是什么，然后你快速的把功能實(shí)現(xiàn)之后，你就提交，提交之后它會(huì)給你一個(gè)評(píng)分，你根據(jù)你的評(píng)分和排名，可以再去優(yōu)化你的算法，然后逐步去提高排名，在這樣一個(gè)過(guò)程中，其實(shí)對(duì)你的積極性打擊是非常小的。然后你可以在這個(gè)過(guò)程中去學(xué)到非常多以問(wèn)題為導(dǎo)向的算法編寫，這樣也不會(huì)無(wú)趣。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">最后一個(gè)也是非常重要的，就是<strong>英語(yǔ)水平的提升</strong>。因?yàn)槲夜ぷ鞯倪@一年，做了大量的國(guó)外的一些官網(wǎng)的調(diào)研，他們有很多的產(chǎn)品做得非常好，基本上就是超出我們的水平大概五年、十年左右，然后提出了很多新的概念，但是假如我的英語(yǔ)水平不夠的話，我對(duì)于他們要表達(dá)的內(nèi)容其實(shí)是完全不懂的，所以我就希望大家能夠把英語(yǔ)作為一個(gè)溝通工具去學(xué)習(xí)，你能夠了解這個(gè)工具背后要表達(dá)的內(nèi)容是什么。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">當(dāng)然，之前也說(shuō)到我們<strong>這個(gè)行業(yè)需要不斷的學(xué)習(xí)</strong>，對(duì)于我來(lái)講，港校一年制的進(jìn)修也是非常合適的，接下來(lái)我會(huì)給大家分享一些港新計(jì)算機(jī)及大數(shù)據(jù)相關(guān)專業(yè)申請(qǐng)的建議。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong><span class="h1">申請(qǐng)建議</span></strong></li> </ul> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">我其實(shí)是從大四開始就決定要出去讀書，當(dāng)時(shí)就已經(jīng)和指南者的老師一起溝通定過(guò)專業(yè)了，但當(dāng)時(shí)我對(duì)于自己的興趣以及這個(gè)行業(yè)其實(shí)都不是特別的了解，所以一咬牙就決定先工作一年，就沒(méi)有提交申請(qǐng)。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">通過(guò)一年的工作我也是改變了自己的申請(qǐng)方向，因?yàn)槲伊私饬俗约旱呐d趣所在和能力所在，然后我就選擇了<strong>數(shù)據(jù)科學(xué)、信息科學(xué)以及大數(shù)據(jù)科技</strong>，在指南者老師的幫助下完成了各項(xiàng)申請(qǐng)材料，最后也拿到了我最想去的科大的offer。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong>選校心得</strong></li> </ul> <p>&nbsp;</p> <p style="text-align: justify;">對(duì)于港校選校的心得，從宏觀上來(lái)講，其實(shí)就是給大家這三個(gè)建議，第一個(gè)就是<strong>找到自己興趣所在</strong>，這個(gè)其實(shí)是一個(gè)非常感性的點(diǎn)。大家其實(shí)可以想一想，你在做什么的時(shí)候，是一邊罵罵咧咧，但是手卻停不下來(lái)，就是要把它做完，做完又能獲得滿滿的成就感，這就是你感興趣的地方。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">第二個(gè)就是<strong>找到自己的能力所在</strong>，這一塊就不是那么感性了，是可以量化的。你可以回顧你做的比較大型的一些項(xiàng)目以及取得的一些成就，去分析這里邊你起到的作用是什么，然后你是怎么樣在這個(gè)項(xiàng)目或者經(jīng)歷中去體現(xiàn)你的能力的，這個(gè)是非常好量化的，你就可以找到你自己的能力所在。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">然后<strong>結(jié)合你的興趣所在和你的能力所在</strong>，用這兩個(gè)去匹配你所了解的申請(qǐng)專業(yè)。因?yàn)槊恳粋€(gè)申請(qǐng)專業(yè)它都會(huì)有一個(gè)對(duì)于他所需要的學(xué)生的一個(gè)描述，以及他的課程描述，你在看的過(guò)程中，其實(shí)就可以去匹配前兩個(gè)要素，然后去決定你到底要不要讀這個(gè)專業(yè)，要不要申請(qǐng)這個(gè)專業(yè)。</p> <p style="text-align: justify;">&nbsp;</p> <ul> <li style="text-align: justify;"><strong>選擇港科大的理由</strong></li> </ul> <p>&nbsp;</p> <p><img style="display: block; margin-left: auto; margin-right: auto;" src="https://info.compassedu.hk/sucai/content/20210512/1620783030637.jpg" width="722" height="368" /></p> <p>&nbsp;</p> <p style="text-align: justify;">根據(jù)多種分析之后，我主要是因?yàn)檫@兩點(diǎn)原因選擇了<strong>港科</strong>，第一個(gè)就是我在看他課程設(shè)置的時(shí)候，結(jié)合了我的工作經(jīng)驗(yàn)，我感覺(jué)他的是<strong>課程設(shè)置更偏技術(shù)一點(diǎn)</strong>，而且跟大數(shù)據(jù)的生態(tài)系統(tǒng)貼合的也比較緊密。第二點(diǎn)就是我<strong>比較喜歡有壓力的學(xué)習(xí)氛圍</strong>。所以當(dāng)時(shí)港大雖然后續(xù)給了面試的通知，但是我沒(méi)有去，因?yàn)槲易钚膬x的就是港科大。</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;">總之，大家在確定了自己的喜好和目標(biāo)之后，一定要堅(jiān)定不動(dòng)搖地去努力追求，不斷提升自我。預(yù)祝大家都能實(shí)現(xiàn)自己的心愿！</p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>微信又又又改版啦~</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>設(shè)置指南者留學(xué)為星標(biāo)或置頂</strong></p> <p style="text-align: justify;">&nbsp;</p> <p style="text-align: justify;"><strong>留學(xué)資訊、干貨分享不錯(cuò)過(guò)哦~</strong></p> <p style="text-align: justify;">&nbsp;</p> <p><img style="display: block; margin-left: auto; margin-right: auto;" src="https://info.compassedu.hk/sucai/content/20210512/1620783070367.gif" width="348" height="328" /></p>