架構師腳本編程

❶ 大數據架構師的基本職責

大數據架構師需要參與規劃從數據源到數據應用的整體流程，並參與相關產品的決策。下面是我為您精心整理的大數據架構師的基本職責。

大數據架構師的基本職責1

職責：

1.負責整個大數據平台架構的設計和構建;

2.負責構建大數據平台的數據交換、任務調度等通用平台;

3.制定開發、測試、實施、維護的標准和規范，指導和培訓工程師，不斷提升團隊能力。

4.參與系統需求分析、架構設計、技術選型、應用設計與開發以及測試與部署，負責編寫核心部分代碼。

5.持續挑戰新的技術方向，攻克大數據量、高並發、高可用、可擴展等技術難點。

任職要求：

1.3年以上大數據架構經驗，豐富的數據倉庫、數據挖掘、機器學習項目經驗

2.大規模數據處理的架構和設計實戰經驗

3.精通Spark、MR，熟練HDFS、Yarn、Hbase、Hive、MongoDB，熟悉Kafka、Redis、Storm、Mahout、Flume、ElasticSearch、GraphDB(NEO4J或其他)等，並具有豐富的大型數據平台工程經驗

4.深刻理解大數據處理(流計算，分布式計算，分布式文件系統，分布式存儲等)相關技術和實現方法

5.熟悉主數據、元數據、數據質量等企業數據管理相關的體系和方法，熟練linux/Unix平台上的開發環境

6.本科或以上學歷，計算機軟體或相關專業，豐富的java開發經驗和互聯網襪沒背景優先。

7.具有比較強的問題分析和處理能力，有比較優秀的動手能力，熱衷技術，精益求精

大數據架構師的基本職責2

職責：

1. 深刻理解政府行業業務模式，構建政府行業的數據模型，制定公司大數據技術發展路線;

2. 對接業務研究和技術部門，主動搜集和轉化需求，組織數據中心業務開發，進行數據相關產品需求分析和設計;

3. 搭建數據倉庫，研發資料庫管理系統，搜集、提取、處理業務積累的海量數據，開展數據分析和挖掘;

告迅納4. 根據公司戰略和發展需要，規劃數據中心重點工作和任務;落實部門人員、事務管理，開展跨部門、跨地區協作，協助對外交流與合作。

職位要求：

1. 5年以上相關工作經驗，有團隊管理和項目管理經驗者優先;

2.了解政府運作機制，掌握財政行業知識，有電子政務行業經驗者優先;

3. 熟練掌握使用Java或python,精通資料庫查詢語言如sql，Oracle等,在機器學習模型和演算法方向有應用經驗者優先;

4. 具備數據中心產品策劃整體思維，有大數據處理、分析、挖掘經驗者昌爛優先;

5. 邏輯思維嚴密，具備業務抽象、分解和標准化的能力，口頭和書面表達優秀;

6. 有較強的大局意識和良好的團隊合作意識，富有領導力，具備優秀的人際交往和溝通能力。

大數據架構師的基本職責3

職責:

1、從事電信行業大數據項目相關業務調研、產品標准建設、核心模型設計和優化、系統測試等相關工作

2、與數據專業委員會一起研究數據建模方案和建模工具，負責產品線產品的數據架構、數據模型設計

3、參與研究資料庫之間的數據轉換方式，參與項目中的數據移植工作，收集在項目中的數據移植經驗，優化產品的數據模型

4、負責培訓本部門隊伍的數據模型基礎理論工作，建立數據模型團隊

崗位要求：

1、統招本科學歷，3年以上主流數據上(DB2、Oracle、SQLServer、Mysql等)ETL設計、開發經驗，具備大型數據倉庫邏輯模型和物理模型設計經驗，精通SQL，有較好的SQL性能調優經驗;

2、擁有Python，R等數學建模工具的使用經驗，並具備一定的數據處理和建模經驗，可以輸出相應的模型分析結果、模型比較、模型效率以及對模型的理論和判斷依據方法並對其進行完整的解釋和說明;

3、熟悉統計學基本原理，做過實戰的數據建模項目;

4、有分布式數據倉庫建設相關經驗者優先，具備電信行業數據倉庫建設相關經驗者優先;

大數據架構師的基本職責4

職責：

1、負責大數據平台的架構設計、核心代碼開發等任務;根據項目要求編寫相關技術文檔;

2、負責大數據平台的架構評審，代碼評審，上線評審;參與數據應用需求、設計、審核和評審;

3、負責核心模塊研發，負責大數據平台的搭建，完成系統調試、集成與實施;

4、負責建立和維護大數據平台技術標准規范，指導開發人員編寫代碼;

任職要求：

1、本科及以上計算機相關專業畢業;

2、精通離線和實時數據處理流程，掌握離線數據處理框架hive、impala、spark-sql等，掌握實時數據處理常用技術工具，包括Storm、SparkStreaming等;

3、熟悉大數據技術生態圈，精通大數據技術架構，有大數據平台構建經驗;

4、掌握常見數據流接入工具，包括Flume、kafka等;

5、熟練掌握基本的Linux操作系統和某種腳本語言編程(如Shell等);

6、掌握一種或以上實時處理語言，如JAVA、SCALA、PYTHON等，有SCALA經驗者優先;

7、有實際大規模數據(TB級以上)處理經驗優先;

大數據架構師的基本職責5

職責：

1、負責公司的大數據處理框架的研發設計工作，梳理可實現方案和技術規范;

2、開發、完善公司大數據平台;參與公司離線、實時大數據處理系統的設計、開發、測試及多個業務模塊的自動化集成;

3、負責業務平台數據統計分析模塊的設計與規劃;

4、負責公司產品研發過程中的數據及存儲設計;

5、帶領和培養團隊完成組織分解的目標;

任職要求：

1、統招本科及以上學歷，計算機、軟體工程相關專業，至少8年以上工作經驗，5年以上大數據開發經驗;

2、熟悉Java、Hadoop、HDFS、Hive、HBase、Spark、Storm、Flume等相關技術的基礎架構

3、熟悉數據倉庫，數據演算法，分布式計算技術理論，具有大數據整體系統架構設計經驗;

4、熟悉Linux系統，熟練使用shell/perl/python腳本處理問題;

5、對深度學習框架(Tensorflow)和機器學習(svm 隨機深林貝葉斯等)有一定了解的優先;

6、能夠組織項目開發組協同工作，包括團隊溝通、計劃、開發環境管理等

❷ 阿里巴巴資深java工程師什麼水平

你好，如阿里網路騰訊等互聯網大廠的工程師，資深（架構師水平）工程師是非常有實力的。

以阿里為例：

1、阿里工程師崗位職級

阿里巴巴集團採用雙序列職業發展體系：

一套體系是專家路線【P序列=技術崗】，程序員、工程師，某一個專業領域的人才，一共分為14級，從P1到P14，目前校招最低從P4開始。

一套體系是M路線，即管理者路線【M序列=管理崗】，從M1到M10。

考核因素是上一年的績效分數+直屬領導的打分+晉升委員會打分，這里的委員會一般由直屬領導+合作方的高管+懂業務的HRG組成。HRG：HR多面手，base在業務下面，在阿里話語權比別的互聯網HR高。

晉升標准：績效滿足3.75、主管提名、技術答辯通過。

P8架構師作為阿里「IT架構靈魂人物」的角色，他們不僅做著架構師的本職工作，還同時做程序開發，寫核心代碼的工作。另外，架構師依舊是技術高手，編程能力依然是一流的。

但根據當前的市場需求，互聯網大廠們對於普通Java開發人才需求逐年銳減，而對互聯網架構師人才的需求招聘量已經上升到50%，因此薪資更是不可同日而語。

對於想學習互聯網架構師的同學來說，北大青鳥、課工場等優秀品牌都是不錯的選擇。課程根據招聘需求制定，包含全部分布式微服務技術，對標阿里P8級別架構師。

希望我的回答對你有所幫助！

❸ mcu架構師學什麼專業

計算機、電子或自動化相關專業。
mcu架構師要求：精通C語言、C++編程，熟悉數據結構和演算法，了解典型的設計首粗模式，具有良好的代碼習慣，熟悉汽車行業相關代碼規范，具有良好彎芹茄的的英語讀寫能力，能閱讀專埋察業英文資料，以及寫英文注釋，熟悉python、shell等腳本語言。
工作內容：負責MCU嵌入式底層軟體平台開發和產品項目的技術管理，技術路線規劃，負責MCU軟體開發流程制定、執行及監督，根據產品需求選擇MCU基礎軟體供應商，設計軟體架構。

❹ 看完Linux運維發展路線想下自己想做技術還是走管理

Linux是一套免費使用和自由傳播的類Unix操作系統，是一個基於POSIX和UNIX的多用戶、多任務、支持多線程和多CPU的操作擾局系統。Linux繼承了Unix以網路為核心的設計思想，是一個性能穩定的多用戶網路操作系統。

Linux發行版：

Red Hat，CentOS，Ubuntu，Debian GNU/Linux，Fedora，Gentoo，MandrivaLinux，PCLinuxOS，openSUSE，ArchLinux，Puppylinux等

從事Linux運維行業，必須要了解和掌握Linux運維的各項技能，這是一個非常龐大的技術領域，下面分成幾個層次來介紹下這一塊內容。

Linux命令有許多強大的功能：從簡單的磁碟操作、文件存取到復雜的伺服器管理運行。下面把其中比較重要的和使用頻率最多的命令，按照它們在系統中的作用分成幾個部分介紹給大家，通過這些基礎命令的學習進一步理解Linux系統：

學習shell腳本

Linux中山李差的shell是一個很好用的工具。通過shell編寫腳本文件，實現工作的自動化，來減輕在Linux系統上面所做的重復勞動，這樣部署伺服器時，能夠減少時間，高效的工作。同樣通過shell可以減少伺服器資源的浪費，把可使用的資源最大化的給應用軟體，實現資源最優的分配。

中級進階需要在充分了解linux原理和基礎知識之後，對上層的應用和服務進行深入學習，其中說到服務肯定涉及到網路的相關知識，這是需要花時間學習的。

學到這里，掌握的基本技能，已經夠用了，已經能做一些基礎的運維工作和簡單維護了。

能掌握到這里，基本能處理搞定很多工作了，可以考慮去面試高級運維工程師。

需要學習的是Linux平台的C/C++開發，同時還有Bash腳本編程，如果你對Java興趣很深還有Java。 這里要做的就是積累經驗，在Linux平台的開發經驗。

1、 大數據方向（需要對hadoop、storm等常見開源大數據系統需要深入了解）

2、 雲計算方向（主要是openstack這套東西，像一些kvm、docker也是需要掌握的逗皮）

3、 運維開發（主要是python運維開發）

4、 自動化運維（在之前自動化基礎上做深入）

5、 運維架構師（主要需要廣度）

❺ 網路專業學習linux最主要的學習哪幾個部分

對於Linux的學習，可以分為四個階段，Linux初級入門階段→Linux中級進階→Linux高級進階→Linux資深方向細化階段
第一階段：初級階段
初級階段需要把linux學習路線搞清楚，任何學習都是循序漸進的，所以學linux也是需要有一定的路線。
1. Linux基礎知識、基本命令；
2. Linux用戶及許可權基礎；
3. Linux系統進程管理進階；
4. linux高效文本、文件處理命令；
5. shell腳本入門
第二階段:中級進階
中級進階需要在充分了解linux原理和基礎知識之後，對上層的應用和服務進行深入學習，其中說到服務肯定涉及到網路的相關知識，是需要花時間學習的。
1. TCP/IP網路基礎；
2. Linux企業常用服務；
3. Linux企業級安全原理和虧消防範技巧；
4. 加密/解密原理及數據安全、系統服務訪問控制及服務安全基礎；
5. iptables安全策略構建；
6. shell腳本進階；
7. MySQL應用原理及管理入門
第三階段：Linux高級進階
1. http服務代理緩存加速；
2. 企業級負載集群；耐空改
3. 企業級高可用集群；
4. 運維監控zabbix詳昌判解；
5. 運維自動化學習；
第四階段：Linux資深方向細化
1. 大數據方向；
2. 雲計算方向；
3. 運維開發；
4. 自動化運維；
5. 運維架構師

❻ 大數據測試需要學什麼

大數據專業是學什麼
大數據相關專業主要有三個：數據科學與大數據技術專業；大數據管理與應用專業；大數據技術與應用專業。前兩個主要是本科院校漏虧開設，最後一個是高職高專開設。
需學習數據採集、分析、處理軟體，學習數學建模軟體及計算機編程語言等，知識結構是二專多能復合的跨界人才(有專業知識、有數據思維)。
基礎課程：數學分析、高等代數、普通物理數學與信息科學概論、數據結構、數據科學導論、程序設計導論、程序設計實踐等。
必修課：離散數學、概率與統計、返運神演算法分析與設計、數據計算智能、資料庫系統概論、計算機系統基礎、並行體系結構與編程、非結構化大數據分析等。
選修課：數據科學演算法導論、數據科學專題、數據科學實踐、互聯網實用開發技術、抽樣技術、統計學習、回歸分析、隨機過程等。
2大數據專業發展方向
1、大數據開發方向; 所涉及悄輪的職業崗位為：大數據工程師、大數據維護工程師、大數據研發工程師、大數據架構師等；
2、數據挖掘、數據分析和機器學習方向，所涉及的職業崗位為：大數據分析師、大數據高級工程師、大數據分析師專家、大數據挖掘師、大數據演算法師等；
3、大數據運維和雲計算方向；對應崗位：大數據運維工程師。