1樓：匿名使用者
hadoop包括hdfs、mapreduce、yarn、核心元件。hdfs用於儲存，mapreduce用於計算,yarn用於資源管理。
spark包括spark sql、saprk mllib、spark streaming、spark 圖計算。saprk的這些元件都是進行計算的。spark sql離線計算，spark streaming 流計算，spark mllib機器學習。
mpi高效能運算。
hahoop只有mapreduce是和spark一樣用來計算，要比較的話，只能比較mapreduce與spark區別。mapreduce疊代計算中間結果放在磁碟，適合大資料離線計算。spark技術先進，統一使用rdd,結果可放在記憶體，pipeline，計算速度比mapreduce快。
建議大資料儲存使用hadoop的hdfs,資源管理用hadoop的yarn,計算使用spark或mpi
2樓：愛可生雲資料庫
spark已經取代hadoop成為最活躍的開源大資料專案，但是，在選擇大資料框架時，企業不能因此就厚此薄彼
近日，著名大資料專家bernard marr在一篇文章中分析了spark和 hadoop 的異同
hadoop和spark均是大資料框架，都提供了一些執行常見大資料任務的工具，但確切地說，它們所執行的任務並不相同，彼此也並不排斥
雖然在特定的情況下，spark據稱要比hadoop快100倍，但它本身沒有一個分散式儲存系統
而分散式儲存是如今許多大資料專案的基礎，它可以將 pb 級的資料集儲存在幾乎無限數量的普通計算機的硬碟上，並提供了良好的可擴充套件性，只需要隨著資料集的增大增加硬碟
因此，spark需要一個第三方的分散式儲存，也正是因為這個原因，許多大資料專案都將spark安裝在hadoop之上，這樣，spark的高階分析應用程式就可以使用儲存在hdfs中的資料了
與hadoop相比，spark真正的優勢在於速度，spark的大部分操作都是在記憶體中，而hadoop的mapreduce系統會在每次操作之後將所有資料寫回到物理儲存介質上，這是為了確保在出現問題時能夠完全恢復，但spark的彈性分散式資料儲存也能實現這一點
另外，在高階資料處理（如實時流處理、機器學習）方面，spark的功能要勝過hadoop
在bernard看來，這一點連同其速度優勢是spark越來越受歡迎的真正原因
實時處理意味著可以在資料捕獲的瞬間將其提交給分析型應用程式，並立即獲得反饋
在各種各樣的大資料應用程式中，這種處理的用途越來越多，比如，零售商使用的推薦引擎、製造業中的工業機械效能監控
spark平臺的速度和流資料處理能力也非常適合機器學習演算法，這類演算法可以自我學習和改進，直到找到問題的理想解決方案
這種技術是最先進製造系統（如**零件何時損壞）和無人駕駛汽車的核心
spark有自己的機器學習庫mlib，而hadoop系統則需要藉助第三方機器學習庫，如apache mahout
實際上，雖然spark和hadoop存在一些功能上的重疊，但它們都不是商業產品，並不存在真正的競爭關係，而通過為這類免費系統提供技術支援贏利的公司往往同時提供兩種服務
例如，cloudera 就既提供 spark服務也提供 hadoop服務，並會根據客戶的需要提供最合適的建議
bernard認為，雖然spark發展迅速，但它尚處於起步階段，安全和技術支援基礎設施方還不發達，在他看來，spark在開源社群活躍度的上升，表明企業使用者正在尋找已儲存資料的創新用法
大學理工類都有什麼專業 10
3樓：house蜜糖棗棗
理工類專業：
數學與應用數學、資訊與計算科學、
物理學、應用化學、生物技術、 地質學、 大氣科學類、理論與應用力學、電子資訊科學與技術、環境科學、採礦工程、石油工程、冶金工程、機械設計製造及其自動化、建築學等。
1、建築學專業
建築學是一門以學習如何設計建築為主，同時學習相關基礎技術課程的學科。主要學習的內容是通過對一塊空白場地的分析，同時依據其建築對房間功能的要求，建築的型別，建築建造所用的技術及材料等，對建築物從平面，外觀立面及其內外部空間進行從無到有的設計。
2、石油工程專業
石油工程專業培養具備工程基礎理論和石油工程專業知識，能在石油工程領域從事油氣鑽井工程、採油工程、油藏工程、儲層評價等方面的工程設計、工程施工與管理、應用研究與科技開發等方面工作，獲得石油工程師基本訓練的高階專門技術人才。
3、環境科學專業
環境科學專業培養具備環境科學的基本理論、基本知識和基本技能。該專業學生主要學習環境科學方面的基本理論、基本知識，受到應用基礎研究、應用研究和環境管理的基本訓練，具有較好的科學素養及一定的教學、研究、開發和管理能力，掌握環境監測與環境質量評價的方法以及進行環境規劃與管理的基本技能。
4、資訊與計算科學專業
資訊與計算科學專業原名」計算數學」，2023年更名為「計算數學及其應用軟體」，2023年教育部將其更名為「資訊與計算科學」，是以資訊領域為背景，數學與資訊，計算機管理相結合的數學類專業。
5、物理學專業
物理學專業培養掌握物理學的基本理論與方法，具有良好的數學基礎和實驗技能，能在物理學或相關的科學技術領域中從事科研、教學、技術和相關的管理工作的高階專門人才。
4樓：boy我最靚
大學理工類有很多種專業，比如理學有物理，數學，化學生物等等。公學的科目二就更多了，比如電氣工程，汽車工程這類的工程都屬於工業工程，你可以在作業選擇上自己選擇。
5樓：匿名使用者
理工科專業分為理、工、農、醫四個學科門類，各學科
專業設定如下：
一、理學
1． 數學類 ：數學與應用數學；資訊與計算科學
2． 物理學類：物理學；應用物理學
3．化學：化學；應用化學
4． 生物科學類：生物科學；生物技術
5．天文學類：天文學
6． 地質學類：地質學；地球化學
7． 地理科學類：地理科學；資源環境與城鄉規劃管理；地理資訊系統
8． 地球物理學類：地球物理學
9． 大氣科學類：大氣科學；應用氣象學
10． 海洋科學類：海洋科學；海洋技術. 海洋學
11． 力學類：理論與應用力學
12． 電子資訊科學類：電子資訊科學與技術；微電子學；光資訊科學與技術
13． 材料科學類：材料物理；材料化學
14． 環境科學類：環境科學；生態學
15． 心理學類：心理學；應用心理學. 心理諮詢
16． 統計學類：統計學. 電算化會計與統計、統計與會計等
二、工學
1． 地礦類：採礦工程；石油工程；礦物加工工程；勘查技術與工程；資源勘查工程.**地質勘察與管理
2． 材料類：冶金工程；金屬材料工程；無機非金屬材料工程；高分子材料與工程.化學裝潢材料及應用、寶石學
3． 機械類：機械設計製造及其自動化；材料成型及控制工程；工業設計；過程裝備與控制工程,化工裝置與機械、飛機及發動機維修
4．儀器儀表類：測控技術與儀器.自動化儀表及應用、醫用電子儀器、測繪儀器
5． 能源動力類：核工程與核技術. 熱能與動力工程、製冷低溫技術、採暖與通風
6． 電氣資訊類：電氣工程及其自動化；自動化；電子資訊工程；通訊工程；電腦科學與技術；. 軟體工程.
7． 土建類：建築學；城市規劃；土木工程；建築環境與裝置工程；給水排水工程. 景觀設計. 工程造價. 工程管理.
8． 水利類：水利水電工程；水文與水資源工程；港口航道與海岸工程
9． 測繪類：測繪工程. 測量工程、環境治理工程.
10． 環境與安全類：環境工程；安全工程. 室內環境控制工程
11． 化工與製藥類：化學工程與工藝；製藥工程. 精細化工
12． 交通運輸類：交通運輸；交通工程；車輛工程. 油氣儲運工程；航海工程；航海技術；輪機工程. 鐵道運輸
13． 海洋工程類：船舶與海洋工程
14． 輕工紡織食品類：食品科學與工程；輕化工程；包裝工程；印刷工程；紡織工程；服裝設計與工程
15． 航空航天類：飛行器設計與工程；飛行器動力工程；飛行器製造工程；飛行器環境與生命保障工程. 航天測控工程、空間工程
16．**類：**系統與發射工程；探測制導與控制技術；彈藥工程與**技術；特種能源工程與煙火技術；地面**機動工程；資訊對抗技術. 、軍械儲存與管理
17． 工程力學類：工程力學. 工程結構分析
18． 生物工程類：生物工程.生物醫學工程
19． 農業工程類：農業機械化及其自動化；農業電氣化與自動化；農業建築環境與能源工程；農業水利工程
20． 林業工程類：森林工程；木材科學與工程；林產化工.
21． 公安技術類：刑事科學技術；消防工程. 刑偵技術等
22、公安學類 (包括偵查學、刑事偵察、經濟犯罪偵察等)
23. 實用技術類 (包括計算機網路工程與管理、建築裝飾設計與工程、資訊與多**技術等)
三、農學
1． 植物生產類：農學；園藝；植物保護；茶學,花卉、種植養殖
2． 草業科學類：草業科學,商品花卉、園林花卉技術、種子種苗等
3． 森林資源類：林學；森林資源保護與遊憩；野生動物與自然保護區管理
4． 環境生態類：園林；水土保持與荒漠化防治；農業資源與環境,風景園林、環境保護等
5． 動物生產類：動物科學：蠶學,動物科學、經濟動物、養殖技術等
6． 動物醫學類：動物醫學;包括動物衛生檢驗、畜牧獸醫、動植物檢疫等
7． 水產類：水產養殖學；海洋漁業科學與技術,名特水產養殖、資源與漁政管理等
8、農業經濟管理類 (包括農業經濟管理、林業經濟管理、鄉鎮建設與管理)
四、醫學
1． 基礎醫學類：基礎醫學
2． 預防醫學類：預防醫學, 衛生檢驗、婦幼衛生等
3． 臨床醫學與醫學技術類：臨床醫學；麻醉學；醫學影像學；美容醫學、醫學檢驗、高階助產等
4． 口腔醫學類：口腔醫學, 口腔修復工藝學
5． 中醫學類：中醫學；鍼灸推拿學；蒙醫學；藏醫學
6． 法醫學類：法醫學
7． 護理學類：護理學, 高階護理、中西藥結合護理
8． 藥學類：藥學；中藥學；藥物製劑
Hadoop工作原理，請簡要描述Hadoop計算框架MapReduce的工作原理
讀取檔案 map生成對，reduce接受到相同 key的 value的iterator，進行處理，輸出 請簡要描述hadoop計算框架mapreduce的工作原理 分為2個步驟，map和reduce，map專門負責對每個資料獨立地同時地打標籤，框架會對相同標籤的資料分成一組，reduce對分好的那些...
請簡要的介紹一下硬碟的各種技術指標
主軸轉速 轉速是影響硬碟效能最重要的因素之一，目前市場上流行的是5400rpm 每分鐘轉數 和7200rpm的硬碟。現在7200rpm的高速硬碟技術已經非常成熟，考慮到硬碟在整個系統中速度是比較落後的，而高低速硬碟效能差距比較明顯，因此在預算允許的情況下，建議選擇高速硬碟。平均尋道時間 平均尋道時間...
簡要得介紹一下麥克斯韋，簡要的介紹一下歐洲史
權焮榮 麥克斯韋是19世紀偉大的英國物理學家 數學家。1831年11月13日生於蘇格蘭的愛丁堡，自幼聰穎，父親是個知識淵博的律師，使麥克斯韋從小受到良好的教育。10歲時進入愛丁堡中學學習14歲就在愛丁堡皇家學會會刊上發表了一篇關於二次曲線作圖問題的 已顯露出出眾的才華。1847年進入愛丁堡大學學習數...