使用 Linux 和 Hadoop 進行分散式運算

Hadoop 由 Apache Software Foundation 公司于 2005 年秋天作為 Lucene 的子專案 Nutch 的一部分正式引入。 它受到最先由 Google Lab 開發的 MapReduce 和 Google File System 的啟發。 2006 年 3 月份,MapReduce 和 Nutch Distributed File System (NDFS) 分...

雲計算實例分析:IBM藍雲計算平臺

IBM在2007年11月15日推出了藍雲計算平臺,為客戶帶來即買即用的雲計算平臺。 它包括一系列的雲計算產品,使得計算不僅僅局限在本地機器或遠端伺服器農場(即伺服器集群),通過架構一個分散式、可全球訪問的資源結構,使得資料中心在類似于互聯網的環境下運行計算。 通過IBM的技術白皮書,我們可以一窺藍雲計算平臺的內部構造。 「藍雲」建立在IBM大規模計算領域的專業技術基礎上,基於由IBM軟體、系統技...

微軟雲計算Massive Data處理新語言SCOPE

Massive Data處理一直是雲計算中很重要的一個環節.目前像Google,Yahoo在相關方面都有自己專有的技術.例如Google的基於MapReduce的Sawzall語言.和Yahoo基於Hadoop的Pig。 在今年的VLDB大會(VLDB是在資料庫領域非常重要的技術研討大會)上,微軟介紹自己在Massive Data領域研究的新成果」SCOPE」語言.據微軟的一個白皮書顯示,通...

hadoop集群在linux下的安裝

NOTE:因為hadoop遠端調用用的是RPC,所以linux系統必須關閉防火牆service iptables stop 1.vi /etc/inittabid:5:initdefault:改為id:3:initdefault :即為字元型啟動 2.ip configuration:/etc/sysconfig/network-scripts/ 3.vi /etc/hosts,add hos...

熱點:安全問題是否能將DNS推入雲服務

VeriSign公司、Afilias公司以及其他供應商正在努力研究基於雲計算的DNS(功能變數名稱伺服器)服務。 隨著數位簽章和公共金鑰加密的加入,互聯網網域名稱系統的安全勢必將得到改善。 但是網域名稱系統安全擴展協定(DNSSEC)的部署是否會促使更多的企業外包他們的DNS運營呢? 這是服務供應商(包括VeriSign和Afilias)瞄準的一次機會,他們計畫在未來幾周內推出新型管理DNS和相關的安全服務。 ...

Azure開發者任務之四:在Azure SDK 1.3中掛載調試器的錯誤

Windows Azure開發者任務之四:在Windows Azure SDK 1.3中掛載調試器的錯誤 我安裝了Windows Azure SDK的1.3版本。 我試著創建了一個Azure的「Hello World」應用程式。 我按了「F5」,然後我得到了下面這個錯誤: 我嘗試了「Ctrl+F5」;不使用調試器來運行就不會得到上面這個異常,但是在瀏覽器中,我得到了服務不可用的錯誤。 我...

應用案例:雲計算如何改變全球最老的報紙

筆者最近在倫敦舉行的雲計算世界論壇會議上發表了講話。 從筆者的觀點看,這是一個理想的會議:規模大到足以擁有大量有興趣的廠商和參與者,規模小到足以支援有品質的會談。 如果你曾參觀過任何美國的大型雲計算展覽,你就知道實現後者的品質是多麼困難。 這些展覽很擁擠,談話減少到很少的程度。 當然,這次會議是在倫敦召開的。 這裡不允許誇大的說法和行銷宣傳,給人耳目一新的感覺。   筆者參加了Gartner公司的Mi...

Windows Azure 真實案例:CCH 財政服務獨立軟體發展商(ISV)通過託管服務獲得了靈活性並節省成本

財政服務獨立軟體發展商(ISV)通過託管服務獲得了靈活 性並節省 成本  CCH ,為商務專業人士提供軟體,將它的營業稅計算程式改寫至 Windows AzureTM 平臺   。 CCH 希望對 Windows Azure 的使用能帶給使用者更多的選擇,以及按需拓展的能力和更低的花費。 遷移至 Windows Azure 對於開發者非常簡單,因為 Windows ...

對話:大資料時代我們如何做處理與分析

大資料的浪潮有多迅猛? IDC在2006年估計全世界產生的資料量是0.18ZB(1ZB=100萬PB),而今年這個數位已經提升了一個數量級,達到1.8ZB,差不多對應全世界每個人一塊100多GB的硬碟。 這種增長還在加速,預計2015年將達到近8ZB。 目前IT系統的存儲能力遠遠不足,就更不用說深入地挖掘和分析了。 在本文中,百度首席科學家威廉•張、Teradata首席客戶官周俊淩、Yahoo!北...

弄明白這10個問題 再把資料存儲到雲中也不遲

當公司考慮採用雲計算服務的時候,每個好的專案經理都應該提出如下這兩個問題: 「在雲中,我的資料屬於誰? 」 「當我需要遷移這些資料的時候,會發生什麼? 」 對私有雲來說,硬體,軟體和資料都放在公司的內部,所以,擁有權很清楚。 但是,當把資料移轉到私有雲外部的時候,需要考慮很多複雜的問題。 整個行業都很關注雲安全,隱私和支配權問題。 資料擁有權模糊不清,是所有和雲有關的問題產生的根源。 考慮資料是否存...

中創軟體:中介軟體完美植入雲計算

當軟體產業發生明顯轉變:使用者習慣于網路應用,軟體線上租用模式開始流行時,中介軟體領域掀起了又一波創新浪潮,技術創新密集出現。 在軟體向服務轉化的過程中,中介軟體可謂是支撐服務的基礎。 作為擁有10年研發歷史,產品廣泛用於政府、金融、交通、能源、電信等多個行業的中介軟體與產品供應商,中創軟體商用中介軟體股份有限公司(簡稱中創中介軟體)不僅把握住了技術趨勢,還順應變革,從中挖掘出了新商機。 不一樣的Info...

微軟雲計算平臺-Windows Azure架構探析

點擊下載:temp_10101822378100.pdf 作為未來資訊技術的發展趨勢之一,雲計算是繼SOA、 Web2.0之後又一個熱門的話題,其中最重要的部分就是雲計算思想的出現和各種雲計算平臺的到來,近一年來,已由概念探討快速轉入到了實踐。 究竟應該如何理解雲、走近雲,利用雲計算平臺又能帶來哪些價值? 本主題將在剖析微軟雲計算服務平臺Windows Azure架構、開發方法的基礎上,與您進一步...

IBM助資料中心向雲計算方向演變

對於企業來說,其IT開支已經有超過70%應用於系統維護與管理,傳統的資料中心正在遭受新的挑戰。 「設備利用率低,基礎架構脆弱難以改變和新應用部署時間長,正在成為目前資料中心所面臨的三大挑戰。 」日前,IBM資深系統架構師李麗芳表示。 為此,虛擬化的應用正在逐步深入,並向雲計算演變,而IBM也在努力加快這一進程。 李麗芳認為,虛擬化最終實現需要經過三個階段:整合、虛擬化、標準化和自動化。 在整合上,企...

Craigslist採用MongoDB替代MySQL

根據國外媒體報導,全球最大的分類資訊網站Craigslist正在使用MongoDB資料庫存檔資料,之前該網站使用的是MySQL資料庫集群。 這或許是採用NoSQL資料存儲的最大的網站。 以下是有關Craigslist的MongoDB集群,來自該網站的軟體工程師Zawodny: 我們正在測算安裝大概50億文檔的空間,從最初的20億文檔導入,以及加上未來幾年需要的空間。 平均一個文檔的大小是2KB...

如何管理雲計算和虛擬化環境中的伺服器

管理伺服器工作量在任何環境中都是一項複雜的任務,在採用虛擬化和雲計算的時候更是如此。 當然,有許多管理伺服器工作量的解決方案。 Librato公司(此前一直採用Evergrid的名稱)最近推出的Librato Load Manager 2.0版軟體能夠在x86環境中管理物理的和虛擬的應用程式工作量,不用修改應用程式或者作業系統。 Librato負責行銷的副總裁Ameet Dhillon說,該公...

多元化,差異化,2014年雲存儲的變化之路

前幾天和一位在雲存儲領域打拼多年的朋友聊天時,說起今年國內雲存儲領域可能出現的一些變化,以及產品在功能方面的一些演變趨勢,鑒於目前使用雲存儲服務的朋友越來越多,許多朋友對此事都比較關心,因此整理了一下自己的看法。   最先認識雲存儲,是09年一位業內朋友邀請使用了Dropbox。 當時覺得這玩意很新奇,能自動同步並備份檔案。 不過,缺點是Dropbox伺服器在國外,同步速度很慢,後來就認祖歸...

雲存儲系統該怎麼選擇

雲存儲對於一系列的存儲需求是一種有效的選擇。 理解各種雲存儲系統的關鍵特性有助於識別合適的用例,並避免潛在且昂貴的錯誤。   我們使用術語「雲存儲」,仿佛存在一個單一的資料存儲服務。 實際上有多種類型的雲存儲系統。 通過確定合適用例的特性有助於將這些系統分類。 比如,你不想使用花費數小時來回應一個讀請求的歸檔系統來運行庫存車管理系統。 類似的,也沒理由在基於磁片的存儲有效的情況下為低延遲的SSD存...

雲存儲關鍵技術

存儲虛擬化技術   存儲虛擬化技術是雲存儲的核心技術。 通過存儲虛擬化方法,把不同廠商、不同型號、不同通信技術、不同類型的存放裝置的互聯起來,將系統中各種異構的存放裝置映射為一個統一的存儲資源池。 存儲虛擬化技術能夠對存儲資源進行統一分配管理,又可以遮罩存儲實體間的物理位置以及異構特性,實現了資源對使用者的透明性,降低了構建、管理和維護資源的成本,從而提升雲存儲系統的資源利用率。   重復資料...

雲存儲市場大戰 安防行業又該如何應對

伴隨著雲計算概念的誕生,雲存儲也相繼入人眼簾。 就近日而言,雲存儲市場可謂是硝煙四起,先是金山快盤推出號稱永久免費的100G雲空間,360雲盤不甘示弱的免費推出360G空間,華為網盤也緊隨其後推出無限雲空間,就連BAT中的百度也推出了1元錢購買1T空間, 360又回應送出666G空間。     這一段此起彼伏的戰況,看得可是激烈異常,也看出了雲存儲...

雲計算應用落地 磁片存儲市場復蘇

IDC最新發佈的《全球磁片存儲系統季度追蹤報告》顯示,2013年第四季度全球磁片存儲系統市場總收入同比增長1.3%,結束了持續的低迷。 與全球磁片存儲市場緩慢回暖不同,中國磁片存儲系統市場在大資料、雲計算、智慧城市建設等的推動下保持穩定增長態勢。 2014年國內磁片存儲市場將呈現出哪些特點?主流存儲廠商如何看待這個市場區隔,將如何應對新變化?   在經歷了連續幾個季度的持續下滑後,全球磁片存...

總頁數: 432 1 .... 182 183 184 185 186 .... 432 Go to: 前往

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.