Big Data

標籤：專業培訓   最新動向   就業市場   工程師   公開課   升職啦    

標籤：轉行  時間都去哪了？        ——記我將要到來的工作四周年  不知不覺間，工作馬上就要滿四周年了。從初出校門的楞小夥，變成了人夫，也即將成為人父，總是會感歎，“時間都去哪了？”  還記得剛工作那時，每天上班都很煎熬，領導分配的工作，很多東西都不會，需要請教項目組的其他同事，有時候，老是請教別人覺得很簡單的問題，也會讓自己覺得很臉紅。所以，自己就告訴自己，一定要自己好好努力，

標籤：轉行  時間都去哪了？        ——記我將要到來的工作四周年  不知不覺間，工作馬上就要滿四周年了。從初出校門的楞小夥，變成了人夫，也即將成為人父，總是會感歎，“時間都去哪了？”  還記得剛工作那時，每天上班都很煎熬，領導分配的工作，很多東西都不會，需要請教項目組的其他同事，有時候，老是請教別人覺得很簡單的問題，也會讓自己覺得很臉紅。所以，自己就告訴自己，一定要自己好好努力，

標籤：       現在的社會是一個高速發展的社會，科技發達，資訊流通，人們之間的交流越來越密切，生活也越來越方便，大資料就是這個高科技時代的產物，那麼什麼是大資料呢？       接下來就為你介紹下大資料：大資料是需要新處理模式才能具有更強的決策力、洞察發現力和流程最佳化能力來適應海量、高增長率和多樣化的資訊資產。     

標籤：升職啦   跳槽啦   加薪啦   考證啦       作為一個搬磚的低級碼農，在複製和粘貼中漫無目的的度過數個春秋，直到某天發現進來的90後才發現自己已經在虛偽無用的搬磚技能中麻木了太長時間。是時候展現真正的技術了---大資料。   

標籤：性價比高   教育培訓   最新動向   專業培訓   線上視頻      報名參加第一期培訓馬上就要結束了，特此紀念下第一次參加職業培訓，第一次線上視頻教學。 

標籤：一個穩定可靠的系統離不開監控，我們不僅監控服務是否存活，還要監控系統的健全狀態。健全狀態主要是對這些組件的核心metrics採集、抓取、分析和警示。一、監控的資料監控的日誌資料一般包括：v APP、PC、Web 等系統運行Log：採用Flume-NG搜集v 使用者日誌 : 採用Flume-NG搜集v 後端Server（SOA）日誌：採用Flume-NG搜集v 巨量資料元件的Metrics:JMX和HTTPv M

標籤：　　大資料已經成為一種發展趨勢，得到越來越多的公司參與。最近從事大資料系統設計開發和Recommendation Engine方面的工作，分幾篇文章兩個系列把自己的心得記錄一下，和大家分享一下大資料方面的經驗。整個平台包括監控系統、日誌分析系統、推薦系統。按資料業務步驟劃分，分為資料擷取、清洗、儲存、分析和服務。整個資料流程如：  　　實際項目中和這流程圖有點差異。前端日誌搜集採用的Flume。大資料系統之系統設計

標籤：第四屆CCF大資料學術會議徵文通知2016年10月，蘭州   

標籤：有限公司   科學家   陌生人   交朋友   分水嶺   　　有一個很好玩的“六人定律”，說是任何兩個人之間，可以通過六個人來建立聯絡。據說這是一個股票專家做的實驗，將一封郵件發送給一個陌生人，並要求陌生人把郵件轉寄給另一個人，當這封郵件第六次轉寄的時候，竟然轉寄回了股票專家手中，經過無數次的實驗，從發出到收回平均經過6次轉寄，也稱作六人

標籤：能動性   技術   人間   學校   友好   　　很多家長，往往以為，學校是決定孩子學習成績的最為關鍵的因素。http://t.cn/R5JimTu所以千方百計、想方設法、擠破頭、砸鍋賣鐵也要讓孩子上個好學校。不過，很多家長機關算盡，也沒有想到，好家庭就是一所好學校。與其大費周折讓孩子擇個好學校，不如從身邊做起，給孩子辦個好學校。　　善

標籤：概述互連網公司同質應用服務競爭日益激烈，業務部門亟需利用線上即時反饋資料輔助決策支援以提高服務水平。Alluxio（前Tachyon）作為一個以記憶體為中心的虛擬分布式儲存系統，在大資料系統效能提升以及生態系統多組件整合的進程中扮演著重要角色。本文將介紹去哪兒網（Qunar）的一個基於Alluxio的即時日誌流的處理系統，Alluxio在此系統中重點解決了異地資料存放區和訪問慢的問題，從而將生產環境中整個流處理流水線的效能總體提高了近10倍，而峰值時甚至達到300倍左右。目前，去哪兒網的流

標籤：java   基礎   1.文字闡述靜態代碼塊的作用答:靜態代碼塊只在類載入的時候執行一次,可以使用它來初始化資源檔,尤其是那種只需一次載入資源檔2.構造代碼塊與建構函式的調用順序如何？和方法的聲明位置是否有關？為什嗎？構造代碼塊的作用是什嗎？答:構造代碼塊先於建構函式執行,與方法的聲明位置無關.構造代碼塊可以實現代碼的重用,也可以用其來初始化屬性成員變數3.類載入時，是否一定會執行靜態代碼塊？如何手動控制類載入？答:類載入時不一

標籤：hashmap   keyset

標籤：前言眾所周知，快速的城市化使得很多人的生活變得現代化，同時也產生了很多挑戰，如交通擁擠、能源消耗和空氣汙染。城市的複雜性使得應對這些挑戰看起來幾乎是不可能的。近來，感測技術和大規模計算基礎設施的進步產生了各種各樣的大資料，從社會化媒體資料到交通資料，從地理資料到氣象資料。如果使用得當，我們可以使用這些資料去應對城市中面臨的各種挑戰。受到這個機會的激勵，我們提出了城市計算的解決方案。它把城市感測、城市資料管理、城市資料分析和服務提供變成一個對人的生活、城市運行系統和環境進行不斷重複但不顯眼的

標籤：interface、abstract、innerclass  今天學習完了大資料第七天的課程。總結一下抽象類別、介面、內部類的內容。  介面的使用，可以降低代碼的耦合性，抽象類別，體現了Java編程的物件導向特性。Java中只支援單繼承，即每個類只能繼承一個上級父類，但是可以傳遞。介面可以實現多個，這也從另外一個角度實現了類的多繼承。 

標籤：作業1.負數的表現形式，為什麼如此設計？答:負數使用正數的補碼方式來表現,使用補碼錶示負數後cpu對於減法的計算也可以用加法運算來解決.2.-128是在記憶體中是如何儲存的？推算過程？答:    125 01111101   -125 10000011    126 01111110   -126 10000010    127 01111111   -127 10000

標籤：Spark正在資料處理領域捲起一場風暴。讓我們通過本篇文章，看看為Spark的大資料平台起到推波助瀾的幾個重要工具。Spark生態系統眾生相Apache Spark不僅僅讓大資料處理起來更快，還讓大資料處理起來更簡單、功能更強大、更方便。Spark並非只是一項技術，它結合了諸多部分，新的功能和效能改進不斷添加進來，每個部分都在不斷完善之中。本文介紹了Spark生態系統的每個主要部分：每個部分的功能，為什麼很重要，是如何發展的，在哪方面不盡如人意，以及可能會往哪個方向發展。?Spark

標籤：二進位   如何   絕對值   1.負數的表現形式，為什麼如此設計？    負數以正數補碼形式表達，即轉為二進位後，各位取反加1。    且首位代表符號，1即為負數，0為正數。    這樣絕對值相等的正負兩個數，相加即可最高位溢出，結果為0.2.-128是在記憶體中是如何儲存的？推

標籤：後記　　Laxcus最早源於一個失敗的搜尋引擎項目，項目最後雖然終止了，但是項目中的部分技術，包括FIXP協議、Diffuse/Converge演算法、以及很多新的資料處理理念卻得以保留下來，這些成為後來研發Laxcus的基礎。此後又經曆過一些海量資料處理項目，因為時代和行業的變化，用關聯式資料庫做底層存取已經越來越無法滿足不斷擴張的業務需要，於是希望改用能夠支援海量資料處理的軟體，然後在其之上結合實際應用做進一步整合。項目完成後，在推廣和使用中遇到了很多阻礙。這裡面除了產品本身的一些問題