Time of Update: 2018-12-04
hive是基於Hadoop的一個資料倉儲工具,可以將結構化的資料檔案映射為一張資料庫表,並提供完整的sql查詢功能,可以將sql語句轉換為MapReduce任務進行運行。 其優點是學習成本低,可以通過類SQL語句快速實現簡單的MapReduce統計,不必開發專門的MapReduce應用,十分適合資料倉儲的統計分析。 我這裡主要用於統計處理結構化的文本資料,處理後,存入結構化資料庫中展現給使用者。 安裝: 1,下載wget
Time of Update: 2018-12-04
方式一:nginx cronolog日誌分割配置文檔,根據下面方法,每分鐘分割一次NGINX訪問日誌。1.nginx日誌配置 access_log access_log /data/access_log_pipe main; 2.先建立一個具名管道 mkfifo /www/log/access_log_pipe 3.配置cronolog: nohup cat /data/access_log_pipe | /usr/local/sbin/cronolog
Time of Update: 2018-12-04
如何證明素數有無窮多個呢?和勾股定理一樣,有很多證明方法,也是異彩紛呈。好多證明方法都是神證明(經典證明:素數無窮多的拓撲學證明)。有一本書叫做Proofs from THE BOOK ,中文譯名 來自聖經的證明 ,這本書就是專門搜集這些神證明的。顯然BOOK 在英文中就指聖經。不過,個人覺得翻譯成 來自天書的證明
Time of Update: 2018-12-04
今天手工焊接幾台樣機,不小心將其中一塊板子的主CPU的方向弄錯了,這塊CPU是144引腳的表面貼裝器件,已將有不少引腳被焊上.為了將它拆下來,費了不少腦筋,本文參考了論文<<表面貼片元件的拆卸與焊接>>,由於這篇論文只有文字描述,所以我有了寫一篇圖文拆卸表面貼裝元件的想法.1.準備一根導線,或者漆包線2.取其中的線芯,注意線芯要有一定的直徑,大概和CPU的引腳直徑相仿3.將一根線芯穿過CPU的引腳內側 4.線芯一端固定在附近的焊盤上5.使用烙鐵加熱CPU引腳,
Time of Update: 2018-12-04
現實扭曲力場 1981
Time of Update: 2018-12-04
DECLARE_DYNAMIC表明的是支援類型資訊, 有了這個宏,我們就可以判斷一個類究竟是什麼類,比如class A;class B:public A;A a;B b;現在有一個指標 class *pA 它指向一個對象, 請問你怎麼知道pA指向的是a對象還是b對象,這是如果有類型資訊,我們就可以知道pA到底是什麼對象,
Time of Update: 2018-12-04
二叉排序樹(二叉尋找樹,Binary Sort Tree):它或者是一棵空樹;或者是具有下列性質的二叉樹: (1)若左子樹不空,則左子樹上所有結點的值均小於它的根結點的值; (2)若右子樹不空,則右子樹上所有結點的值均大於它的根結點的值; (3)左、右子樹也分別為二叉排序樹;平衡二叉樹(AVL樹):它或者是一棵空樹或它的左右兩個子樹的高度差的絕對值不超過1,並且左右兩個子樹都是一棵平衡二叉樹。紅/黑樹狀結構(RB樹):性質1. 節點是紅色或黑色。 性質2. 根是黑色。 性質3
Time of Update: 2018-12-04
詳細解說STL hash_map系列 詳細解說STL hash_map系列 0 為什麼需要hash_map 1 資料結構:hash_map原理 2 hash_map 使用 2.1 一個簡單一實例 2.2 hash_map 的hash函數 2.3 hash_map 的比較函數 2.4 hash_map 函數 3 相關hash容器 4 其他 4.1 hash_map和map的區別在哪裡? 4.2 什麼時候需要用hash_map,什麼時候需要用map? 4.3
Time of Update: 2018-12-04
本文及以後的文章將介紹記錄hadoop和hive在大日誌分析中的應用,文章只介紹重點和容易搞錯的細節,其他細節可以到官網或google查詢。hadoop安裝: 1,配置/etc/hosts中ip和nodename的對應關係 ssh無密碼串連,ssh-keygen -t rsa cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
Time of Update: 2018-12-04
Nutch 2.0 之 Apache Gora介紹-----------------1. 什麼是Apache Gora Apache Gora是一個開源的ORM架構,主要為大資料提供記憶體資料模型與資料的持久化。目前Gora支援對於列資料、key-value資料,文檔資料與RDBMS資料的儲存,還支援使用Apache Hadoop來對對大資料進行分析。2. 為什麼要使用Apache Gora 雖然目前市面上有很多不錯的關聯式資料庫的ORM架構,但是基於資料模型的架構如JDO還是有一些不足,
Time of Update: 2018-12-04
procedure TForm1.Button1Click(Sender: TObject);var RootPath : string; Sed_Cluster, Bytes_Sec, Free_Clusters, Total_Clusters : DWord;begin Memo1.Clear; RootPath := 'C:/'; if RootPath<>'' then begin GetDiskFreeSpace(PChar(RootPath), Sed_
Time of Update: 2018-12-04
鄒健的/********************導整個資料庫*********************************************/用bcp實現的預存程序/*實現資料匯入/匯出的預存程序 根據不同的參數,可以實現匯入/匯出整個資料庫/單個表調用樣本:--匯出調用樣本----匯出單個表exec file2table 'zj','','','xzkh_sa..地區資料','c:/zj.txt',1----匯出整個資料庫exec file2table 'zj',''
Time of Update: 2018-12-04
Blog音樂的設定有很多種,就我個人的實踐舉例如下:A . Realplay音樂播放器的代碼設定,可以在你的“公告”加入如下代碼: <OBJECT class=OBJECT id=MediaPlayer height=70 width=350 align=middle><PARAM NAME="ShowStatusBar" VALUE="-1"><PARAM NAME="Filename" VALUE="音樂的地址"><PARAM
Time of Update: 2018-12-04
How To Create Buttons in Cocos2D: Simple, Radio, and ToggleLike this post? Follow me on Twitter!Buttons Tutorial ScreenshotWhen you are making a game in Cocos2D, likely one of the first things you’ll find yourself needing is buttons. This tutorial
Time of Update: 2018-12-04
講 Alpha 混合的文章太多了,我並不是要說有什麼新的更好的演算法,而是這些 Alpha 混合的文章都是基於一種特定的現實應用:在背景色上疊加一個半透明色。而 OpenPainter 的需求更具一般性:混合兩個半透明顏色。也就是說,原始色也是有透明度的。為此我首先用 PS 做了不少實驗,試圖推匯出 Alpha 混合的公式。事實上,一些簡單的實驗外加一些邏輯推理,成功了找到了 Alpha 混合的方法。這裡為了計算上的方便,所有顏色分量值的取值範圍都是 0 ~
Time of Update: 2018-12-04
原文連結:http://book.douban.com/review/3665373/ 當剛剛賣不走進大學的時候,我相信很多人跟我一樣,對自己所學的東西不甚瞭解。當剛剛接觸電腦的時候,我相信很多人跟我一樣,熟練的上網,用電腦,但是對IT這個詞熟悉卻有陌生。最不幸的人當然就是一個即將成為IT小小鳥的大學生——沒有過電腦?不是。很熟悉電腦?也不是——面對著這一個既熟悉又陌生的工具,當時的內心迷惘可想而知。 迅速開展的專業課,忽然間把人帶到了電腦的另一個世界。於是內心的不安之情更加一層——這到底是什
Time of Update: 2018-12-04
雖然閱覽面經無數,但實戰時依然慘淡,如何是好?微軟亞洲研究院“明日之星”實習生項目特別為學生們開闢綠色道場:來自創新工程中心的2位資深軟體開發經理與實習生進行了一場類比面試,讓你提前"領教"這些技術大拿們是如何刁難面試者的,當然他們也會義不容辭地給你現場支招。 面試官名片 面試一開始,我們先不急著應付問題,先來聽聽大拿們是如何定義讓我們膽戰心驚的“面試”的:面試就是協助雙方進行更好的瞭解,告訴別人你的能力。而作為面試官,主要想考察對方解決問題的能力,因為在以後的工作中,我們總會遇
Time of Update: 2018-12-04
.NET技術浩如煙海,沒有任何一本書可以窮盡它,因為作為一個主流開發平台,它涵蓋的內容實在太豐富了。然而,當我閱讀完金旭亮先生的這本著作(《基礎 篇》+《應用篇》),我開始對我的論斷產生了懷疑。不錯,本書依舊沒有能夠窮盡.NET,然而它在技術廣度與深度的結合方面,或許稱得上是無與倫比的。可 以說,.NET平台的各項重要技術,包括.NET 4.0的新特性,在本書中都得到了淋漓盡致的釋放;最重要的是,作者沒有人云亦云,滿足於技術的表層,而是通過使用ildasm和Reflector
Time of Update: 2018-12-04
“科學松鼠會 ”,僅僅這個名字就已經很有意思了,在網上一查,發現他們做的事情更有意思:對於部分人來說,科學就像一枚枚難以開啟的堅果,雖味美卻不易入口;我們希望自己能夠像松鼠一樣,開啟科學的堅硬外殼,將有營養的果仁剝出來,讓人們能夠領略到科學的美妙。松鼠會通過引導作者寫作、組織線下活動、與其他機構合作等方式,向福士傳播科學。 科學寫作?首先想到的就是我很喜歡的俄國作家普裡什文在 《大自然的日曆》、
Time of Update: 2018-12-04
題目:任意給定一個正整數N,求一個最小的正整數M(M>1),使得N*M的十進位表示形式裡只含有1和0.解決這個問題首先考慮對於任意的N,是否這樣的M一定存在。可以證明,M是一定存在的,而且不唯一。簡單證明:因為 這是一個無窮數列,但是數列中的每一項取值範圍都在[0, N-1]之間。所以這個無窮數列中間必定存在迴圈節。即假設有s,t均是正整數,且s<t,有 。於是迴圈節長度為t-s。於是10^s =