其他

在 Invoke 或者 BeginInvoke 的使用中無一例外地使用了委託 Delegate ，至於委託的本質請參考我的另一隨筆： 對 .net事件的看法 。 一、為什麼 Control類提供了 Invoke和 BeginInvoke機制？關於這個問題的最主要的原因已經是 dotnet程式員眾所周知的，我在此費點筆墨再次記錄到自己的日誌，以便日後提醒一下自己。1、 windows程式訊息機制Windows

 Apache Thrift的簡單使用---------------------- 1. 簡單介紹Thrift是Facebook的一個開源項目，主要是一個跨語言的服務開發架構。它有一個代碼產生器來對它所定義的IDL定義檔案自動產生服務代碼架構。使用者只要在其之前進行二次開發就行，對於底層的RPC通訊等都是透明的。目前它支援的語言有C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, Smalltalk, and

1.對查詢進行最佳化，應盡量避免全表掃描，首先應考慮在 where 及 order by 涉及的列上建立索引。 2.應盡量避免在 where 子句中對欄位進行 null 值判斷，否則將導致引擎放棄使用索引而進行全表掃描，如：select id from t where num is null可以在num上設定預設值0，確保表中num列沒有null值，然後這樣查詢：select id from t where num=0 3.應盡量避免在 where

我們這裡介紹幾個免費IP資料庫的更新，對於國外IP資料，我們使用Maxmind的開源項目GeoIP，而國內IP資料我們使用純真的QQWry, 由於QQWry是rara格式的，我們首先在系統安裝unrarwget http://www.rarlab.com/rar/unrar-3.7.7-centos.gzgzip -d unrar-3.7.7-centos.gzmv unrar-3.7.7-centos

Hadoop計算平台和Hadoop資料倉儲的區別http://datasearch.ruc.edu.cn/~boliangfeng/blog/?tag=%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93Hive 隨談（三）– Hive 和資料庫的異同http://www.tbdata.org/archives/551Hadoop Ecosystem解決方案---資料倉儲http://www.cnblogs.com/OnlyXP/archive/2009/10/14/1583

Nutch 1.3 學習筆記 10-3 外掛程式機制分析-------------------------------------1. 一些對象說明 PluginRepository:這是一個用於儲存所有外掛程式描述對象(PluginDescriptor)，外掛程式擴充點(ExtensionPoint)和被啟用的外掛程式。PluginDescriptor:用於描述單個擴充外掛程式的元資訊，它的內容主要是從plugin.xml中得到。Plugin:

以下是Postfix的四種郵件隊列，均由管理隊列的進程統一進行管理：1． maildrop：本地郵件放置在maildrop中，同時也被拷貝到incoming中。2． incoming：放置正在到達或隊列管理進程尚未發現的郵件。3． active：放置隊列管理進程已經開啟了並正準備投遞的郵件，該隊列有　　長度的限制。4． deferred：放置不能被投遞的郵件。看被Queue的信:postqueue -q (我都是用這個)ormailq強迫將Queue信寄出:postqueue

Nutch 1.3 學習筆記 11-1 頁面評分機制 OPIC--------------------------------------1. Nutch 1.3 的頁面評分機制 

一、抽樣分析模型建模方法首先確定統計的時間段，暫訂為15天；從資料庫中隨機抽取若干名使用者作為分析樣本建立分析模型，模型圖中假定抽樣人數為100人，15天內最高使用量為200最少為15，在橫座標軸依次畫出每人的使用量立柱圖；然後向右側畫出最高點和最低點的水平引線；然後垂直劃線串連水平線，得到上下交點之間的線段，分別線上段的中點和三分點處水平畫出“中分線”“上分線”“下分線”。分析方法根據立柱圖的分布比率確定哪條線為“多”“少”的分割線；高柱和低柱比較均衡，則以中分線為分割線；

    本文及以後的文章將介紹記錄hadoop和hive在大日誌分析中的應用，文章只介紹重點和容易搞錯的細節，其他細節可以到官網或google查詢。hadoop安裝：  1，配置/etc/hosts中ip和nodename的對應關係      ssh無密碼串連,ssh-keygen -t rsa       cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys     

基礎維度：UV: 獨立訪客，每台獨立上網的電腦視為一位訪客PV/VV 訪問頁面/視頻的瀏覽量或者點擊IP 獨立ip數人均PV 選擇時間內，每個訪客訪問網站數=PV/UVIP品質  根據人均PV的數值來評價某個來源，某個關鍵字，摸個訪客的品質和價值。人均PV越高，IP品質就越好，該網站訪客的忠誠度就越好線上人數 5分鐘內在先訪問的人數訪問深度  在一次完整的網站訪問過程中訪客所瀏覽的頁面數停留時間  所有訪客訪問過程中訪問期間的平均值最近訪客

一說到Pushmail，當然要說到黑莓，因為黑莓的pushmail是最好的，但國內使用費用太貴了，中移動一個月的服務費都要四五百大洋了....這裡我們不提黑莓--! 先說說直正的Pushmail技術如何在手機上實現： 真正的Pushmail與我們使用的多媒體訊息有些類似，多媒體訊息接收的實現是當你有新多媒體訊息時，電訊廠商會主動發送一條簡訊到你的手機，你的手機在接收到簡訊後，主動串連網路，訪問電訊廠商的多媒體訊息伺服器，然後收取多媒體訊息，收取多媒體訊息成功後，斷開網路並提示你有新多媒體訊息。 

前面我已經搭好了hadoop和hive環境，並且在hive中建立了表page,將資料load了進去。現在我想從這個表中統計每個url的流量，並放到其他關係中資料庫中或者展現在頁面上，怎麼辦？去官網是看一下，不難發現可以用java ,python，php都可以實現，下面就用python 簡單的寫了寫 from hive_service import ThriftHivefrom hive_service.ttypes import HiveServerExceptionfrom thrift

 光從字面上來理解，很容易讓一些初學者先入為主的認為：SecondaryNameNode（snn）就是NameNode（nn）的熱備進程。其實不是。snn是HDFS架構中的一個組成部分，但是經常由於名字而被人誤解它真正的用途，其實它真正的用途，是用來儲存namenode中對HDFS metadata的資訊的備份，並減少namenode重啟的時間。對於hadoop進程中 ，要配置好並正確的使用 snn，還是需要做一些工作的。hadoop的預設配置中讓 snn進程預設運行在了 namenode

Maven跨平台的專案管理工具Apache組織中頗為成功的開源項目服務於java平台的項目構建，依賴管理和項目資訊管理  持續整合  快速  高頻率  自動  構建  所有源碼  反饋 目前最流行的開源持續整合工具http://hudson-ci.org下面簡單介紹一下Hudson Maven

查看檔案內容（dfs 用fs替換可以）hadoop dfs -cat hdfs://nn1.example.com/file1 hdfs://nn2.example.com/file2hadoop dfs -cat file:///file3 /user/hadoop/file4分組 hadoop dfs -chgrp [-R] GROUP URI [URI …]授權 hadoop  dfs -chmod [-R] <MODE[,MODE]... | OCTALMODE> URI [

    繼續走，繼續失去...，今天從T公司離職，有些感慨，小小的抒發一下。    進入T公司絕對是偶然中的偶然，進入之前對公司一點不瞭解，只知道自己乾的活是比以前乾的技術含量高的活。我是去年10.1以後去的T公司，在這不到一年的時間裡，鍛煉了我不少的品質，忍耐力，抗壓力，處事會過下大腦。也丟失了一些品質，激情，果斷（希望在未來的日子能撿回來）。    

理解資料庫範式系統是短暫的資料是永恒的轉自：http://blog.csdn.net/jianxiong8814/archive/2008/03/03/2142442.aspx       資料庫範式是資料庫設計中必不可少的知識，沒有對範式的理解，就無法設計出高效率、優雅的資料庫。甚至設計出錯誤的資料庫。而想要理解並掌握範式卻並不是那 麼容易。教科書中一般以關係代數的方法來解釋資料庫範式。這樣做雖然能夠十分準確的表達資料庫範式，但比較抽象，不太直觀，不便於理解，更難以記憶。      

 1.

1.where和havingWHERE 子句搜尋條件在進行分組操作之前應用；而 HAVING 搜尋條件在進行分組操作之後應用。所以where後面是不可跟聚會函數（ 一種函數，它對一組行中的某個列執行計算，並返回單個值如count()  sum()）。2.exist和inin