其他

Kafka是分布式發布-訂閱訊息系統。它最初由LinkedIn公司開發，之後成為Apache項目的一部分。Kafka是一個分布式的，可劃分的，冗餘備份的持久性的Log Service。它主要用於處理活躍的流式資料。 在大資料系統中，常常會碰到一個問題，整個大資料是由各個子系統組成，資料需要在各個子系統中高效能，低延遲的不停流轉。傳統的企業訊息系統並不是非常適合大規模的資料處理。為了已在同時搞定線上應用（訊息）和離線應用（資料檔案，日誌）Kafka就出現了。Kafka可以起到兩個作用：

一、 訊息佇列概述 訊息佇列中介軟體是分布式系統中重要的組件，主要解決應用耦合、非同步訊息、流量削鋒等問題。實現高效能、高可用、可伸縮和最終一致性架構。是大型分布式系統不可缺少的中介軟體。 目前在生產環境，使用較多的訊息佇列有ActiveMQ、RabbitMQ、ZeroMQ、Kafka、MetaMQ、RocketMQ等。 二、 訊息佇列應用情境 下面詳細介紹一下訊息佇列在實際應用中常用的使用情境。情境分為非同步處理、應用解耦、流量削鋒和訊息通訊四個情境。 2.1 非同步處理

分布式訊息系統作為實現分布式系統可擴充、延展性的關鍵組件，需要具有高輸送量、高可用等特點。而談到訊息系統的設計，就迴避不了兩個問題： 訊息的順序問題 訊息的重複問題 RocketMQ作為阿里開源的一款高效能、高輸送量的訊息中介軟體，它是怎樣來解決這兩個問題的。RocketMQ 有哪些關鍵特性。其實現原理是怎樣的。 關鍵特性以及其實現原理 一、順序訊息 訊息有序指的是可以按照訊息的發送順序來消費。例如：一筆訂單產生了 3

狀態碼有三位元字組成，第一個數字定義了響應的類別，且有五種可能取值： 1xx：指示資訊--表示請求已接收，繼續處理2xx：成功--表示請求已被成功接收、理解、接受3xx：重新導向--資訊不完整需要進一步補充4xx：用戶端錯誤--請求有語法錯誤或請求無法實現5xx：伺服器端錯誤--伺服器未能實現合法的請求 常見http響應狀態代碼：請求收到，繼續處理： 100 用戶端必須繼續發出請求 101

先來瞭解下UDP UDP 是UserDatagram Protocol的簡稱， 中文名是使用者資料包通訊協定，是OSI（Open System Interconnection，開放式系統互聯） 參考模型中一種不需連線的傳輸層協議，提供面向事務的簡單不可靠資訊傳送服務，IETF RFC 768是UDP的正式規範。UDP在IP報文的協議號是17。 UDP和TCP的區別：http://blog.csdn.net/ljheee/article/details/50823050

偶然間看到了阿里中介軟體Dubbo的效能測試報告，我覺得這份效能測試報告讓人覺得做這效能測試的人根本不懂效能測試，我覺得這份報告會把福士帶溝裡去，所以，想寫下這篇文章，做一點科普。 首先，這份測試報告裡的主要問題如下： 1）用的全是平均值。老實說，平均值是非常不靠譜的。 2）回應時間沒有和輸送量TPS/QPS掛鈎。而只是測試了低速率的情況，這是完全錯誤的。 3）回應時間和輸送量沒有和成功率掛鈎。 為什麼平均值不靠譜

Mock 方法是單元測試中常見的一種技術，它的主要作用是類比一些在應用中不容易構造或者比較複雜的對象，從而把測試與測試邊界以外的對象隔離開。 編寫自訂的 Mock 對象需要額外的編碼工作，同時也可能引入錯誤。EasyMock 提供了根據指定介面動態構建 Mock 對象的方法，避免了手工編寫 Mock 對象。本文將向您展示如何使用 EasyMock 進行單元測試，並對 EasyMock 的原理進行分析。 1．Mock 對象與 EasyMock 簡介 單元測試與 Mock 方法

Jmeter中有2種方法可以錄製指令碼。  不過我個人非常不推薦錄製指令碼，錄製的指令碼混亂，需要再次加工才能使用。 像我這麼精通HTTP協議的人。 一直都是使用Fiddler來抓包，然後自己寫指令碼。   無論如何，本文還是要介紹下兩種錄製指令碼的方法   方法一：  使用badboy來錄製指令碼 badboy本身是一個針對Web的測試載入器，它錄製的指令碼可以直接供Jmeter使用

效能測試，負載測試，壓力測試有什麼區別 效能測試（或稱多使用者並發效能測試）、負載測試、強度測試、容量測試是效能測試領域裡的幾個方面，但是概念很容易混淆。下面將幾個概念進行介紹。  效能測試（Performance Test）：通常收集所有和測試有關的所有效能，通常被不同人在不同場合下進行使用。  關注點：how much和how fast  負載測試（Load

下面我們主要介紹效能測試、負載測試和壓力測試。 效率作為ISO 9126內部和外部品質的重要品質屬性之一，其含義是在規定條件下，相對於所用的資源的數量，軟體產品可提供適當效能的能力。資源可能包括其他軟體產品或系統的軟體和硬體設定，以及其他相關的資源（例如：列印紙、磁碟等）。

什麼是文檔。 程式中大多的實體或對象能夠被序列化為包含索引值對的JSON對象，鍵(key)是欄位(field)或屬性(property)的名字，值(value)可以是字串、數字、布爾類型、另一個對象、值數組或者其他特殊類型，比如表示日期的字串或者表示地理位置的對象。 1 { "name": "John Smith", "age": 42, "confirmed": true,

摘要： 本文簡單介紹了elasticsearch的HTTP API中的插入、刪除、更新、尋找、搜尋功能。 elasticsearch是一個是開源的（Apache2協議），分布式的，RESTful的，構建在Apache Lucene之上的的搜尋引擎。 它有很多特點例如Schema Free，Document Oriented。它是#nosql的，基於JSON，同時支援多種API，包括HTTP, thrift,

一、白盒測試     根據軟體產品的內部工作過程，在電腦上進行測試，以證實每種內部操作是否符合設計規格要求，所有內部成分是否已經過檢查。這種測試方法就是白盒測試。白盒測試把測試對象看做一個開啟的盒子，允許測試人員利用程式內部的邏輯結構及有關資訊，設計或選擇測試案例，對程式所有邏輯路徑進行測試。通過在不同點檢查程式的狀態，確定實際的狀態是否與預期的狀態一致。

對多個indices進行操作 es中大多resetapi支援要求多個index, 例如”test1,test2,test3”，index也可以使用萬用字元, 例如”test*“, 還可以使用+,-來包含或移除某個或某類index, 例如”test*,-test1” 支援設定多個的api的請求字串可設定以下參數: ignore_unavailable: 是否忽略單個index是否可用(不存在或關閉), true表示忽略, false表示不忽略, 預設為false,

介紹 elasticsearch是一個高效的、可擴充的全文檢索搜尋引擎 基本概念 Near Realtime(NRT): es是一個接近即時查詢平台，意味從儲存一條資料到可以索引到資料時差很小，通常在1s內 Cluster: es是一個分布式、可擴充的平台, 可由一個或多個伺服器通過定義的cluster.name（預設為elasticsearch）標識共建同一個叢集 Node: 通常一台伺服器上部署一台es

*nux下安裝 在*nux下，es官方已提供編譯的deb和rpm包，但是需要保證已安裝安裝java虛擬環境（目前es1.6和1.7版本均可選擇1.8版本java），安裝步驟如下： 1.下載ES deb/rpm包，並執行安命令 deb包安裝: dpkg -i elasticsearch-1.6.0.deb rpm包安裝: rpm -i elasticsearch-1.6.0.rpm 2.安裝後需要將es服務更新隨系統啟動 對於Debian/Ubuntu系統

一. TCP/IP協議族       TCP/IP是一個協議族，通常分不同層次進行開發，每個層次負責不同的通訊功能。包含以下四個層次： 1. 鏈路層，也稱作資料連結層或者網路介面層，通常包括作業系統中的裝置驅動程式和電腦中對應的網路介面卡。它們一起處理與電纜（或其他任何傳輸媒介）的物理介面細節。

§10.1  對弧長的曲線積分 一、概念的引進 假設面內有一段曲線弧具有品質,在上任一點處的線密度為,且在上連續,與分別是弧的端點,現計算弧的品質。 在上任意地插入個分點 將分劃成個小弧段。對於第  個小弧段,由於線密度函數在上連續,當該小弧段的長度充分小時,它的品質近似地等於 於是,整個曲線弧的品質近似值為 用表示這個小弧段長度的最大者, 即 

摘要: elasticsearch安裝以及叢集部署 一、下載 1.1安裝elasticsearch-2.3.3要求是安裝官方新版的Java，必須是JDK 1.7以上，1.7以下執行的時候會報以下錯誤。安裝環境變數後記得source /etc/profile [liuxun@localhost elasticsearch-2.3.3]$ ./bin/elasticsearchException in thread "main"

Redis鍵空間通知（keyspace notification） 本文檔翻譯自： http://redis.io/topics/notifications 。 鍵空間通知功能目前仍在開發中，這個文檔所描述的內容，以及功能的具體實現，可能會在未來數周內改變，敬請知悉。 功能概覽 鍵空間通知使得用戶端可以通過訂閱頻道或模式， 來接收那些以某種方式改動了 Redis 資料集的事件。 以下是一些鍵空間通知發送的事件的例子：