MySql 記憶體表使用
記憶體表使用雜湊散列索引把資料儲存在記憶體中,因此具有極快的速度,適合緩衝中小型資料庫,但是使用上受到一些限制,以下是藍草使用的一些感受。
1、heap對所有使用者的串連是可見的,這使得它非常適合做緩衝。
2、僅適合使用的場合。heap不允許使用xxxTEXT和xxxBLOB資料類型;只允許使用=和<=>操作符來搜尋記錄(不允許<、>、<=或>=);不支援auto_increment;只允許對非空資料列進行索引(not null)。
註:操作符 “<=>” 說明:NULL-safe equal.這個操作符和“=”操作符執行相同的比較操作,不過在兩個作業碼均為NULL時,其所得值為1而不為NULL,而當一個作業碼為NULL時,其所得值為0而不為NULL。
3、一旦伺服器重啟,所有heap表資料丟失,但是heap表結構仍然存在,因為heap表結構是存放在實際資料庫路徑下的,不會自動刪除。重啟之後,heap將被清空,這時候對heap的查詢結果都是空的。
4、如果heap是複製的某資料表,則複製之後所有主鍵、索引、自增等格式將不複存在,需要重新添加主鍵和索引,如果需要的話。
5、對於重啟造成的資料丟失,有以下的解決辦法:
a、在任何查詢之前,執行一次簡單的查詢,判斷heap表是否存在資料,如果不存在,則把資料重新寫入,或者DROP表重新複製某張表。這需要多做一次查詢。不過可以寫成include檔案,在需要用該heap表的頁面隨時調用,比較方便。
b、對於需要該heap表的頁面,在該頁面第一次且僅在第一次查詢該表時,對資料集結果進行判斷,如果結果為空白,則需要重新寫入資料。這樣可以節省一次查詢。
c、更好的辦法是在mysql每次重新啟動時自動寫入資料到heap,但是需要設定管理員,過程比較複雜,通用性受到限制。
藍草目前採用的是第二種辦法。
6、一些預期可能用到的sql語句
//如果表存在,則刪除
DROP TABLE IF EXISTS `abc`;
//複製整張表xyz為heap表abc(包含所有資料)
CREATE TABLE `abc` type=heap select * from `xyz`;
//添加主鍵id
ALTER TABLE `abc` ADD PRIMARY KEY (`id`);
//添加索引username
ALTER TABLE `abc` ADD INDEX `abc` (`username`);
7.建表執行個體
CREATE TABLE `DB` (
`id` int(11) default NULL,
`songname` varchar(255) NOT NULL default '',
`singer` varchar(255) NOT NULL default '',
KEY `songname` (`songname`,`singer`)
) TYPE=HEAP建表時TABLE TYPE 選項也有這個表結構就是建立了記憶體表。如果MYSQL重啟 那記憶體表的資料 將會消失。但訪問速度會很快!
幾個關鍵參數
max_heap_table_size
mysql HEAP MEMORY tables 提高行數支援的方法
別人問到的 記一下
mysql MEMORY tables 如果目前支援的行數到上限還不夠用 可以把 my.conf 配置裡面
max_heap_table_size = 256M
改大
設定 MAX_ROWS
在跑著 可以 ALTER TABLE tbl_name MAX_ROWS=
MAX_ROWS 依賴於 max_heap_table_size 設定
我的設定檔
my.cnf
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
port=5004
tmp_table_size=1000M
max_heap_table_size=950M
# Default to using old password format for compatibility with mysql 3.x
# clients (those using the mysqlclient10 compatibility package).
old_passwords=1
default-character-set=utf8
default-collation=utf8_bin
[mysql.server]
user=mysql
basedir=/var/lib
[mysqld_safe]
default-character-set=utf8
default-collation=utf8_bin
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid
[client]
#default-character-set=utf8
看MySQL參考手冊 發現CREATE TABLE 時有多種資料庫儲存引擎:
TYPE = {BDB | HEAP | ISAM | InnoDB | MERGE | MRG_MYISAM | MYISAM }
MySQL資料庫引擎ISAM,myISAM,heap2007-07-20 23:40如果你是個賽車手並且按一下按鈕就能夠立即更換引擎而不需要把車開到車庫裡去換,那會是怎麼感覺呢?MySQL資料庫為開發人員所做的就好像是按按鈕換引擎;它讓你選擇資料庫引擎,並給你一條簡單的途徑來切換它。
MySQL的內建引擎肯定是夠用了,但是在有些情況下,其他的引擎可能要比手頭所用更適合完成任務。如果願意的話,你甚至可以使用MySQL++ API來建立自己的資料庫引擎,就像打穿氣缸裝上自己的化油器。現在讓我們來看看你該如何選擇引擎,以及如何在可用引擎之間切換。
選擇你的引擎
你能用的資料庫引擎取決於MySQL在安裝的時候是如何被編譯的。要添加一個新的引擎,就必須重新編譯MySQL。僅僅為了添加一個特性而編譯應用程式的概念對於Windows的開發人員來說可能很奇怪,但是在UNIX世界裡,這已經成為了標準。在預設情況下,MySQL支援三個引擎:ISAM、MyISAM和HEAP。另外兩種類型InnoDB和Berkley(BDB),也常常可以使用。
ISAM
ISAM是一個定義明確且曆經時間考驗的資料表格管理方法,它在設計之時就考慮到資料庫被查詢的次數要遠大於更新的次數。因此,ISAM執行讀取操作的速度很快,而且不佔用大量的記憶體和儲存資源。ISAM的兩個主要不足之處在於,它不支援交易處理,也不能夠容錯:如果你的硬碟崩潰了,那麼資料檔案就無法恢複了。如果你正在把ISAM用在關鍵任務應用程式裡,那就必須經常備份你所有的即時資料,通過其複製特性,MySQL能夠支援這樣的備份應用程式。
MyISAM
MyISAM是MySQL的ISAM擴充格式和預設的資料庫引擎。除了提供ISAM裡所沒有的索引和欄位管理的大量功能,MyISAM還使用一種表格鎖定的機制,來最佳化多個並發的讀寫操作。其代價是你需要經常運行OPTIMIZE TABLE命令,來恢複被更新機制所浪費的空間。MyISAM還有一些有用的擴充,例如用來修複資料庫檔案的MyISAMChk工具和用來恢複浪費空間的MyISAMPack工具。
MyISAM強調了快速讀取操作,這可能就是為什麼MySQL受到了Web開發如此青睞的主要原因:在Web開發中你所進行的大量資料操作都是讀取操作。所以,大多數虛擬機器主機供應商和Internet平台供應商(Internet Presence Provider,IPP)只允許使用MyISAM格式。
HEAP
HEAP允許只駐留在記憶體裡的暫存資料表格。駐留在記憶體裡讓HEAP要比ISAM和MyISAM都快,但是它所管理的資料是不穩定的,而且如果在關機之前沒有進行儲存,那麼所有的資料都會丟失。在資料行被刪除的時候,HEAP也不會浪費大量的空間。HEAP表格在你需要使用SELECT運算式來選擇和操控資料的時候非常有用。要記住,在用完表格之後就刪除表格。讓我再重複一遍:在你用完表格之後,不要忘記刪除表格。
InnoDB和Berkley DB
InnoDB和Berkley DB(BDB)資料庫引擎都是造就MySQL靈活性的技術的直接產品,這項技術就是MySQL++ API。在使用MySQL的時候,你所面對的每一個挑戰幾乎都源於ISAM和MyISAM資料庫引擎不支援交易處理也不支援外來鍵。儘管要比ISAM和MyISAM引擎慢很多,但是InnoDB和BDB包括了對交易處理和外來鍵的支援,這兩點都是前兩個引擎所沒有的。如前所述,如果你的設計需要這些特性中的一者或者兩者,那你就要被迫使用後兩個引擎中的一個了。
如果感覺自己的確技術高超,你還能夠使用MySQL++來建立自己的資料庫引擎。這個API為你提供了操作欄位、記錄、表格、資料庫、串連、安全帳號的功能,以及建立諸如MySQL這樣DBMS所需要的所有其他無數功能。深入講解API已經超出了本文的範圍,但是你需要瞭解MySQL++的存在及其可交換引擎背後的技術,這一點是很重要的。估計這個外掛程式式資料庫引擎的模型甚至能夠被用來為MySQL建立本地的XML提供器(XML provider)。(任何讀到本文的MySQL++開發人員可以把這一點當作是個要求。)
按開關
讓所有的靈活性成為可能的開關是提供給ANSI SQL的MySQL擴充——TYPE參數。MySQL能夠讓你在表格這一層指定資料庫引擎,所以它們有時候也指的是table formats。下面的範例程式碼表明了如何建立分別使用MyISAM、ISAM和HEAP引擎的表格。要注意,建立每個表格的代碼是相同的,除了最後的TYPE參數,這一參數用來指定資料引擎。
CREATE TABLE tblMyISAM (
id INT NOT NULL AUTO_INCREMENT,
PRIMARY KEY (id),
value_a TINYINT
) TYPE=MyISAM
CREATE TABLE tblISAM (
id INT NOT NULL AUTO_INCREMENT,
PRIMARY KEY (id),
value_a TINYINT
) TYPE=ISAM
CREATE TABLE tblHeap (
id INT NOT NULL AUTO_INCREMENT,
PRIMARY KEY (id),
value_a TINYINT
) TYPE=Heap
你也可以使用ALTER TABLE命令,把原有的表格從一個引擎移動到另一個引擎。下面的代碼顯示了如何使用ALTER TABLE把MyISAM表格移動到InnoDB的引擎:
ALTER TABLE tblMyISAM CHANGE TYPE=InnoDB
MySQL用三步來實現這一目的。首先,這個表格的一個副本被建立。然後,任何輸入資料的改變都被排入隊列,同時這個副本被移動到另一個引擎。最後,任何排入隊列的資料改變都被送交到新的表格裡,而原來的表格被刪除。
--------------------------------------------------------------------------------
ALTER TABLE捷徑
如果只是想把表格從ISAM更新為MyISAM,你可以使用mysql_convert_table_format命令,而不需要編寫ALTER TABLE運算式。
--------------------------------------------------------------------------------
你可以使用SHOW TABLE命令(這是MySQL對ANSI標準的另一個擴充)來確定哪個引擎在管理著特定的表格。SHOW TABLE會返回一個帶有多資料列的結果集,你可以用這個結果集來查詢獲得所有類型的資訊:資料庫引擎的名稱在Type欄位裡。下面的範例程式碼說明了SHOW TABLE的用法:
SHOW TABLE STATUS FROM tblInnoDB
--------------------------------------------------------------------------------
SHOW TABLE的替換方法
你可以用SHOW CREATE TABLE [TableName]來取回SHOW TABLE能夠取回的資訊。
--------------------------------------------------------------------------------
最後,如果你想使用沒有被編譯成MySQL也沒有被啟用的引擎,那是沒有用的,MySQL不會提示這一點。而它只會給你提供一個預設格式(MyISAM)的表格。除了使用預設的表格格式外,還有辦法讓MySQL給出錯誤提示,但是就現在而言,如果不能肯定特定的資料庫引擎是否可用的話,你要使用SHOW TABLE來檢查表格格式。
更多的選擇意味著更好的效能
用於特定表格的引擎都需要重新編譯和追蹤,考慮到這種的額外複雜性,為什麼你還是想要使用非預設的資料庫引擎呢?答案很簡單:要調整資料庫來滿足你的要求。
可以肯定的是,MyISAM的確快,但是如果你的邏輯設計需要交易處理,你就可以自由使用支援交易處理的引擎。進一步講,由於MySQL能夠允許你在表格這一層應用程式資料庫引擎,所以你可以只對需要交易處理的表格來進行效能最佳化,而把不需要交易處理的表格交給更加輕便的MyISAM引擎。對於MySQL而言,靈活性才是關鍵。