python使用mysql connection擷取資料感知不到資料變化問題

標籤：

在做資料同步校正的時候，需要從mysql fetch資料和hbase的資料進行對比，發現即使mysql資料變化了，類似下面的代碼返回的值還是之前的資料。抽取的代碼大概如下：

 1 import MySQL 2  3 conn = MySQL.connect(host = mysql_config[‘host‘], 4                     user = mysql_config[‘username‘], 5                     password = mysql_config[‘password‘], 6                     port = int(mysql_config[‘port‘]), 7                     db = mysql_config[‘database‘], 8                     init_command = ‘SET NAMES UTF8‘) 9 10 cur = conn.cursor()11 12 def get_data_from_mysql():13     sql = "select * from table_a where ****"14     cur.execute(sql)15     result = []16     for line in cur.fetall():17         result.append(line)18 19     return result    

上面的代碼，如果反覆調用get_data_from_mysql函數，即使對於mysql資料庫中同樣一條資料變化，程式取出的還是變化之前的資料。

原因解釋：這是mysql事務隔離的結果，InnoDB預設的隔離等級是可重複讀（REPEATABLE READ），也就是在同一個事務中讀取的值總是一樣。所以為了感知到變化，必須重新擷取一個事務（比方說關閉conneciton重新擷取，或者調用commit，也可以改變mysql的交易隔離等級到READ COMMITED）。

 

參考資料：http://stackoverflow.com/questions/29680684/why-do-i-need-to-reconnect-to-the-database-to-see-changes-in-table-data

python使用mysql connection擷取資料感知不到資料變化問題