資料庫並發鎖

1. 如何處理大量數據並發操作

處理大量數據並發操作可以採用如下幾種方法:

1.使用緩存：使用程序直接保存到內存中。或者使用緩存框架: 用一個特定的類型值來保存，以區別空數據和未緩存的兩種狀態。

2.資料庫優化：表結構優化;sql語句優化，語法優化和處理邏輯優化;分區;分表;索引優化;使用存儲過程代替直接操作。

3.分離活躍數據:可以分為活躍用戶和不活躍用戶。

4.批量讀取和延遲修改: 高並發情況可以將多個查詢請求合並到一個。高並發且頻繁修改的可以暫存緩存中。

5.讀寫分離: 資料庫伺服器配置多個，配置主從資料庫。寫用主資料庫，讀用從資料庫。

6.分布式資料庫: 將不同的表存放到不同的資料庫中，然後再放到不同的伺服器中。

7.NoSql和Hadoop: NoSql，not only SQL。沒有關系型資料庫那麼多限制，比較靈活高效。Hadoop，將一個表中的數據分層多塊，保存到多個節點（分布式）。每一塊數據都有多個節點保存（集群）。集群可以並行處理相同的數據，還可以保證數據的完整性。

拓展資料:

大數據（big data），指無法在一定時間范圍內用常規軟體工具進行捕捉、管理和處理的數據集合，是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。

在維克托·邁爾-舍恩伯格及肯尼斯·庫克耶編寫的《大數據時代》中大數據指不用隨機分析法（抽樣調查）這樣捷徑，而採用所有數據進行分析處理。大數據的5V特點（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（低價值密度）、Veracity（真實性）。

2. 資料庫 什麼是並發控制

簡單來講 並發控制是一種技術
在資料庫中 由於可以同時有多個操作在進行（並行） 為了實現數據的一致性 採用了並發控制技術

3. mysql鎖能控制並發嗎

可以的，mysql中典型的是mvcc協議：

MVCC是為了實現資料庫的並發控制而設計的一種協議。從直觀理解上來看，要實現資料庫的並發訪問控制，最簡單的做法就是加鎖訪問，即讀的時候不能寫（允許多個西線程同時讀，即共享鎖，S鎖），寫的時候不能讀（一次最多隻能有一個線程對同一份數據進行寫操作，即排它鎖，X鎖）。這樣的加鎖訪問，其實並不算是真正的並發，或者說它只能實現並發的讀，因為它最終實現的是讀寫串列化，這樣就大大降低了資料庫的讀寫性能。加鎖訪問其實就是和MVCC相對的LBCC，即基於鎖的並發控制（Lock-Based Concurrent Control），是四種隔離級別中級別最高的Serialize隔離級別。為了提出比LBCC更優越的並發性能方法，MVCC便應運而生。

4. 如何才能防止並發運行

鎖述的概
一. 為什麼要引入鎖
多個用戶同時對資料庫的並發操作時會帶來以下數據不一致的問題:

丟失更新
A,B兩個用戶讀同一數據並進行修改,其中一個用戶的修改結果破壞了另一個修改的結果,比如訂票系統

臟讀
A用戶修改了數據,隨後B用戶又讀出該數據,但A用戶因為某些原因取消了對數據的修改,數據恢復原值,此時B得到的數據就與資料庫內的數據產生了不一致

不可重復讀
A用戶讀取數據,隨後B用戶讀出該數據並修改,此時A用戶再讀取數據時發現前後兩次的值不一致

並發控制的主要方法是封鎖,鎖就是在一段時間內禁止用戶做某些操作以避免產生數據不一致

二 鎖的分類
鎖的類別有兩種分法：
1. 從資料庫系統的角度來看：分為獨占鎖（即排它鎖），共享鎖和更新鎖
MS-SQL Server 使用以下資源鎖模式。
鎖模式 描述
共享 (S) 用於不更改或不更新數據的操作（只讀操作），如 SELECT 語句。
更新 (U) 用於可更新的資源中。防止當多個會話在讀取、鎖定以及隨後可能進行的資源更新時發生常見形式的死鎖。
排它 (X) 用於數據修改操作，例如 INSERT、UPDATE 或 DELETE。確保不會同時同一資源進行多重更新。
意向鎖 用於建立鎖的層次結構。意向鎖的類型為：意向共享 (IS)、意向排它 (IX) 以及與意向排它共享 (SIX)。
架構鎖 在執行依賴於表架構的操作時使用。架構鎖的類型為：架構修改 (Sch-M) 和架構穩定性 (Sch-S)。
大容量更新 (BU) 向表中大容量復制數據並指定了 TABLOCK 提示時使用。

5. 資料庫並發問題對同一內容更改，mysql 表級行級鎖都什麼時候用

一般應用在設計的時候不需要考慮事務並發 .
只要控制好 , 增加,修改,刪除在出錯時候回滾數據就可以了 .

小型應用以及使用頻繁的數據不要輕易加鎖.
應用裡面大量使用鎖只會導致CPU高,且效率低.

如果出現某數據經常查詢,且經常性修改,那麼前期的資料庫數據關聯的設計肯定有問題.

6. 資料庫高並發下樂觀鎖的原理

在高並發下，經常需要處理SELECT之後，在業務層處理邏輯，再執行UPDATE的情況。

若兩個連接並發查詢同一條數據，然後在執行一些邏輯判斷或業務操作後，執行UPDATE，可能出現與預期不相符的結果。

在不使用悲觀鎖與復雜SQL的前提下，可以使用樂觀鎖處理該問題，同時兼顧性能。

場景模擬：

假設一張表兩個欄位，一個id，一個use_count。
表裡存了100個id，每個id對應自己的use_count。

當id每使用一次，use_count要加1。當use_count大於1000時，這個id就不能在被使用了（換句話說 無法從資料庫中查出）。

在高並發情況下，會遇到一種問題：假設數據表中有一條記錄為：id=123456, use_count=999
A與B兩個連接並發查詢這個id=123456，都執行下列SQL:

SELECT*FROMtableWHEREid=123456anse_count<1000;

A先執行，得到id=123456的use_count是999，之後在程序里做了一些邏輯判斷或業務操作後執行SQL：

UPDATEtableSETuse_count+1WHEREid=123456;

在A做判斷且沒有update之前，B也執行了查詢SQL，發現use_count是999，之後它也會執行SQL：

UPDATEtableSETuse_count+1WHEREid=123456;

但是，事實上B不應該取得這個id，因為A已經是第1000個使用者。

處理步驟如下：

1、添加第3個欄位version，int類型，default值為0。version值每次update時作加1處理。

'0'NOTNULLAFTERuse_count;

2、SELECT時同時獲取version值（例如為3）。

SELECTuse_count,versionFROMtableWHEREid=123456ANDuse_count<1000;

3、UPDATE時檢查version值是否為第2步獲取到的值。

UPDATEtableSETversion=4,use_count=use_count+1WHEREid=123456ANDversion=3;

如果UPDATE的記錄數為1，則表示成功。
如果UPDATE的記錄數為0，則表示已經被其他連接UPDATE過了，需作異常處理。

參考地址：http://latrell.me/post-358.html

7. 資料庫的並發操作可能帶來哪些問題 丟失更新 死鎖 違反唯一性約束

資料庫中常見的並發操作所帶來的一致性問題包括：丟失的修改、不可重復讀、讀臟數據、幻影讀（幻影讀在一些資料中往往與不可重復讀歸為一類）。
丟失修改
下面先來看一個例子，說明並發操作帶來的數據的不一致性問題。
考慮飛機訂票系統中的一個活動序列:
甲售票點（甲事務）讀出某航班的機票余額A,設A=16.
乙售票點（乙事務）讀出同一航班的機票余額A,也為16.
甲售票點賣出一張機票,修改余額A←A-1.所以A為15,把A寫回資料庫.
乙售票點也賣出一張機票,修改余額A←A-1.所以A為15,把A寫回資料庫.
結果明明賣出兩張機票，資料庫中機票余額只減少1。
歸納起來就是：兩個事務T1和T2讀入同一數據並修改，T2提交的結果破壞了T1提交的結果，導致T1的修改被丟失。前文（2.1.4數據刪除與更新）中提到的問題及解決辦法往往是針對此類並發問題的。但仍然有幾類問題通過上面的方法解決不了，那就是：
不可重復讀
不可重復讀是指事務T1讀取數據後，事務T2執行更新操作，使T1無法再現前一次讀取結果。具體地講，不可重復讀包括三種情況：
事務T1讀取某一數據後，事務T2對其做了修改，當事務1再次讀該數據時，得到與前一次不同的值。例如，T1讀取B=100進行運算，T2讀取同一數據B，對其進行修改後將B=200寫回資料庫。T1為了對讀取值校對重讀B，B已為200，與第一次讀取值不一致。
事務T1按一定條件從資料庫中讀取了某些數據記錄後，事務T2刪除了其中部分記錄，當T1再次按相同條件讀取數據時，發現某些記錄神密地消失了。
事務T1按一定條件從資料庫中讀取某些數據記錄後，事務T2插入了一些記錄，當T1再次按相同條件讀取數據時，發現多了一些記錄。（這也叫做幻影讀）
讀"臟"數據
讀"臟"數據是指事務T1修改某一數據，並將其寫回磁碟，事務T2讀取同一數據後，T1由於某種原因被撤消，這時T1已修改過的數據恢復原值，T2讀到的數據就與資料庫中的數據不一致，則T2讀到的數據就為"臟"數據，即不正確的數據。
產生上述三類數據不一致性的主要原因是並發操作破壞了事務的隔離性。並發控制就是要用正確的方式調度並發操作，使一個用戶事務的執行不受其它事務的干擾，從而避免造成數據的不一致性。
並發一致性問題的解決辦法
封鎖（Locking）
封鎖是實現並發控制的一個非常重要的技術。所謂封鎖就是事務T在對某個數據對象例如表

8. 舉例說明什麼是分布式資料庫系統並發控制中的全局死鎖

db2 是對某表某一條記錄操作的時候,他會對整個表進行表鎖定,如果設置的事務級別是可重復的讀,那麼另外一個人的同步操作就會被回滾,不過可以通過sql語句指定鎖定級別,sqlserver默認是對行數據進行鎖定,你如果要看這個問題,你可以先研究一下資料庫的鎖定方式和鎖定級別,死鎖是一定存在的,特別是在並發操作很多的情況,這個和你資料庫的設計有關系,關鍵是捕獲到死鎖後怎麼樣對死鎖進行釋放

9. DB2如何解決並發鎖表問題

先定位一下是哪個程序句柄導致的死鎖。
方法一、查看db2diag.log文件
找到DeadLock or Lock timeout 死鎖或鎖超時信息
db2 force application(句柄ID)
直接結束進程即可。
方法二、DB2快照信息
1、看一下DB2快照信息
db2 get snapshot for locks on sample
可以得到類似信息：
資料庫鎖定快照
資料庫名稱 = SAMPLE
資料庫路徑 = D:\IBM\DB2\NODE0000\SQL00001\
輸入資料庫別名 = SAMPLE
掛起的鎖定 = 8
當前已連接的應用程序 = 2
當前正等待鎖定的代理程序數 = 1
應用程序句柄 = 54
應用程序標識 = *LOCAL.DB2.140304192925
序號 = 00001
應用程序名 = db2bp.exe CONNECT
授權標識 = DB2ADMIN
應用程序狀態 = 鎖定等待
應用程序代碼頁 = 1208
掛起的鎖定 = 4
總計等待時間（毫秒） = 247867
鎖定列表
鎖定名稱 = 0x5359534C564C3031DDECEF2841
鎖定屬性 = 0x00000000
發行版標志 = 0x40000000
鎖定計數 = 1
掛起計數 = 0
鎖定對象名 = 2312
對象類型 = 行
表空間名 = IBMDB2SAMPLEREL
表模式 = DB2ADMIN
表名 = TEST
方式 = IX
查看鎖定的詳細信息：db2 get snapshot for locks for application agentid 1728
----（1728是句柄ID）
3、觀察命令db2 list applications的輸出
查看應用程序的狀態是否有鎖定等待(Lock-wait)狀態出現。
執行命令 list applications for db sample show detail;
4、db2 force application(句柄ID)
直接結束進程即可。

10. sql server 2008 並發 鎖定行的難題~

1、如果是為了提高查詢效率的話就沒必要這么做，如果數據量大了導致查詢慢的話可以採用表分區或者建立索引。
2、如果是業務上有這種要求的話，你可以採用ROW_NUMBER函數根據主鍵列排號，不同的線程使用不同的號段，分別插入資料庫。這樣可以避免加鎖操作，從而避免死鎖。
3、盡量去使用INSERT INTO 表(欄位) SELECT 欄位 FROM 表語句。
4、所有線程執行完畢之後使用TRUNCATE TABLE去清理數據比較好。