眾所周知,事務和鎖是mysql中非常重要功能,同時也是面試的重點和難點。本文會詳細介紹事務和鎖的相關概念及其實現原理,相信大家看完之后,一定會對事務和鎖有更加深入的理解。“本文主要內容是根據掘金小冊《從根兒上理解 mysql》整理而來。如想詳細了解,建議購買掘金小冊閱讀。”什么是事務在維基百科中,對事務的定義是:事務是數據庫管理系統(dbms)執行過程中的一個邏輯單位,由一個有限的數據庫操作序列構成。事務的四大特性事務包含四大特性,即原子性(atomicity)、一致性(consistency)、隔離性(isolation)和持久性(durability)(acid)。原子性(atomicity)原子性是指對數據庫的一系列操作,要么全部成功,要么全部失敗,不可能出現部分成功的情況。以轉賬場景為例,一個賬戶的余額減少,另一個賬戶的余額增加,這兩個操作一定是同時成功或者同時失敗的。一致性(consistency)一致性是指數據庫的完整性約束沒有被破壞,在事務執行前后都是合法的數據狀態。這里的一致可以表示數據庫自身的約束沒有被破壞,比如某些字段的唯一性約束、字段長度約束等等;還可以表示各種實際場景下的業務約束,比如上面轉賬操作,一個賬戶減少的金額和另一個賬戶增加的金額一定是一樣的。隔離性(isolation)隔離性指的是多個事務彼此之間是完全隔離、互不干擾的。隔離性的最終目的也是為了保證一致性。持久性(durability)持久性是指只要事務提交成功,那么對數據庫做的修改就被永久保存下來了,不可能因為任何原因再回到原來的狀態。事務的狀態根據事務所處的不同階段,事務大致可以分為以下5個狀態:活動的(active) 當事務對應的數據庫操作正在執行過程中,則該事務處于活動狀態。部分提交的(partially committed) 當事務中的最后一個操作執行完成,但還未將變更刷新到磁盤時,則該事務處于部分提交狀態。失敗的(failed) 當事務處于活動或者部分提交狀態時,由于某些錯誤導致事務無法繼續執行,則事務處于失敗狀態。中止的(aborted) 當事務處于失敗狀態,且回滾操作執行完畢,數據恢復到事務執行之前的狀態時,則該事務處于中止狀態。提交的(committed) 當事務處于部分提交狀態,并且將修改過的數據都同步到磁盤之后,此時該事務處于提交狀態。事務狀態事務隔離級別前面提到過,事務必須具有隔離性。實現隔離性最簡單的方式就是不允許事務并發,每個事務都排隊執行,但是這種方式性能實在太差了。為了兼顧事務的隔離性和性能,事務支持不同的隔離級別。為了方便表述后續的內容,我們先建一張示例表hero。createtablehero(numberint,namevarchar(100),countryvarchar(100),primarykey(number))engine=innodbcharset=utf8;事務并發執行遇到的問題在事務并發執行時,如果不進行任何控制,可能會出現以下4類問題:臟寫(dirty write)臟寫是指一個事務修改了其它事務未提交的數據。
如上圖,session a和session b各開啟了一個事務,session b中的事務先將number列為1的記錄的name列更新為'關羽',然后session a中的事務接著又把這條number列為1的記錄的name列更新為張飛。如果之后session b中的事務進行了回滾,那么session a中的更新也將不復存在,這種現象就稱之為臟寫。臟讀(dirty read)臟讀是指一個事務讀到了其它事務未提交的數據。
如上圖,session a和session b各開啟了一個事務,session b中的事務先將number列為1的記錄的name列更新為'關羽',然后session a中的事務再去查詢這條number為1的記錄,如果讀到列name的值為'關羽',而session b中的事務稍后進行了回滾,那么session a中的事務相當于讀到了一個不存在的數據,這種現象就稱之為臟讀。不可重復讀(non-repeatable read)不可重復讀指的是在一個事務執行過程中,讀取到其它事務已提交的數據,導致兩次讀取的結果不一致。
如上圖,我們在session b中提交了幾個隱式事務(mysql會自動為增刪改語句加事務),這些事務都修改了number列為1的記錄的列name的值,每次事務提交之后,如果session a中的事務都可以查看到最新的值,這種現象也被稱之為不可重復讀。幻讀(phantom)幻讀是指的是在一個事務執行過程中,讀取到了其他事務新插入數據,導致兩次讀取的結果不一致。
如上圖,session a中的事務先根據條件number > 0這個條件查詢表hero,得到了name列值為'劉備'的記錄;之后session b中提交了一個隱式事務,該事務向表hero中插入了一條新記錄;之后session a中的事務再根據相同的條件number > 0查詢表hero,得到的結果集中包含session b中的事務新插入的那條記錄,這種現象也被稱之為幻讀。“不可重復讀和幻讀的區別在于不可重復讀是讀到的是其他事務修改或者刪除的數據,而幻讀讀到的是其它事務新插入的數據。”臟寫的問題太嚴重了,任何隔離級別都必須避免。其它無論是臟讀,不可重復讀,還是幻讀,它們都屬于數據庫的讀一致性的問題,都是在一個事務里面前后兩次讀取出現了不一致的情況。四種隔離級別在sql標準中設立了4種隔離級別,用來解決上面的讀一致性問題。不同的隔離級別可以解決不同的讀一致性問題。read uncommitted:未提交讀。read committed:已提交讀。repeatable read:可重復讀。serializable:串行化。各個隔離級別下可能出現的讀一致性問題如下:隔離級別
臟讀
不可重復讀
幻讀
未提交讀(read uncommitted) 可能 可能 可能
已提交讀(read committed) 不可能 可能 可能
可重復讀(repeatable read) 不可能 不可能 可能(對innodb不可能)
串行化(serializable) 不可能 不可能 不可能
innodb支持四個隔離級別(和sql標準定義的基本一致)。隔離級別越高,事務的并發度就越低。唯一的區別就在于,innodb在可重復讀(repeatable read)的級別就解決了幻讀的問題。這也是innodb使用可重復讀作為事務默認隔離級別的原因。mvccmvcc(multi version concurrency control),中文名是多版本并發控制,簡單來說就是通過維護數據歷史版本,從而解決并發訪問情況下的讀一致性問題。版本鏈在innodb中,每行記錄實際上都包含了兩個隱藏字段:事務id(trx_id)和回滾指針(roll_pointer)。trx_id:事務id。每次修改某行記錄時,都會把該事務的事務id賦值給trx_id隱藏列。roll_pointer:回滾指針。每次修改某行記錄時,都會把undo日志地址賦值給roll_pointer隱藏列。假設hero表中只有一行記錄,當時插入的事務id為80。此時,該條記錄的示例圖如下:
假設之后兩個事務id分別為100、200的事務對這條記錄進行update操作,操作流程如下:
由于每次變動都會先把undo日志記錄下來,并用roll_pointer指向undo日志地址。因此可以認為,對該條記錄的修改日志串聯起來就形成了一個版本鏈,版本鏈的頭節點就是當前記錄最新的值。如下:
readview如果數據庫隔離級別是未提交讀(read uncommitted),那么讀取版本鏈中最新版本的記錄即可。如果是是串行化(serializable),事務之間是加鎖執行的,不存在讀不一致的問題。但是如果是已提交讀(read committed)或者可重復讀(repeatable read),就需要遍歷版本鏈中的每一條記錄,判斷該條記錄是否對當前事務可見,直到找到為止(遍歷完還沒找到就說明記錄不存在)。innodb通過readview實現了這個功能。readview中主要包含以下4個內容:m_ids:表示在生成readview時當前系統中活躍的讀寫事務的事務id列表。min_trx_id:表示在生成readview時當前系統中活躍的讀寫事務中最小的事務id,也就是m_ids中的最小值。max_trx_id:表示生成readview時系統中應該分配給下一個事務的id值。creator_trx_id:表示生成該readview事務的事務id。有了readview之后,我們可以基于以下步驟判斷某個版本的記錄是否對當前事務可見。如果被訪問版本的trx_id屬性值與readview中的creator_trx_id值相同,意味著當前事務在訪問它自己修改過的記錄,所以該版本可以被當前事務訪問。如果被訪問版本的trx_id屬性值小于readview中的min_trx_id值,表明生成該版本的事務在當前事務生成readview前已經提交,所以該版本可以被當前事務訪問。如果被訪問版本的trx_id屬性值大于或等于readview中的max_trx_id值,表明生成該版本的事務在當前事務生成readview后才開啟,所以該版本不可以被當前事務訪問。如果被訪問版本的trx_id屬性值在readview的min_trx_id和max_trx_id之間,那就需要判斷一下trx_id屬性值是不是在m_ids列表中,如果在,說明創建readview時生成該版本的事務還是活躍的,該版本不可以被訪問;如果不在,說明創建readview時生成該版本的事務已經被提交,該版本可以被訪問。在mysql中,read committed和repeatable read隔離級別的的一個非常大的區別就是它們生成readview的時機不同。read committed在每次讀取數據前都會生成一個readview,這樣就能保證每次都能讀到其它事務已提交的數據。repeatable read只在第一次讀取數據時生成一個readview,這樣就能保證后續讀取的結果完全一致。鎖事務并發訪問同一數據資源的情況主要就分為讀-讀、寫-寫和讀-寫三種。讀-讀即并發事務同時訪問同一行數據記錄。由于兩個事務都進行只讀操作,不會對記錄造成任何影響,因此并發讀完全允許。寫-寫即并發事務同時修改同一行數據記錄。這種情況下可能導致臟寫問題,這是任何情況下都不允許發生的,因此只能通過加鎖實現,也就是當一個事務需要對某行記錄進行修改時,首先會先給這條記錄加鎖,如果加鎖成功則繼續執行,否則就排隊等待,事務執行完成或回滾會自動釋放鎖。讀-寫即一個事務進行讀取操作,另一個進行寫入操作。這種情況下可能會產生臟讀、不可重復讀、幻讀。最好的方案是讀操作利用多版本并發控制(mvcc),寫操作進行加鎖。鎖的粒度按鎖作用的數據范圍進行分類的話,鎖可以分為行級鎖和表級鎖。行級鎖:作用在數據行上,鎖的粒度比較小。表級鎖:作用在整張數據表上,鎖的粒度比較大。鎖的分類為了實現讀-讀之間不受影響,并且寫-寫、讀-寫之間能夠相互阻塞,mysql使用了讀寫鎖的思路進行實現,具體來說就是分為了共享鎖和排它鎖:共享鎖(shared locks):簡稱s鎖,在事務要讀取一條記錄時,需要先獲取該記錄的s鎖。s鎖可以在同一時刻被多個事務同時持有。我們可以用select ...... lock in share mode;的方式手工加上一把s鎖。排他鎖(exclusive locks):簡稱x鎖,在事務要改動一條記錄時,需要先獲取該記錄的x鎖。x鎖在同一時刻最多只能被一個事務持有。x鎖的加鎖方式有兩種,第一種是自動加鎖,在對數據進行增刪改的時候,都會默認加上一個x鎖。還有一種是手工加鎖,我們用一個for update給一行數據加上一個x鎖。還需要注意的一點是,如果一個事務已經持有了某行記錄的s鎖,另一個事務是無法為這行記錄加上x鎖的,反之亦然。除了共享鎖(shared locks)和排他鎖(exclusive locks),mysql還有意向鎖(intention locks)。意向鎖是由數據庫自己維護的,一般來說,當我們給一行數據加上共享鎖之前,數據庫會自動在這張表上面加一個意向共享鎖(is鎖);當我們給一行數據加上排他鎖之前,數據庫會自動在這張表上面加一個意向排他鎖(ix鎖)。意向鎖可以認為是s鎖和x鎖在數據表上的標識,通過意向鎖可以快速判斷表中是否有記錄被上鎖,從而避免通過遍歷的方式來查看表中有沒有記錄被上鎖,提升加鎖效率。例如,我們要加表級別的x鎖,這時候數據表里面如果存在行級別的x鎖或者s鎖的,加鎖就會失敗,此時直接根據意向鎖就能知道這張表是否有行級別的x鎖或者s鎖。innodb中的表級鎖innodb中的表級鎖主要包括表級別的意向共享鎖(is鎖)和意向排他鎖(ix鎖)以及自增鎖(auto-inc鎖)。其中is鎖和ix鎖在前面已經介紹過了,這里不再贅述,我們接下來重點了解一下auto-inc鎖。大家都知道,如果我們給某列字段加了auto_increment自增屬性,插入的時候不需要為該字段指定值,系統會自動保證遞增。系統實現這種自動給auto_increment修飾的列遞增賦值的原理主要是兩個:auto-inc鎖:在執行插入語句的時先加上表級別的auto-inc鎖,插入執行完成后立即釋放鎖。如果我們的插入語句在執行前無法確定具體要插入多少條記錄,比如insert ... select這種插入語句,一般采用auto-inc鎖的方式。輕量級鎖:在插入語句生成auto_increment值時先才獲取這個輕量級鎖,然后在auto_increment值生成之后就釋放輕量級鎖。如果我們的插入語句在執行前就可以確定具體要插入多少條記錄,那么一般采用輕量級鎖的方式對auto_increment修飾的列進行賦值。這種方式可以避免鎖定表,可以提升插入性能。“mysql默認根據實際場景自動選擇加鎖方式,當然也可以通過innodb_autoinc_lock_mode強制指定只使用其中一種。”innodb中的行級鎖前面說過,通過mvcc可以解決臟讀、不可重復讀、幻讀這些讀一致性問題,但實際上這只是解決了普通select語句的數據讀取問題。事務利用mvcc進行的讀取操作稱之為快照讀,所有普通的select語句在read committed、repeatable read隔離級別下都算是快照讀。除了快照讀之外,還有一種是鎖定讀,即在讀取的時候給記錄加鎖,在鎖定讀的情況下依然要解決臟讀、不可重復讀、幻讀的問題。由于都是在記錄上加鎖,這些鎖都屬于行級鎖。innodb的行鎖,是通過鎖住索引來實現的,如果加鎖查詢的時候沒有使用過索引,會將整個聚簇索引都鎖住,相當于鎖表了。根據鎖定范圍的不同,行鎖可以使用記錄鎖(record locks)、間隙鎖(gap locks)和臨鍵鎖(next-key locks)的方式實現。假設現在有一張表t,主鍵是id。我們插入了4行數據,主鍵值分別是 1、4、7、10。接下來我們就以聚簇索引為例,具體介紹三種形式的行鎖。記錄鎖(record locks) 所謂記錄,就是指聚簇索引中真實存放的數據,比如上面的1、4、7、10都是記錄。
顯然,記錄鎖就是直接鎖定某行記錄。當我們使用唯一性的索引(包括唯一索引和聚簇索引)進行等值查詢且精準匹配到一條記錄時,此時就會直接將這條記錄鎖定。例如select * from t where id =4 for update;就會將0.17391304347826086" data-type="jpeg" data-w="713" src="/uploads/ueditor/20210420/1-210420155r2422.jpg?" data-backw="552" data-backh="96" />同理,間隙鎖就是鎖定某些間隙區間的。當我們使用用等值查詢或者范圍查詢,并且沒有命中任何一個record,此時就會將對應的間隙區間鎖定。例如select * from t where id =3 for update;或者select * from t where id > 1 and id < 4 for update;就會將(1,4)區間鎖定。臨鍵鎖(next-key locks) 臨鍵指的是間隙加上它右邊的記錄組成的左開右閉區間。比如上述的(1,4]、(4,7]等。
臨鍵鎖就是記錄鎖(record locks)和間隙鎖(gap locks)的結合,即除了鎖住記錄本身,還要再鎖住索引之間的間隙。當我們使用范圍查詢,并且命中了部分record記錄,此時鎖住的就是臨鍵區間。注意,臨鍵鎖鎖住的區間會包含最后一個record的右邊的臨鍵區間。例如select * from t where id > 5 and id <= 7 for update;會鎖住(4,7]、(7,+∞)。mysql默認行鎖類型就是臨鍵鎖(next-key locks)。當使用唯一性索引,等值查詢匹配到一條記錄的時候,臨鍵鎖(next-key locks)會退化成記錄鎖;沒有匹配到任何記錄的時候,退化成間隙鎖。間隙鎖(gap locks)和臨鍵鎖(next-key locks)都是用來解決幻讀問題的,在已提交讀(read committed)隔離級別下,間隙鎖(gap locks)和臨鍵鎖(next-key locks)都會失效!
美國獨立服務器的優勢分析介紹北京網絡公司SEO入門者需要知道那些技巧?上海網站建設,網站建設的建設網站到底需要多少錢?SEO專員必備的技能是什么您需要了解有關外包網站開發的哪些知識?企業做網站如何說服公司在網站上做出決定企業網站SEO優化方案大全