MySQL數據目錄結構
2024-07-24 12:54:53
供稿：網友
mysql數據目錄結構
藍森林 http://www.lslnet.com 2000年5月28日 10:40
作 者： 晏子
從概念上講，大多數關系數據庫系統是相似的：它們有一系列數據庫組成，每個數據庫包含一系列數據庫表，但每個系統有各自組織其管理的數據方式，mysql也不例外。
缺省地，所有由mysql服務器mysqld管理的數據存儲在一個稱為mysql數據目錄的地方，所有數據庫都存放在哪兒，也包括提供服務器操作信息的狀態文件。如果你對一個mysql安裝執行管理任務，你應該熟知數據目錄的布局及用途。
本文介紹下列專題：
如何確定數據目錄的位置。 服務器如何組織并提供對數據庫和它管理的表的訪問。 在哪里找到由服務器生成的狀態文件記憶它們包含什么內容。 如何改變缺省地點或數據目錄或單獨數據庫的組織結構。 1、數據目錄的位置
一個缺省數據目錄被編譯進了服務器，如果你從一個源代碼分發安裝mysql，典型的缺省目錄為/usr/local/var，如果從rpm文件安裝則為/var/lib/mysql，如果從一個二進制分發安裝則是/usr/local/mysql/data。
在你啟動服務器，通過使用一個--datadir=/path/to/dir選項可以明確指定數據目錄位置。如果你想把數據目錄置于其它缺省位置外的某處，這很有用。
作為一名mysql管理員，你應該知道你的數據目錄在哪里。如果你運行多個服務器，你應該是到所有數據目錄在哪里，但是如果你不知道確切的位置，由多種方法找到它： 使用mysqladmin variables從你的服務器直接獲得數據目錄路徑名。查找datadir變量的值，在unix上，其輸出類似于：
%mysqladmin variables
+----------------------+----------------------+| variable_name | value |+----------------------+----------------------+| back_log | 5 || connect_timeout | 5 || basedir | /var/local/ || datadir | /usr/local/var/ |....
在windows上，輸出可能看上去像這樣：
c:/mysqladmin variables
+----------------------+----------------------+| variable_name | value |+----------------------+----------------------+| back_log | 5 || connect_timeout | 5 || basedir | c:/mysql/ || datadir | c:/mysql/data/ |....
如果你有多個服務器在運行，它們將在不同的tcp/ip端口或套接字上監聽，通過提供連接服務器正在監聽的端口或套接字的--port或--socket選項，你可以輪流獲得它們每一個的數據目錄信息：
%msqladmin --port=port_name variables
%mysqladmin --socket=/path/to/socket variables
mysqladmin命令可運行在任何你能從其連接服務器的主機上，如果你想在一個遠程主機連接服務器，使用一個--host=host_name選項：
%mysqladmin --host=host_name variables
在windows上，你可以通過使用--pipe強制一個命令管道連接和--socket=pipe_name指定管道名來連接監聽一個命令管道的nt服務器：
c:/mysqladmin --pipe --socket=pipe_name variables
你可以使用ps命令查看任何正在運行mysqld 進程的命令行。
試一下下列命令之一并尋找--datadir：
%ps axww | grep mysql bsd風格
%ps -ef | grep mysqld system v風格
如果你的系統運行多個服務器，ps命令可能特別有用，因為你能馬上發現多個數據目錄位置，缺點是必須在服務器上運行，而且可能沒有有用的信息產生，除非在mysqld命令行上明確指定了--datadir選項。
如果mysql是從一個源代碼分發安裝的，你可以檢查其配置信息確定數據目錄位置。例如，位置可從頂級makefile中獲得，但是注意，位置是makefile中的localstatedir值，不是datadir，而且，如果分發位于一個nfs掛載的文件系統并用來為多個主機構建mysql，配置信息反映了分發被最新構建的主機，這可能不能提供你感興趣的主機的數據目錄信息。 如果上述方式失敗，你可以用find尋找數據庫文件，下列命令尋找“.frm”文件，它是任何mysql安裝的一部分：
% find / -name ".frm" -print
在下文各例中，用datadir表示mysql數據目錄位置。 2、數據目錄結構
mysql數據目錄包含了服務器管理的所有數據目錄，這些文件被組織成一個樹狀結構，通過利用unix或windows文件系統的層次結構直接實現。 每個數據庫對應于數據目錄下的一個目錄。 在一個數據庫中的表對應于數據目錄下的文件。
數據目錄也包含由服務器產生的幾個狀態文件，如日志文件。這些文件提供了關于服務器操作的重要信息。對管理特別在出了問題而試圖確定問題原因時很有價值。例如，如果某個特定查詢殺死服務器，你可以通過檢查日志文件判別搗亂的查詢。
2.1 mysql服務器怎樣提供對數據的訪問
在數據目錄下的一切由一個單獨的實體-mysql服務器mysqld管理，客戶程序絕不直接操作數據。相反，服務器提供數據可訪問的切入點，它是客戶程序與它們想使用的數據之間的中介。
當服務器啟動時，如果有需要，它打開日志文件，然后通過監聽網絡連接位數據目錄呈現一個網絡接口。要訪問數據，客戶程序建立對服務器的一個連接，然后以mysql查詢傳輸請求來執行希望的操作。服務器執行每一個操作并將結果發回用戶。服務器是多線程的并能服務多個同時的客戶連接。然而，因為修改操作一個執行一個，實際效果是順序化請求，以使兩個客戶決不能在同一時刻改變同一記錄。
在正常的情況下，讓服務器作為數據庫訪問的唯一仲裁者提供了避免可從同時訪問數據庫表的多個進程的破壞的保證。管理員應該知道有時服務器沒有對數據目錄的獨裁控制。 當你在一個單個數據目錄上運行多個服務器。一般倪云新一個服務器管理主機上的所有數據庫，但是有可能運行多個服務器。如果這完成提供對多個獨立數據目錄的訪問，沒有相互影響的問題，但喲也能啟動多個服務器并指向同一個目錄。一般地，這不是一個好主意。如果你試圖這樣，最好是你的系統提供良好的文件鎖定功能，否則服務器將不能正確協作。如果你將多個服務器同時寫入日志文件，你也冒著你的日志文件稱為混亂的根源的風險。 在你運行isamchk和myisamchk時。isamchk和myisamchk實用程序用于表的維護、診錯和修復，就想你想的那樣，因為這些程序可以修改表內容，允許它們與服務器正在操作的同時對表操作，這樣能導致表損壞。理解如何限制這種相互影響是很重要的，這樣你不會損壞你的表。 2.2 數據目表示
每個mysql服務器管理的數據庫有自己的數據庫表，它是數據目錄下的一個子目錄，其名字與它表示的數據庫相同。例如數據庫my_db對應于數據庫目錄datadir/my_db。
這種表示允許多個數據庫級的語句在其實現中十分簡單。create database db_name在數據目錄中創建一個db_name空目錄，具有只允許mysql服務器用戶(運行服務器的unix用戶)的屬主和模式，這等價于下列手工在服務器主機上創建數據庫：
%mkdir datadir/db_name%chmod 700 dadadir/db_name
用一個空目錄表示一個新數據庫的最簡單方法與其它數據庫甚至為一個空數據庫創建大量的控制文件或系統文件正好相反。
drop database語句實現同樣簡單。drop database db_name刪除數據庫中的db_name目錄和所有表文件，這幾乎與下列命令一樣：
%rm -rf datadir/db_name
(差別是服務器只刪除具有已知用于表的后綴名的文件。如果你在數據庫目錄創建了其它文件。則服務器保留它們，而且目錄本身不被刪除。
show database基本上不做什么，只是列出位于數據目錄中的目錄名。有些數據庫系統保持一個主表，用于維護所有數據庫，但在mysql無此構件。由于賦予數據目錄結構的簡潔性，數據庫列表隱含在數據目錄的內容中，而且這樣的表不必有額外的開銷。
2.3 數據庫表的表示
每個數據庫在數據庫目錄中有3個文件：一個樣式（描述文件）、一個數據文件和一個索引文件。每個文件的基本名是表名，文件名擴展名代表文件類型。擴展名如下表。數據和索引文件的擴展名指出表使用老式iasm索引或新式myisam索引。
表 mysql文件類型文件類型文件名擴展名文件內容樣式文件.frm描述表的結構（它的列、列類型、索引等）。數據文件.isd(isam)
或.myd(myisam)包含數據文件上的所有索引的索引樹。索引文件.ism(isam)
或.myi(myisam)該索引文件依賴表是否有索引而存在。
當你發出一條create table tbl_name時語句定義表的結構時，服務器創建一個名為tbl_name.frm的文件，它包括該結構的內部編碼，同時也創建一個空數據和索引文件，初始化為包含指出無記錄和無索引的信息（如果create table語句包括索引指定，索引文件反映出這些索引）。對應于表的文件的屬主和模式被設置為只允許mysql服務器用戶訪問。
當你發出一條alter table tbl_name語句時，服務器重新編碼tbl_name.frm，并修改數據和索引文件的內容以反映語句指定的結構改變。對于create index和drop index也是一樣，因為它們被服務器視為與alter table等價。drop table通過刪除對應于表的三個文件來實現。
雖然你可以通過刪除數據庫目錄中對應于表的三個文件，但不能手工創建或修改一個表，如，如果my_db是當前數據庫，drop table my_tbl大概等價于下列命令。
% rm -rf datadir/my_db/my_tbl.*
show table my_db的輸出只是列出my_db數據庫目錄中的.frm文件的基文件名。有些數據庫系統一個注冊表，列舉所有包含在一個數據庫中的表，mysql不是，因為不必要，“注冊表”隱含在數據目錄的結構中。
2.4 操作系統對數據庫和表命名的限制
mysql對命名數據庫和表有一個原則： 名字可以由當前字符集中的任何字母數字字符組成，下劃線和美元符$也可以。 名字最長為64個字符。
然而，因為數據庫和表的名字對應于目錄和文件名，服務器運行的操作系統可能強加額外的限制。
首先，數據庫和表名僅限于對文件名合法的字符，如$在mysql的原則中是允許的，但是如果你的操作系統不允許，則你不能在目錄或表名中使用它。實際上，這對unix或windows不是所擔心的，最大的難度是在執行數據庫管理時直接在shell中引用名字，例如，如果你命名一個數據庫如$my_db，包含一個美元符，任何從shell中對該名字的引用可能被shell解釋為對一個變量的引用：
%ls $my_db
my_db:undefined variable
對此，你必須轉義$字符或用引號禁止其特殊含義：
%ls /$my_db
%ls '$my_db'
如果你用引號，一定要用單引號，而雙引號并不禁止變量解釋。
其次，雖然mysql允許數據庫和表名最長到64個字符，但名字的長度受限于你的操作系統限定的長度，一般這不是一個問題（雖然老的system v強制14個字符）。在這種情況下，你數據庫名的上限為14個字符，而表名上限為10個字符，因為表示表的文件名有一個點（.）和三個字符的擴展名。
第三，文件系統的大小寫敏感性影響到你如何命名和引用數據庫和表名。如果文件系統是大小寫敏感的（如unix），兩個名字my_tbl和my_tbl是不同的表。如果文件系統不是大小寫敏感的（如windows），這兩個名字指的是相同的表。如果你用一個unix服務器開發數據庫，并且如果你有可能轉移到windows，你應該記住這一點。
2.5 mysql狀態文件
除了數據庫目錄，mysql數據目錄還包含很多狀態文件，這些文件總結在下表中。大多數文件的缺省名從服務器主機名生成，在下表中表示為hostname。
表 mysql狀態文件文件類型缺省名文件內容進程idhostname.pid服務器進程的id出錯日志hostname.err啟動和關閉事件和出錯情況一般日志hostname.log連接/斷開事件和查詢信息更新日志hostname.nnn修改表結構級內容的所有查詢文本
當服務器啟動時，它將其進程id寫入進程id（pid）文件中，而在它關閉時，刪除該文件。pid文件是允許服務器本身被其他進程找到的工具。例如，如果你運行mysql.server，在系統關閉時，關閉mysql服務器的腳本檢查pid文件以決定它需要向哪個進程發出一個終止信號。
出錯日志由safe_mysqld創建，作為服務器標準出錯輸出的重定向，它包含任何邪到stderr的消息。這意味著只有你通過調用safe_mysqld啟動服務器，出錯文件才存在（無論如何，它是一個啟動服務器的最好方法，因為如果它由于出錯而退出，safe_mysqld將重啟服務器。）。
一般日志和更新日志是可選的。你可以只開啟你需要的日志類型，用--log和--log-update服務器選項。
一般日志提供服務器操作的一般信息：誰從哪里連接服務器和他們發出什么查詢。更新日志提供查詢信息，但只有修改數據庫內容的查詢。更新日志內容被寫成sql語句，可以將它們提供給mysql客戶程序來執行。如果你遇上崩潰，并且必須倒回備份文件，更新日志就很有用，因為你能重復執行自崩潰時的更新，通過將更新日志反饋給服務器，這允許你將數據庫恢復到崩潰發生時的狀態。
下面是一個簡單的例子，信息出現在一般日志中，它是一個創建一個在數據庫test中表，插入一行，然后刪除表的會話：
9905097:37:09492 [email protected] on test492 queryshow databases492 queryshow tables492 field list tbl_1492 field list tbl_2...9905097:34:22492 querycreate table my_tbl (val int)9905097:34:34492 queryinsert into my_tbl values (1)9905097:34:38492 querydrop table my_tbl9905097:34:40492 quit
一般日志包含日期和時間、服務器進程id、事件類型和事件信息欄目。
同一個會話出現在更新日志中看上去像這樣：
use test;create table my_tbl (val int);insert into my_tbl values(1);drop table my_tbl;
對更新日志，用--log-long-format選項獲得一個擴展形式的日志，擴展日志提供有關誰何時發出每一條查詢，這使用更多的磁盤空間，但如果你想知道誰在做什么，而不用將更新日志對照一般日志的內容找到連接事件。
對上面的會話，擴展更新日志產生這樣的信息：
# time: 990507 7:32:42# [email protected]: paul [paul] @ localhost []use test;create table my_tbl (val int);# [email protected]: paul [paul] @ localhost []insert into my_tbl values(1);# time: 990507 7:32:43# [email protected]: paul [paul] @ localhost []drop table my_tbl;
保證你的日志文件安全并且不讓任意用戶讀取是個好主意。一般日志和更新日志都能包含諸如口令等的敏感信息，因為它們包含查詢文本。如：
9905097:23:314 queryupdate user set password=password("secret")where user="root"
對于檢查和設置數據目錄的權限，請見《mysql安全性指南》。使數據目錄安性的指令包含下列命令：
% chmod 700 datadir
以擁有數據目錄的unix用戶運行此命令。確保服務器也以此用戶運行，否則該命令不僅將其它人拒之門外，它也阻止服務器訪問你的數據庫。
狀態文件出現在數據目錄的頂級目錄，就象數據庫目錄，所以你可能擔心這些文件名是否與數據庫名沖突或出錯（如在服務器執行show databases語句時）。答案是不。狀態和日志文件信息存儲在文件中，而數據庫是目錄，所以可執行程序能用一個簡單的stat()調用區分它們。如果你看一下數據目錄，你可以區分狀態文件和數據庫目錄，用ls -l并檢查模式的第一個字符是一個"_"還是一個"d"。
你也可以簡單地看一下名字，所有狀態文件名包含一個點(".")，而數據庫目錄沒有（.在數據庫名中是無效字符）。
3 重定位數據庫目錄
前面討論的數據目錄結構是缺省配置，所有數據庫和狀態文件均包含其中，然而，你有某些自由決定數據目錄內容的位置，本節討論為什么你可能移走部分數據目錄（或甚至目錄本身）、你能移走什么以及你如何做這些改變。
mysql允許你重定位數據目錄或其中的成員，由幾個原因你為什么要這樣做： 你能將數據目錄放在你缺省所在的文件系統更大容量的文件系統上。 如果你的數據目錄在一個繁忙的硬盤上，你可能把它放在不太忙的磁盤上以均衡磁盤活動。你可以把數據庫和日志文件放在分開的磁盤上或跨磁盤分布。 你可能想運行多個服務器，各自有自己的數據目錄，這是解決每個進程文件描述符限制問題的一種方法，特別是你不能重新配置內核以允許更高的限制。 有些系統在例如/var/run中保存服務器的部分文件，你可能想把mysql的pid文件也放在那兒，為了系統操作的一致性。
3.1 重定位方法
有兩種方法重定位數據目錄的內容： 你可以在服務器啟動時指定選項，在命令行或在一個選項文件的[mysqld]中。 你可以移走要重定位的東西，然后在原位置做一個指向新位置的符號連接。
兩種方法都不能解決你能重定位的一切，下表總結了什么能重定位和用哪種方法重定位。如果你使用選項文件，有可能在全局選項文件/etc/my.cnf（windows上的c:/my.cnf）指定選項。當前的windows版本也尋找系統目錄（c:/windows或c:/nt）。
表 重定位方法重定位方法適用的重定位方法整個數據目錄啟動選項或符號連接單個數據庫目錄符號連接單個數據庫表符號連接pid文件啟動選項一般日志啟動選項更新日志啟動選項
你也可以使用缺省數據目錄中的選項文件my.cnf，但不推薦使用該文件。如果你想重定位數據目錄本身，你不得不讓缺省數據目錄可讀以便使你能在這里放置選項文件指定服務器應該在哪里找到“真正”的數據目錄！這很混亂。如果你想使用一個選項文件指定服務器選項，最好使用/etc/my.cnf。
3.1 檢驗重定位的效果
在試圖重定位任何東西之前，檢驗操作達到預期效果是個好主意。借助于du、df和ls -l命令獲得磁盤空間的信息，但這些依賴于你正確了解你的文件系統的布局。
下面演示一個在你檢驗一個屬目錄重定位時的設計陷阱。假定你的數據目錄是/usr/local/var，而你想把它移到/var/mysql，因為df顯示/var文件系統有很多的空閑空間：
%df /usr /varfilesystem 1k-blocks used avail capacity mounted on/dev/wd0s3e 396895 292126 73018 80% /usr/dev/wd0s3f 1189359 1111924 162287 15% /var
重定位的數據目錄在/usr文件系統上有多少空閑空間呢？要知道它，使用du -s找出該目錄使用多少空間。
%cd /usr/local/var%du -s .133426
這大約是130mb，真實這樣嗎？在數據目錄下試一下df：
%df /usr/local/varfilesystem 1k-blocks used avail capacity mounted on/dev/wd0s3f 1189359 1111924 162287 15% /var
這就奇怪了。如果我們為包含/usr/local/var的文件系統申請空閑空間，為什么卻報告var上的空間呢？這里ls -l提供了答案：
%ls -l /usr/local....lrwxrwxrwx 1 root wheel 10 dec 11 23:33 var -> /var/mysql....
輸出顯示/usr/local/var是對/var/mysql的符號連接，換句話說，數據目錄已經被重定位于/var文件系統，并用一個指向那里的符號連接代替。通過將數據目錄移到/var竟然釋放了/usr上那么多空間！
3.2 重定位數據目錄
要重定位數據目錄，關閉服務器并把數據目錄移到新位置上，然后你應該刪除員數據目錄并用指向新位置的符號連接代替它，或用明確指出新位置的選項重啟服務器。下表列出指定位置的命令行和選項。
表 數據目錄重定位語法選項源語法命令行--data-dir=/path/to/dir選項文件[mysqld]
datadir=/path/to/dir3.3 重定位數據庫
數據庫能通過符號連接的方法移走。要重定位一個數據庫，關閉服務器并移走數據庫目錄并刪除原來的數據庫目錄，用指向新位置的符號連接代替它，然后重啟服務器。
下例顯示你如何將一個數據庫bigdb移到一個不同的地方：
%mysqladmin -u root -p shutdownenter password: ******%cd datadir%tar cf - bigdb | (cd /var/db; tar xf -)%mv bigdb bigdb.origln -s /var/db/bigdb .%safe_mysqld
你應該以該數據目錄的擁有者執行這些命令。為了安全起見，原數據庫目錄改名為bigdb.orig。在你驗證了服務器工作正常后，你可以刪除原數據目錄。
%rm -rf bigdb.orig
3.4 重定位數據庫表
重定位一個單獨的表不是個好主意。你可以通過把表文件移到一個不同地方，并在數據目錄中創建指向這些文件的符號連接進行。然而，如果你發出一條alter table或optimize table語句，將不進行你的修改。
每個語句通過在數據庫目錄中創建一個實現你修改或優化的臨時表，然后刪除原來的表并將臨時表更名為原來的表來完成，結果是你的符號連接被刪除，而且新表又回到數據庫目錄，這是你移走前的原表文件位置。更糟糕的是，你還沒有意識到它們在那兒，繼續占據著空間，而且符號連接已經被破壞，這樣以后當你意識到發生的事情時，如果你忘記你把它們移到什么地方，你可能沒有好辦法追蹤文件了。
因為很難保證具有表訪問權的人不修改或優化表，所以最好把表留在數據庫目錄中。
3.5 重定位狀態文件
你可以重中定位pid文件、一般日志和更新日志。出錯日志由safe_mysqld用啟動選項創建，而不能被重定位（除非你編輯safe_mysqld）。
要在一個不同位置寫入狀態文件，關閉服務器，然后由指定新狀態文件位置的適當選項啟動它。下表列出每一個文件的命令行和選項文件的語法。
表 狀態文件重定位語法選項源語法命令行--pid-file=pidfile
--log=lodfile
--log-update=updatefile選項文件[mysqld]
pid-file=pidfile
log=lodfile
log-update=updatefile
如果你用絕對路徑名指定狀態文件，用該路徑創建文件，否則文件在數據目錄下創建。如，如果你指定--pid-file=/var/run/mysqld.pid，pid文件是/var/run/mysqld.pid。如果你指定-pid-file=mysqld.pid，pid文件是datadir/mysqld.pid。
如果你指定無擴展名的更新日志文件，mysql在它每次打開更新日志時產生順序名。這些名字用一個擴展名.nnn，這里.nnn是還沒被現有更新日志使用的第一個數字（如update.000,update.001等）。你可以通過明確指定擴展名來覆蓋順序名，這時服務器將只使用指定的名字。
