圖片
從開發(fā)者面對的動(dòng)態(tài)庫，對Linux發(fā)行版兼容性差的缺點(diǎn)和痛點(diǎn)出發(fā)，本文梳理問題、探討并分享3種解決思路。
Linux系統(tǒng)如何知道哪些路徑下有動(dòng)態(tài)鏈接庫可供鏈接加載？可借助ldconfig緩存的信息。
ldconfig 是一個(gè)工具程序，用于更新動(dòng)態(tài)鏈接器的緩存。動(dòng)態(tài)鏈接器在加載動(dòng)態(tài)庫時(shí)，會(huì)先查找緩存，如果緩存中已經(jīng)存在對應(yīng)的動(dòng)態(tài)庫的記錄，則直接使用緩存中的信息，否則再根據(jù)環(huán)境變量LD_LIBRARY_PATH從對應(yīng)的目錄內(nèi)找動(dòng)態(tài)庫文件。
那么ldconfig的緩存，究竟存儲在哪里？在內(nèi)存嗎？還是在文件系統(tǒng)？
ldconfg 對動(dòng)態(tài)庫路徑信息的緩存，存儲在哪里？
可以通過命令查詢當(dāng)前系統(tǒng)已緩存了哪些動(dòng)態(tài)庫：
1.命令 ldconfig -p查詢當(dāng)前系統(tǒng)已緩存的動(dòng)態(tài)庫
以下通過命令 ldconfig -p查詢當(dāng)前系統(tǒng)已緩存的動(dòng)態(tài)庫，包含庫文件名稱、版本信息、體系結(jié)構(gòu)、庫文件所在路徑。以下查詢結(jié)果僅展示常用的動(dòng)態(tài)庫，比如 libstdc++，libmysqlclient等動(dòng)態(tài)庫，
user@linuxlibs:~$ ldconfig -p
785 libs found in cache `/etc/ld.so.cache'
…… # std-c++ 動(dòng)態(tài)庫
libstdc++.so.6 (libc6,x86-64) => /lib/x86_64-linux-gnu/libstdc++.so.6
libssl3.so (libc6,x86-64) => /lib/x86_64-linux-gnu/libssl3.so
libssl.so.3 (libc6,x86-64) => /lib/x86_64-linux-gnu/libssl.so.3
libssl.so (libc6,x86-64) => /lib/x86_64-linux-gnu/libssl.so
libssh.so.4 (libc6,x86-64) => /lib/x86_64-linux-gnu/libssh.so.4
…… # python核心動(dòng)態(tài)庫
libpython3.10.so.1.0 (libc6,x86-64) => /lib/x86_64-linux-gnu/libpython3.10.so.1.0
…… # 線程相關(guān)的動(dòng)態(tài)庫
libpthread.so.0 (libc6,x86-64, OS ABI: Linux 3.2.0) => /lib/x86_64-linux-gnu/libpthread.so.0
……
libodbc.so.2 (libc6,x86-64) => /lib/x86_64-linux-gnu/libodbc.so.2
libodbc.so (libc6,x86-64) => /lib/x86_64-linux-gnu/libodbc.so
…… # mysql 客戶端動(dòng)態(tài)庫
libmysqlclient.so.21 (libc6,x86-64) => /lib/x86_64-linux-gnu/libmysqlclient.so.21
libmysqlclient.so (libc6,x86-64) => /lib/x86_64-linux-gnu/libmysqlclient.so
…… # 維護(hù)鏈接信息的動(dòng)態(tài)庫
ld-linux-x86-64.so.2 (libc6,x86-64) => /lib/x86_64-linux-gnu/ld-linux-x86-64.so.2
Cache generated by: ldconfig (Ubuntu GLIBC 2.35-0ubuntu3.4) stable release version 2.352.介紹一個(gè)大多數(shù)可執(zhí)行文件都會(huì)鏈接的動(dòng)態(tài)庫ld-linux-x86-64.so.2
上面最后的/lib/x86_64-linux-gnu/ld-linux-x86-64.so.2是 Linux 系統(tǒng)的一部分。這個(gè)庫主要用于加載和運(yùn)行其他動(dòng)態(tài)鏈接庫。
當(dāng)一個(gè)程序需要使用其他動(dòng)態(tài)鏈接庫中的函數(shù)時(shí)，它會(huì)通過調(diào)用 ld-linux-x86-64.so.2 來加載所需的動(dòng)態(tài)鏈接庫，并解析其中的符號（函數(shù)、變量等）。這樣，程序就可以在運(yùn)行時(shí)動(dòng)態(tài)地使用其他庫中的功能，而不需要在編譯時(shí)將這些庫靜態(tài)鏈接到程序中。
3.ldconfig的緩存文件，在這里
我們注意到輸出信息第一行為785 libs found in cache /etc/ld.so.cache（在緩存文件中找到785個(gè)庫文件記錄），說明/etc/ld.so.cache是 ldconfig 搜索動(dòng)態(tài)庫時(shí)依據(jù)的緩存文件，該緩存文件記錄了785個(gè)動(dòng)態(tài)庫文件的信息，每條信息記錄了key=>value的這樣的鍵值對形式，例如libmysqlclient.so.21 (libc6,x86-64) => /lib/x86_64-linux-gnu/libmysqlclient.so.21。用ls -lht命令查看該緩存文件的屬性：
user@linuxlibs:~$ ls -lht /etc/ld.so.cache
-rw-r--r-- 1 root root 48K Dec 11 10:45 /etc/ld.so.cache
user@linuxlibs:~$ file /etc/ld.so.cache
/etc/ld.so.cache: data #類型是二進(jìn)制數(shù)據(jù)文件，有內(nèi)部格式無法直接查看內(nèi)容從中，我們第一可以明確的是，緩存文件存儲在磁盤。
第二可以推斷，磁盤的緩存文件，可能有通過mmap()方式映射內(nèi)到存中，以滿足系統(tǒng)各類軟件頻繁獲取動(dòng)態(tài)庫信息的效率要求。這個(gè)猜測后續(xù)會(huì)進(jìn)一步驗(yàn)證。
這些動(dòng)態(tài)庫的版本如何被linux系統(tǒng)安裝管理的呢？
首先，Ubuntu linux的動(dòng)態(tài)庫文件，需要通過apt安裝后才會(huì)出現(xiàn)在系統(tǒng)庫目錄內(nèi)。例如C++ 程序在運(yùn)行時(shí)需要鏈接的動(dòng)態(tài)庫libstdc++.so.6.0.30，可通過apt install 安裝包 libstdc++6 獲得。
#可通過 dpkg -L 查詢軟件包 libstdc++6 安裝后新增了哪些文件：
user@linuxlibs:~$ dpkg -L libstdc++6
/.
/usr
/usr/lib
/usr/lib/x86_64-linux-gnu
/usr/lib/x86_64-linux-gnu/libstdc++.so.6.0.30
/usr/lib/x86_64-linux-gnu/libstdc++.so.6
/usr/share/doc/libstdc++6
…… 略安裝后，允許存在多個(gè)不同版本的libstdc++動(dòng)態(tài)庫包，但系統(tǒng)啟用的只是其中一個(gè)：
user@linuxlibs:~$ ls -l /usr/lib/x86_64-linux-gnu/libstdc++.so.6
…… /usr/lib/x86_64-linux-gnu/libstdc++.so.6 -> libstdc++.so.6.0.30我們看到這里的libstc++動(dòng)態(tài)庫版本號是6.0.30。但千萬不要誤以為這是Linux采用的C++標(biāo)準(zhǔn)庫的代碼版本號。動(dòng)態(tài)庫版本號6.0.30表示該動(dòng)態(tài)庫的版本信息。版本號通常由三個(gè)部分組成，分別表示主版本號、次版本號和補(bǔ)丁版本號。
動(dòng)態(tài)庫的版本號通常用于標(biāo)識軟件或庫的不同版本，以便用戶和系統(tǒng)能夠識別和管理不同版本的軟件或庫。在使用動(dòng)態(tài)庫時(shí)，程序會(huì)根據(jù)需要去加載相應(yīng)版本的動(dòng)態(tài)庫。
動(dòng)態(tài)庫的版本號的確定，通常是由庫的開發(fā)者或維護(hù)者根據(jù)庫的更新和發(fā)布情況分配的。因此，即使庫的代碼進(jìn)行了重大更新，版本號也可能只進(jìn)行了微小的變化。所以庫的版本號并不一定與庫的代碼版本直接相關(guān)；即使同一個(gè)vim軟件，在不同的Linux發(fā)行版有不同的打包維護(hù)人，雖然都從軟件官方獲得同一源碼版本號的vim的代碼，但不同Linux發(fā)行版的軟件打包維護(hù)人根據(jù)自己發(fā)行版的情況決定編譯后打包的庫文件的版本。
當(dāng)然，也有些軟件采用兩個(gè)版本號相等的方式發(fā)布軟件版本和代碼，比如Ubuntu的維護(hù)者將OpenGL項(xiàng)目的動(dòng)態(tài)庫版本與代碼版本保持一致，動(dòng)態(tài)庫版本后面以-數(shù)字表示該版本代碼的第幾次正式打包，這個(gè)數(shù)字每次正式打包前都要+1，如圖中的2.2.0-4為Ubuntu 22.04系統(tǒng)的libglew2.2軟件包的2.2.0版本的第4次打包入庫。
雖然這個(gè)版本經(jīng)歷了4次打包發(fā)布，但libglew-2.2.0的4次生成的軟件包，在安裝后，路徑中的動(dòng)態(tài)庫的文件名仍保持.so.2.2.0結(jié)尾。
這是因?yàn)?次打包期間，庫代碼接口沒變，自然不應(yīng)該修改X.Y.Z中的任何一個(gè)數(shù)字。以免破壞/usr/lib/x86_64-linux-gnu/libGLEW.so -> libGLEW.so.2.2.0這種libGLEW.so軟鏈接對實(shí)際動(dòng)態(tài)庫文件libGLEW.so.2.2.0的鏈接效果：
開發(fā)者可以從哪里查詢，動(dòng)態(tài)庫文件的版本號與代碼版本號的對應(yīng)關(guān)系？
如果開發(fā)依賴了 OpenGL（v1，v2，v3都有，libGLEW、libGLut、libGL、libegl-mesa0等名稱繁多） 這種帶有較多版本歷史包袱的開發(fā)庫，有時(shí)必須確定系統(tǒng)已安裝的OpenGL庫的版本號跟開發(fā)要求的庫的代碼版本號的是否匹配，才能確保代碼調(diào)用的函數(shù)跟實(shí)際運(yùn)行環(huán)境的庫的版本能兼容。
那么如何查詢呢？這個(gè)問題沒有為唯一答案，軟件的發(fā)布方式和維護(hù)形式太多了。但那些主流的Linux發(fā)行版的軟件源安裝的軟件包往往采用了近似的策略，方便了用戶查詢幫助信息。如果你的Linux是Ubuntu、Centos，那么安裝后可以直接從命令中獲得大部分信息，包括動(dòng)態(tài)庫版本說明：
(1) Ubuntu使用命令$ apt show libglew2.2查詢軟件幫助信息
(2) Centos 使用命令$ yum info glew-devel查詢軟件幫助信息
[root@device78969 ~]# yum info glew-devel
Loaded plugins: fastestmirror, ovl
Loading mirror speeds from cached hostfile
* base: mirrors.ustc.edu.cn
* extras: mirrors.aliyun.com
* updates: mirrors.163.com
Available Packages
Name : glew-devel
Arch : i686
Version : 1.10.0
Release : 5.el7
Size : 172 k
Repo : base/7/x86_64
Summary : Development files for glew
URL : http://www.ythuaji.com.cn/uploads/allimg/gfgn1qhezjm
License : BSD and MIT
Description : Development files for glew
Name : glew-devel
Arch : x86_64
Version : 1.10.0
Release : 5.el7
Size : 172 k
Repo : base/7/x86_64
Summary : Development files for glew
URL : http://www.ythuaji.com.cn/uploads/allimg/gfgn1qhezjm
License : BSD and MIT
Description : Development files for glew最后，分享3個(gè)思路，解決運(yùn)行時(shí)動(dòng)態(tài)庫不兼容問題
這是很多開發(fā)者發(fā)布軟件包時(shí)最頭痛的，系統(tǒng)自帶的動(dòng)態(tài)庫版本，與軟件運(yùn)行所要求的動(dòng)態(tài)庫不兼容，直接影響了軟件在Linux當(dāng)前系統(tǒng)的正常功能。
評論區(qū)有網(wǎng)友指出，動(dòng)態(tài)庫最大的弊端是跨Linux發(fā)行版部署的時(shí)候，常因?yàn)橐蕾嚨膭?dòng)態(tài)庫版本在不同Linux上實(shí)際安裝的是不同版本，兩個(gè)版本的動(dòng)態(tài)庫未保持向低版本兼容，導(dǎo)致主程序找不到合適的依賴庫版本而無法運(yùn)行。
下面介紹針對這個(gè)問題的3種解法（實(shí)際本質(zhì)上是2種：被動(dòng)、主動(dòng)）
思路1：由shell腳本幫助載入合適的動(dòng)態(tài)庫：
通過局部環(huán)境變量設(shè)置LD_LIBRARY_PATH和PRE_LOAD，讓軟件優(yōu)先使用受支持版本的動(dòng)態(tài)庫。
LD_PRELOAD環(huán)境變量用于指定在加載動(dòng)態(tài)鏈接庫時(shí)優(yōu)先加載的庫文件。通過設(shè)置LD_PRELOAD環(huán)境變量，你可以在程序加載動(dòng)態(tài)鏈接庫之前加載你自己的庫文件，從而實(shí)現(xiàn)對程序行為的修改或調(diào)試。
想在局部生效LD_PRELOAD環(huán)境變量，可以使用以下內(nèi)容寫到一個(gè)statup.sh腳本內(nèi)：
#!/usr/bin/bash
export LD_PRELOAD=/path/to/your/library
./my_dir/my_programe或：
#!/usr/bin/bash
LD_PRELOAD=/path/to/your/library ./my_dir/my_programe其中，/path/to/your/library是你要加載的庫文件的路徑，最好是當(dāng)前可執(zhí)行文件所在目錄下的動(dòng)態(tài)庫文件，以方便管理；./my_dir/my_programe為你要運(yùn)行的可執(zhí)行文件。
LD_PRELOAD環(huán)境變量的使用需要謹(jǐn)慎，因?yàn)樗赡軙?huì)影響程序的正常運(yùn)行，所以只建議在shell腳本內(nèi)部使用，通過腳本運(yùn)行后只有你的my_program受這個(gè)環(huán)境變量加載的動(dòng)態(tài)庫的影響：而且會(huì)優(yōu)先加載你指定的動(dòng)態(tài)庫而不加載其他同名的動(dòng)態(tài)庫，就避免了與系統(tǒng)自帶動(dòng)態(tài)庫的沖突。
這種設(shè)置環(huán)境腳本的思路，在Tomcat和Pycharm的安裝方式和啟動(dòng)方式中被采用。
!!! 提醒：
在使用 LD_PRELOAD 環(huán)境變量進(jìn)行調(diào)試或修改程序行為時(shí)，建議在測試環(huán)境中進(jìn)行，并確保對可能的影響有充分的了解，以免影響系統(tǒng)正常運(yùn)行。
思路2：代碼編程實(shí)現(xiàn)本地主動(dòng)加載動(dòng)態(tài)庫文件，區(qū)別于思路1的被動(dòng)加載方式：
下面是一段偽代碼，演示了由C代碼控制，在運(yùn)行時(shí)才加載動(dòng)態(tài)庫文件到進(jìn)程中。一個(gè)好處是延遲了加載，而且由代碼負(fù)責(zé)檢測該動(dòng)態(tài)庫是否提供了所需功能，若未提供，則卸載動(dòng)態(tài)庫，再去加載其他動(dòng)態(tài)庫：
#include <dll_function_headers.h>
// 定義加載動(dòng)態(tài)庫的函數(shù)
void* load_library(const char* library_path, const char* symbol_name) {
// 打開動(dòng)態(tài)庫
void* handle = dlopen(library_path, RTLD_LAZY);
if (handle == NULL) {
printf("dlopen() failed: %s\n", dlerror());
return NULL;
}
// 查找符號
void* symbol_address = dlsym(handle, symbol_name);
if (symbol_address == NULL) {
printf("dlsym() failed: %s\n", dlerror());
dlclose(handle);
return NULL;
}
// 返回符號地址
return symbol_address;
}
// 定義使用動(dòng)態(tài)庫符號的函數(shù)
int use_symbol(void* symbol_address) {
// 定義符號的函數(shù)指針類型
typedef int (*symbol_func_t)(void);
symbol_func_t symbol_func = (symbol_func_t)symbol_address;
// 調(diào)用符號對應(yīng)的函數(shù)
int result = symbol_func();
return result;
}
int main() {
// 假設(shè)動(dòng)態(tài)庫路徑為 /path/to/library.so，符號名稱為 symbol
const char* library_path = "/path/to/library.so";
const char* symbol_name = "symbol";
// 加載動(dòng)態(tài)庫
void* symbol_address = load_library(library_path, symbol_name);
if (symbol_address == NULL) {
printf("加載動(dòng)態(tài)庫失敗\n");
return 1;
}
// 使用符號
int result = use_symbol(symbol_address);
if (result != 0) {
printf("符號調(diào)用失敗\n");
return 1;
}
// 關(guān)閉動(dòng)態(tài)庫
dlclose(handle);
return 0;
}但這種方式?jīng)]有解決所有本地動(dòng)態(tài)庫都無法支持當(dāng)前Linux系統(tǒng)的特殊場景。
思路3：代碼編程實(shí)現(xiàn)從網(wǎng)絡(luò)主動(dòng)加載動(dòng)態(tài)庫文件，區(qū)別于思路2的方式：
這種方式仍然由本地軟件負(fù)責(zé)加載。但加載的來源改為從服務(wù)端API交互，將本地系統(tǒng)的版本信息告訴服務(wù)端，由服務(wù)端的數(shù)據(jù)中心提供能匹配本地Linux的動(dòng)態(tài)庫文件，由本地軟件將服務(wù)端告知的動(dòng)態(tài)庫文件，下載到本地。然后加載運(yùn)行。
由于配備了后臺服務(wù)，且對各種需要兼容的Linux系統(tǒng)做了測試，準(zhǔn)備了匹配的動(dòng)態(tài)庫下載使用，所以軟件安裝包可以很小。這種方式其實(shí)也是很多軟件采用的軟件自身新版本的更新機(jī)制。
缺點(diǎn)是需要網(wǎng)絡(luò)，開發(fā)階段需要做多種Linux系統(tǒng)的動(dòng)態(tài)庫兼容性測試，在服務(wù)端需要維護(hù)匹配的動(dòng)態(tài)庫文件與信息。
適合于達(dá)到一定使用規(guī)模的軟件采用。
