GreatSQL社區原創內容未經授權不得隨意使用,轉載請聯繫小編並註明來源。 GreatSQL是MySQL的國產分支版本,使用上與MySQL一致。 作者:dan 文章來源:GreatSQL社區原創 由於MySQL 源碼編譯單機耗費的時間過於長,最近MySQL 變成8.0.27 以後編譯時間明顯更耗時 ...
- GreatSQL社區原創內容未經授權不得隨意使用,轉載請聯繫小編並註明來源。
- GreatSQL是MySQL的國產分支版本,使用上與MySQL一致。
- 作者:dan
- 文章來源:GreatSQL社區原創
由於MySQL 源碼編譯單機耗費的時間過於長,最近MySQL 變成8.0.27 以後編譯時間明顯更耗時了,並且辦公室內有多餘的空閑機器。
使用分散式編譯,可以在不改變現有環境的情況下,提高編譯效率。
目前比較常用的編譯工具有2個 distcc
與 icecream
, 本文使用distcc
進行部署。
部署distcc
分為兩個部分一個是服務端,一個是客戶端
程式分別是distccd
和 distcc
服務端
也是我們空餘的設備上
可以基於Docker
部署鏡像版本最好和客戶端一致,編譯器版本需求GCC
或者 Clang
一致
moyu22:/opt/distcc$ cat Dockerfile
FROM ubuntu:20.04
RUN apt update && \
apt install -y net-tools distcc gcc g++ clang-12 && \
apt clean && \
echo "#!/bin/bash \n distccd --daemon --no-detach --no-detach --user nobody --allow 0.0.0.0/0 --log-stderr --stats \${OPT}" > ./entrypoint.sh && \
chmod +x ./entrypoint.sh
# Run the generated shell script.
ENTRYPOINT ["./entrypoint.sh"]
打包一個distccd
的鏡像
docker build -f Dockerfile -t distcc .
Docker
啟動
docker run -t -d -net=host distccd
也可以使用docker-compose.yml
啟動
version: '3'
services:
distcc:
image: "chestnutsj/distcc:latest"
hostname: distcc
container_name: distcc
privileged: true
ports:
- 3632:3632
- 3633:3633
docker-compose -f docker-compoe.yml up -d
預設情況下,將運行所有人都可以運行訪問,如果有需要認證可以在環境變數 OPT 中添加,或者修改預設的埠
客戶端
配置
本地環境 20.04 (),需要編譯項目的機器上,安裝distcc
moyu20: apt install -y distcc
在配置中添加伺服器下的 /etc/distcc/hosts
,也可以在 $HOME/.distcc/hosts
, 功能變數名稱可以按照伺服器優先順序添加
hostname[/LIMIT]
192.168.1.102/32
預設的limit 數量是 4 如果需要更高的效率可以使用更高的數值用
root@dev:/# distcc -j
48
預設limit為 hostname * 4
單個文件可以使用
distcc g++ t1.cpp
以MySQL源碼為例
cmake mysql_source \
-DBUILD_TESTING=OFF -DUSE_GTAGS=OFF -DUSE_CTAGS=OFF \
-DCMAKE_BUILD_TYPE=RelWithDebInfo \
-DFEATURE_SET=community \
-DWITH_INNODB_MEMCACHED=ON -DWITH_ZLIB=bundled -DWITH_LIBEVENT=bundled -DWITH_ZSTD=bundled \
-DENABLE_DOWNLOADS=ON \
-DDOWNLOAD_BOOST=1 \
..
添加指定的編譯
-DCMAKE_C_COMPILER_LAUNCHER=distcc
-DCMAKE_CXX_COMPILER_LAUNCHER=distcc
編譯項目
make -j 32
可以明顯降低編譯時間
監控
編譯期間可以查看distcc
使用情況
distccmon-text 1 間隔時間 1 秒
Enjoy GreatSQL