Настройка 1: скомпилируйте свой собственный glibc без выделенного GCC и используйте его
Эта установка может работать и выполняется быстро, поскольку она не перекомпилирует всю цепочку инструментов GCC, а только glibc.
Но это ненадежно, так как он использует объекты среды выполнения C, такие как crt1.o, crti.o и crtn.o, предоставленные glibc. Это упоминается по адресу: https://sourceware.org/glibc/wiki/Testing/Builds?action=recall&rev=21#Compile_against_glibc_in_an_installed_location Эти объекты выполняют раннюю настройку, на которую полагается glibc, поэтому я не удивлюсь, если что-то выйдет из строя чудесным и удивительно тонким образом.
Для более надежной настройки см. Настройка 2 ниже.
Скомпилируйте glibc и установите локально:
export glibc_install="$(pwd)/glibc/build/install"
git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28
mkdir build
cd build
../configure --prefix "$glibc_install"
make -j `nproc`
make install -j `nproc`
Настройка 1: проверьте сборку
test_glibc.c
#define _GNU_SOURCE
#include <assert.h>
#include <gnu/libc-version.h>
#include <stdatomic.h>
#include <stdio.h>
#include <threads.h>
atomic_int acnt;
int cnt;
int f(void* thr_data) {
for(int n = 0; n < 1000; ++n) {
++cnt;
++acnt;
}
return 0;
}
int main(int argc, char **argv) {
/* Basic library version check. */
printf("gnu_get_libc_version() = %s\n", gnu_get_libc_version());
/* Exercise thrd_create from -pthread,
* which is not present in glibc 2.27 in Ubuntu 18.04.
* https://stackoverflow.com/questions/56810/how-do-i-start-threads-in-plain-c/52453291#52453291 */
thrd_t thr[10];
for(int n = 0; n < 10; ++n)
thrd_create(&thr[n], f, NULL);
for(int n = 0; n < 10; ++n)
thrd_join(thr[n], NULL);
printf("The atomic counter is %u\n", acnt);
printf("The non-atomic counter is %u\n", cnt);
}
Скомпилируйте и запустите с test_glibc.sh:
#!/usr/bin/env bash
set -eux
gcc \
-L "${glibc_install}/lib" \
-I "${glibc_install}/include" \
-Wl,--rpath="${glibc_install}/lib" \
-Wl,--dynamic-linker="${glibc_install}/lib/ld-linux-x86-64.so.2" \
-std=c11 \
-o test_glibc.out \
-v \
test_glibc.c \
-pthread \
;
ldd ./test_glibc.out
./test_glibc.out
Программа выводит ожидаемые:
gnu_get_libc_version() = 2.28
The atomic counter is 10000
The non-atomic counter is 8674
Команда адаптирована из https://sourceware.org/glibc/wiki/Testing/Builds?action=recall&rev=21#Compile_against_glibc_in_an_installed_location, но --sysroot завершился ошибкой:
cannot find /home/ciro/glibc/build/install/lib/libc.so.6 inside /home/ciro/glibc/build/install
поэтому я удалил это.
ldd вывод подтверждает, что ldd и библиотеки, которые мы только что создали, действительно используются должным образом:
+ ldd test_glibc.out
linux-vdso.so.1 (0x00007ffe4bfd3000)
libpthread.so.0 => /home/ciro/glibc/build/install/lib/libpthread.so.0 (0x00007fc12ed92000)
libc.so.6 => /home/ciro/glibc/build/install/lib/libc.so.6 (0x00007fc12e9dc000)
/home/ciro/glibc/build/install/lib/ld-linux-x86-64.so.2 => /lib64/ld-linux-x86-64.so.2 (0x00007fc12f1b3000)
Выходные данные отладки компиляции gcc показывают, что использовались объекты среды выполнения моего хоста, что, как упоминалось ранее, плохо, но я не знаю, как обойти это, например это содержит:
COLLECT_GCC_OPTIONS=/usr/lib/gcc/x86_64-linux-gnu/7/../../../x86_64-linux-gnu/crt1.o
Настройка 1: изменить glibc
Теперь давайте изменим glibc с помощью:
diff --git a/nptl/thrd_create.c b/nptl/thrd_create.c
index 113ba0d93e..b00f088abb 100644
--- a/nptl/thrd_create.c
+++ b/nptl/thrd_create.c
@@ -16,11 +16,14 @@
License along with the GNU C Library; if not, see
<http://www.gnu.org/licenses/>. */
+#include <stdio.h>
+
#include "thrd_priv.h"
int
thrd_create (thrd_t *thr, thrd_start_t func, void *arg)
{
+ puts("hacked");
_Static_assert (sizeof (thr) == sizeof (pthread_t),
"sizeof (thr) != sizeof (pthread_t)");
Затем перекомпилируйте и переустановите glibc, перекомпилируйте и повторно запустите нашу программу:
cd glibc/build
make -j `nproc`
make -j `nproc` install
./test_glibc.sh
и мы видим, что hacked напечатано несколько раз, как и ожидалось.
Это еще раз подтверждает, что мы действительно использовали скомпилированную glibc, а не хост.
Проверено на Ubuntu 18.04.
Настройка 2: первоначальная настройка кросс-стула-NG
Это альтернатива настройке 1, и это наиболее правильная настройка, которую я когда-либо достиг: насколько я могу судить, все правильно, включая объекты времени выполнения C, такие как crt1.o, crti.o и crtn.o.
В этой настройке мы скомпилируем полную специализированную цепочку инструментов GCC, которая использует glibc, который нам нужен.
Единственным недостатком этого метода является то, что сборка займет больше времени. Но я бы не стал рисковать производственной установкой на меньшее.
crossstool-NG - это набор скриптов, который загружает и компилирует для нас все из исходного кода, включая GCC, glibc и binutils.
Да, система сборки GCC настолько плоха, что нам нужен отдельный проект для этого.
Эта установка не идеальна только потому, что crossstool-NG не поддерживает сборку исполняемых файлов без дополнительных -Wl flags, что кажется странным, поскольку мы создали сам GCC. Но вроде все работает, так что это только неудобства.
Получите crossstool-NG, настройте и соберите его:
git clone https://github.com/crosstool-ng/crosstool-ng
cd crosstool-ng
git checkout a6580b8e8b55345a5a342b5bd96e42c83e640ac5
export CT_PREFIX="$(pwd)/.build/install"
export PATH="/usr/lib/ccache:${PATH}"
./bootstrap
./configure --enable-local
make -j `nproc`
./ct-ng x86_64-unknown-linux-gnu
./ct-ng menuconfig
env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`
Сборка занимает от тридцати минут до двух часов.
Единственная обязательная опция конфигурации, которую я вижу, - это согласование версии ядра вашего хоста для использования правильных заголовков ядра. Найдите версию ядра вашего хоста с помощью:
uname -a
который показывает мне:
4.15.0-34-generic
so in menuconfig I do:
поэтому я выбираю:
4.14.71
которая является первой равной или более старой версией. Он должен быть старше, поскольку ядро обратно совместимо.
Настройка 2: дополнительные конфигурации
.config, который мы создали с помощью ./ct-ng x86_64-unknown-linux-gnu, имеет:
CT_GLIBC_V_2_27=y
Чтобы изменить это, в menuconfig выполните:
C-libraryVersion of glibc
сохраните .config и продолжите сборку.
Или, если вы хотите использовать свой собственный источник glibc, например чтобы использовать glibc из последней версии git, выполните вот так:
Paths and misc options
Try features marked as EXPERIMENTAL: set to true
C-library
Source of glibc
Custom location: say yesCustom location
Custom source location: point to a directory containing your glibc source
где glibc был клонирован как:
git clone git://sourceware.org/git/glibc.git
cd glibc
git checkout glibc-2.28
Настройка 2: проверьте это
После того, как вы создали нужный набор инструментов, протестируйте его с помощью:
#!/usr/bin/env bash
set -eux
install_dir="${CT_PREFIX}/x86_64-unknown-linux-gnu"
PATH="${PATH}:${install_dir}/bin" \
x86_64-unknown-linux-gnu-gcc \
-Wl,--dynamic-linker="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib/ld-linux-x86-64.so.2" \
-Wl,--rpath="${install_dir}/x86_64-unknown-linux-gnu/sysroot/lib" \
-v \
-o test_glibc.out \
test_glibc.c \
-pthread \
;
ldd test_glibc.out
./test_glibc.out
Кажется, все работает как в настройке 1, за исключением того, что теперь использовались правильные объекты среды выполнения:
COLLECT_GCC_OPTIONS=/home/ciro/crosstool-ng/.build/install/x86_64-unknown-linux-gnu/bin/../x86_64-unknown-linux-gnu/sysroot/usr/lib/../lib64/crt1.o
Установка 2: неудачная попытка эффективной перекомпиляции glibc
Как поясняется ниже, это невозможно с crossstool-NG.
Если вы просто перестроите;
env -u LD_LIBRARY_PATH time ./ct-ng build CT_JOBS=`nproc`
тогда ваши изменения в пользовательском местоположении исходного кода glibc учитываются, но он строит все с нуля, что делает его непригодным для итеративной разработки.
If we do:
./ct-ng list-steps
он дает хороший обзор этапов сборки:
Available build steps, in order:
- companion_tools_for_build
- companion_libs_for_build
- binutils_for_build
- companion_tools_for_host
- companion_libs_for_host
- binutils_for_host
- cc_core_pass_1
- kernel_headers
- libc_start_files
- cc_core_pass_2
- libc
- cc_for_build
- cc_for_host
- libc_post_cc
- companion_libs_for_target
- binutils_for_target
- debug
- test_suite
- finish
Use "<step>" as action to execute only that step.
Use "+<step>" as action to execute up to that step.
Use "<step>+" as action to execute from that step onward.
поэтому мы видим, что есть шаги glibc, переплетенные с несколькими шагами GCC, в первую очередь libc_start_files предшествует cc_core_pass_2, что, вероятно, является самым дорогостоящим шагом вместе с cc_core_pass_1.
Чтобы построить только один шаг, вы должны сначала установить параметр «Сохранить промежуточные шаги» в .config опции для начальной сборки:
а затем вы можете попробовать:
env -u LD_LIBRARY_PATH time ./ct-ng libc+ -j`nproc`
но, к сожалению, требуется +, как указано на странице: https://github.com/crosstool-ng/crosstool-ng/issues/1033#issuecomment-424877536.
Однако обратите внимание, что перезапуск на промежуточном этапе сбрасывает каталог установки до состояния, которое было на этом этапе. То есть у вас будет перестроенная библиотека libc, но не будет финального компилятора, построенного с этой libc (и, следовательно, нет библиотек компилятора, таких как libstdc ++).
и, по сути, по-прежнему делает перестройку слишком медленной, чтобы ее можно было реализовать в разработке, и я не вижу, как это преодолеть без исправления crossstool-NG.
Более того, начиная с шага libc, похоже, не происходило повторного копирования источника из Custom source location, что еще больше сделало этот метод непригодным для использования.
Бонус: stdlibc ++
Бонус, если вас также интересует стандартная библиотека C ++: Как отредактировать и пересобрать исходный код стандартной библиотеки GCC libstdc ++ C ++?
person
Ciro Santilli 新疆再教育营六四事件ۍ
schedule
22.09.2018
export LD_LIBRARY_PATH=newglibc:$LD_LIBRARY_PATHдействительно решил проблему для меня! Конечно, это не сработает для всех, но это легко исправить, если это сработает! Спасибо! :) - person rinogo schedule 30.06.2017