Question

Я пытаюсь собрать библиотеку C ++ stati c в Linux (в моем случае Ubuntu 18.04), используя GCC, используя Makefile. Я заметил, что проблема не в самом make-файле, а в том, как я пытаюсь скомпилировать и собрать с GCC. Прежде чем я объясню немного подробнее о стороне G CC, вот как выглядит моя текущая иерархия проекта.

В проекте используется библиотека Pybind11 only header, которая находится в каталоге External_Libraries.

Определение и реализация моего класса с именами Core.h и Core.cpp находятся в Internal_libraries вместе с py_utilities.h и any.hpp, которые содержат некоторые служебные функции. (Эти два файла не используются, хотя). и наконец test_lib.cpp, который использует Core.h, находится в root.

Вот как это выглядит:

?MainDirectory  
 ┣ ?External_Libraries  
 ┃ ┗ ?Pybind11    
 ┃   ┗ ?Pybind11    
 ┃     ┗ ?Include      
 ┃ 
 ┣ ?Internal_Libraries  
 ┃ ┣?Core.h  
 ┃ ┣?Core.cpp  
 ┃ ┣?py_utilities.h  
 ┃ ┣?any.hpp  
 ┃
 ┗?test_lib.cpp

Теперь, как вы можете видеть, проект зависит от Pybind11 включают каталоги, а также <Python.h> плюс каталоги lib pythons. Я сталкиваюсь с одинаковыми неопределенными ошибками, когда пытаюсь собрать библиотеку stati c или обычный исполняемый файл. Я включаю необходимые пути поиска (включая и библиотеку) в G CC, например:

Building Core.o:

g++ -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages -c ./Internal_Libraries/Core.cpp -o Core.o

Building test_lib.o:

g++ -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages -c test_lib.cpp -o test_lib.o

и, наконец:
- Сборка test_lib исполняемый файл:

g++ -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages test_lib.o Core.o -o test_lib

Здесь происходит сбой, и я получаю множество неопределенных ошибок который, я думаю, связан с компоновщиком, однако я указал необходимые пути, поэтому я в растерянности, что здесь пошло не так!

Вот ошибки, которые я получаю:

g++ -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages test_lib.o Core.o -o test_lib
test_lib.o: In function `pybind11::cast_error::set_error() const':
test_lib.cpp:(.text._ZNK8pybind1110cast_error9set_errorEv[_ZNK8pybind1110cast_error9set_errorEv]+0x29): undefined reference to `PyExc_RuntimeError'
test_lib.cpp:(.text._ZNK8pybind1110cast_error9set_errorEv[_ZNK8pybind1110cast_error9set_errorEv]+0x34): undefined reference to `PyErr_SetString'
test_lib.o: In function `pybind11::error_scope::error_scope()':
test_lib.cpp:(.text._ZN8pybind1111error_scopeC2Ev[_ZN8pybind1111error_scopeC5Ev]+0x27): undefined reference to `PyErr_Fetch'
test_lib.o: In function `pybind11::error_scope::~error_scope()':

...

Core.o: In function `std::enable_if<((!std::is_floating_point<int>::value)&&std::is_signed<int>::value)&&((sizeof (int))<=(sizeof (long))), pybind11::handle>::type pybind11::detail::type_caster<int, void>::cast<int>(int, pybind11::return_value_policy, pybind11::handle)':
Core.cpp:(.text._ZN8pybind116detail11type_casterIivE4castIiEENSt9enable_ifIXaaaantsrSt17is_floating_pointIT_E5valuesrSt9is_signedIS6_E5valuelestS6_stlENS_6handleEE4typeES6_NS_19return_value_policyESA_[_ZN8pybind116detail11type_casterIivE4castIiEENSt9enable_ifIXaaaantsrSt17is_floating_pointIT_E5valuesrSt9is_signedIS6_E5valuelestS6_stlENS_6handleEE4typeES6_NS_19return_value_policyESA_]+0x2c): undefined reference to `PyLong_FromSsize_t'
Core.o: In function `pybind11::array_t<unsigned char, 16>::ensure(pybind11::handle)':
Core.cpp:(.text._ZN8pybind117array_tIhLi16EE6ensureENS_6handleE[_ZN8pybind117array_tIhLi16EE6ensureENS_6handleE]+0x70): undefined reference to `PyErr_Clear'
Core.o: In function `pybind11::array_t<unsigned char, 16>::raw_array_t(_object*)':
Core.cpp:(.text._ZN8pybind117array_tIhLi16EE11raw_array_tEP7_object[_ZN8pybind117array_tIhLi16EE11raw_array_tEP7_object]+0x26): undefined reference to `PyExc_ValueError'
Core.cpp:(.text._ZN8pybind117array_tIhLi16EE11raw_array_tEP7_object[_ZN8pybind117array_tIhLi16EE11raw_array_tEP7_object]+0x35): undefined reference to `PyErr_SetString'
collect2: error: ld returned 1 exit status

вот ссылка на полный журнал ошибок: журнал ошибок

В случае, если важно содержание Core.h, вот оно:

#ifndef CORE_H

#define CORE_H



/* If we are we on Windows, we want a single define for it.*/

#if !defined(_WIN32) && (defined(__WIN32__) || defined(WIN32) || defined(__MINGW32__))

 #define _WIN32

#endif /* _WIN32 */


#if defined(_WIN32) && defined(_CORE_BUILD_DLL)

/* We are building CORE as a Win32 DLL */

 #define CORE_API __declspec(dllexport)

#elif defined(_WIN32) && defined(CORE_DLL)

/* We are calling CORE as a Win32 DLL */

 #define CORE_API __declspec(dllimport)

#elif defined(__GNUC__) && defined(_CORE_BUILD_DLL)

/* We are building CORE as a shared / dynamic library */

#define CORE_API __attribute__((visibility("default")))

#else

/* We are building or calling CORE as a static library */

 #define CORE_API

#endif


#include <iostream>
#include <string>
#include <vector>
#include <functional>
#include <memory>
#include <pybind11/pybind11.h>
#include <pybind11/embed.h>
#include <pybind11/numpy.h>
#include <pybind11/stl.h>
#include <pybind11/functional.h>

namespace py = pybind11;
using namespace py::literals;

typedef void(*CallbackFn)(bool, std::string, py::array_t<uint8_t>&);
typedef std::function<void(std::string)> LogFunction;
typedef void * HANDLE;


class CORE_API Core

{
private:
    py::scoped_interpreter guard{};
    py::object serviceUtilsModule;
    py::object cls;
    py::object obj;
    py::object startFunc;
...



public:

    Core();
    Core(bool showFeed);
    Core(LogFunction logInfo);
    Core(LogFunction logInfo, LogFunction logWarning);
    Core(LogFunction logInfo, LogFunction logWarning, LogFunction logDebug);
    Core(LogFunction logInfo, LogFunction logWarning, LogFunction logDebug, std::vector<CallbackFn> callbackList);
...
    ~Core();


    void Start(bool async= false);
    py::list GetCallbacks(void);
...
    static void DefaultLoger(std::string str);
};



extern "C"

{
    //COREAPI wchar_t** GetResults(wchar_t* word, int* length, int threshold = 9);
    CORE_API void Start(bool);
    CORE_API void Stop(void);
    CORE_API void SetCpuAffinity(int mask);
    CORE_API void AddCallback(CallbackFn callback);
    CORE_API void RemoveCallback(CallbackFn callback);
    CORE_API void* GetCallbacks(void);
    CORE_API void DefaultLoger(char* str);

    CORE_API void*  CreateHandle();
    CORE_API void*  GetCurrentHandle();
    CORE_API void   DisposeCurrentHandle();
    CORE_API void   SetCurrentHandle(void* handle);
    CORE_API void*  GetHandle();
    CORE_API void   DisposeHandle(void*);

}



#endif // !CORE_H

Проект работает нормально под Windows и Visual C ++ v14 (VS2015), и теперь я пытаюсь сделать то же самое в Linux, используя G CC. Кажется, я явно что-то делаю не так, но не могу понять, где я ошибся! что мне здесь не хватает?

Обновление

После перехода по ссылке ссылка при ручной компиляции pybind11 я закончил:

g++ -O3 -Wall -std=c++11 -fPIC -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages -c ./Internal_Libraries/Core.cpp -o Core.o
g++ -O3 -Wall -std=c++11 -fPIC -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages -c test_lib.cpp -o test_lib.o
g++ -O3 -Wall -std=c++11 -fPIC -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages test_lib.o Core.o -o test_lib

Обратите внимание, что я удалил shared ключевое слово из приведенных выше команд, поэтому оно не создает общую библиотеку! Сказав, что последняя команда по-прежнему выдает ошибки компоновщика:

 g++ -O3 -Wall -std=c++11 -fPIC -I./External_Libraries/pybind11/pybind11/include -I/home/rika/anaconda3/include/python3.7m -L/home/rika/anaconda3/lib -L/home/rika/anaconda3/lib/python3.7/site-packages test_lib.o -o test_lib
test_lib.o: In function `pybind11_static_get':
test_lib.cpp:(.text.pybind11_static_get[pybind11_static_get]+0x3): undefined reference to `PyProperty_Type'
test_lib.o: In function `pybind11_static_set':
test_lib.cpp:(.text.pybind11_static_set[pybind11_static_set]+0x12): undefined reference to `PyProperty_Type'
test_lib.o: In function `pybind11::cast_error::set_error() const':
test_lib.cpp:(.text._ZNK8pybind1110cast_error9set_errorEv[_ZNK8pybind1110cast_error9set_errorEv]+0x10): undefined reference to `PyExc_RuntimeError'
test_lib.cpp:(.text._ZNK8pybind1110cast_error9set_errorEv[_ZNK8pybind1110cast_error9set_errorEv]+0x1c): undefined reference to `PyErr_SetString'
test_lib.o: In function `pybind11::detail::translate_exception(std::__exception_ptr::exception_ptr)':

...


test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0x9a): undefined reference to `PyTuple_Size'
test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0xaa): undefined reference to `PyTuple_GetItem'
test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0xd3): undefined reference to `PyObject_Str'
test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0x1cc): undefined reference to `PyDict_Contains'
test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0x3c1): undefined reference to `PyDict_Contains'
test_lib.cpp:(.text._ZN8pybind116detail5printENS_5tupleENS_4dictE[_ZN8pybind116detail5printENS_5tupleENS_4dictE]+0x518): undefined reference to `PyImport_ImportModule'
test_lib.o: In function `void pybind11::print<(pybind11::return_value_policy)1, pybind11::list>(pybind11::list&&)':
test_lib.cpp:(.text._ZN8pybind115printILNS_19return_value_policyE1EJNS_4listEEEEvDpOT0_[_ZN8pybind115printILNS_19return_value_policyE1EJNS_4listEEEEvDpOT0_]+0x21): undefined reference to `PyDict_New'
test_lib.o: In function `main':
test_lib.cpp:(.text.startup+0x34): undefined reference to `Core::Core(bool)'
test_lib.cpp:(.text.startup+0x41): undefined reference to `Core::SetCpuAffinity(int)'
test_lib.cpp:(.text.startup+0x4b): undefined reference to `Core::Start(bool)'
test_lib.cpp:(.text.startup+0x5b): undefined reference to `Core::GetCallbacks()'
test_lib.cpp:(.text.startup+0x85): undefined reference to `Core::GetCallbacks()'
test_lib.cpp:(.text.startup+0x107): undefined reference to `PyObject_Str'
collect2: error: ld returned 1 exit status

Обновление 2

Глядя на ошибки, мне кажется, что проблема не в самом pybind11, а в Python библиотеки . PyObject_Str, PyObject_Str, PyImport_ImportModule, PyProperty_Type, et c - это все Python C API. Как бы то ни было, я предоставляю Python include и особенно каталог libs, так что g ++ должен быть в состоянии найти libs и связать их! Я в недоумении, почему это не работает! чего здесь не хватает!

Я даже сделал bash файл и перепробовал все пути, которые нашел безрезультатно:

#!/bin/bash  

PYBIND_INCL_DIR=-I/home/rika/Documents/cpp/External_Libraries/pybind11/pybind11/include
PYTHON_INCL_DIR=-I/home/rika/anaconda3/include/python3.7m
PYTHON_INCL_DIR2=-I/home/rika/anaconda3/pkgs/python-3.7.4-h265db76_1/include/python3.7m

PYTHON_LIB_DIRS=-L/home/rika/anaconda3/lib/
PYTHON_LIB_DIRS2=-L/home/rika/anaconda3/lib/python3.7/site-packages/
PYTHON_LIB_DIRS3=-L/home/rika/anaconda3/pkgs/python-3.7.4-h265db76_1/lib/

# echo $PYBIND_INCL_DIR
# echo $PYTHON_INCL_DIR

g++ $PYBIND_INCL_DIR  $PYTHON_INCL_DIR  $PYTHON_LIB_DIRS $PYTHON_LIB_DIRS2 $PYTHON_LIB_DIRS3 -c Core.cpp -o Core.o
g++ $PYBIND_INCL_DIR  $PYTHON_INCL_DIR  $PYTHON_LIB_DIRS $PYTHON_LIB_DIRS2 $PYTHON_LIB_DIRS3 test_lib.cpp Core.o -o test_lib

Breeze · Answer 1 · 07 апреля 2020

Краткий ответ:
Как я уже говорил, ошибки компоновщика были связаны с тем, что библиотека Python не найдена. Чтобы иметь успешную сборку, то есть одну, нужно было только включить эту библиотеку, поэтому последняя команда сборки будет:

PYBIND_INCL_DIR=-I/home/rika/Documents/mahsan_FV/cpp/External_Libraries/pybind11/pybind11/include
PYTHON_INCL_DIR=-I/home/rika/anaconda3/include/python3.7m
PYTHON_LIB_DIRS=-L/home/rika/anaconda3/lib/

g++ $PYBIND_INCL_DIR  $PYTHON_INCL_DIR  $PYTHON_LIB_DIRS -c Core.cpp -o Core.o 
g++ $PYBIND_INCL_DIR  $PYTHON_INCL_DIR  $PYTHON_LIB_DIRS test_lib.cpp Core.o -lpython3.7m -o test_lib

. Она просто компилирует и связывает все объектные файлы вместе и решает проблему.

Более подробное объяснение:

Вы можете получить это, перейдя в каталог Python lib или просто выполнив python3-config --ldflags или python3.7-config --ldflags (в зависимости от вашей версии python, если вы У вас есть несколько установок) в вашем терминале. (Спасибо @ ChrisD )

Однако для корректной работы исполняемого файла папка lib должна быть в PATH, или можно также используйте ldconfig для загрузки необходимой библиотеки. : Я также должен был сделать:

sudo ldconfig /home/rika/anaconda3/lib/

Примечание:
Я также нашел этот сайт очень полезным в процедуре связывания. Я также попытался напрямую использовать библиотеку, которая была:

home/hossein/anaconda3/pkgs/python-3.7.4-h265db76_1/lib/libpython3.7m.a

, что привело к ошибке:

lto1: fatal error: bytecode stream in file ‘/home/rika/anaconda3/pkgs/python-3.7.4-h265db76_1/lib/libpython3.7m.a’ generated with LTO version 6.0 instead of the expected 6.2
compilation terminated.
lto-wrapper: fatal error: g++ returned 1 exit status

, доказывающей, что единственный способ получить правильное связывание - использовать -lpython3.7m !

Получение неопределенной ссылки при попытке построить проект pybind11 с использованием gcc

Обновление

Обновление 2

Пожалуйста, войдите или зарегистрируйтесь чтобы ответить на этот вопрос.

1 Ответ

Более подробное объяснение:

Пожалуйста, войдите или зарегистрируйтесь что бы добавить комментарий.

Получение неопределенной ссылки при попытке построить проект pybind11 с использованием gcc

Обновление

Обновление 2

Пожалуйста, войдите или зарегистрируйтесь чтобы ответить на этот вопрос.

1 Ответ

Более подробное объяснение:

Пожалуйста, войдите или зарегистрируйтесь что бы добавить комментарий.

Похожие темы