SWIG Python C / C ++.Полученный модуль пуст, ошибок нет - PullRequest
0 голосов
/ 30 января 2019

Для всех, кто в будущем

Решение в комментариях к вопросу и ответу.


Я пытаюсь создать интерфейс Python для musly программное обеспечение (C / C ++), более конкретно для libmusly, с swig.Я использую каталог сборки, который является каталогом / libmusly из связанного репозитория с каталогом / include из того же репо внутри него.

Я использую следующий интерфейс swig с именем lib.i, так какметоды, к которым я хочу получить доступ, находятся в файле lib.cpp.Я заранее скажу, что раздел в конце заставляет меня думать, что проблема в этом файле.

/* lib.i */ 
%module libmusly 
%{ 
typedef struct {
    void* method;
    char* method_name;
    void* decoder;
    char* decoder_name; } musly_jukebox;

typedef float musly_track;

typedef int musly_trackid;

const char* musly_version();

void musly_debug(
        int level);

const char* musly_jukebox_listmethods();

const char* musly_jukebox_listdecoders();

const char* musly_jukebox_aboutmethod(
        musly_jukebox* jukebox);

musly_jukebox* musly_jukebox_poweron(
        const char* method,
        const char* decoder);   int musly_jukebox_similarity(
        musly_jukebox* jukebox,
        musly_track* seed_track,
        musly_trackid seed_trackid,
        musly_track** tracks,
        musly_trackid* trackids,
        int num_tracks,
        float* similarities);

musly_track* musly_track_alloc(
        musly_jukebox* jukebox);

void musly_track_free(
        musly_track* track);

int musly_track_size(
        musly_jukebox* jukebox);

int musly_track_analyze_audiofile(
        musly_jukebox* jukebox,
        const char* audiofile,
        float excerpt_length,
        float excerpt_start,
        musly_track* track);    
%}

Я использую следующий файл для сборки и связывания его:

#!/bin/bash

echo "Generating swig wrapper file." 
swig3.0 -c++ -python lib.i

echo "Compiling." 
c++ -fPIC -c -lstdc++ -DNDEBUG -Dlibmusly_EXPORTS
-DHAVE_AVUTIL_CHANNEL_LAYOUT -DMUSLY_VERSION=\"0.2\" -I./ -I./include/ -I./libresample/ -I./decoders/ -I./kissfft/ -I./methods/ -I/usr/include/python3.5m/ -I/usr/include/eigen3/ -I/usr/include/x86_64-linux-gnu lib_wrap.cxx kissfft/kiss_fft.c kissfft/kiss_fftr.c methods/mandelellis.cpp methods/timbre.cpp decoders/libav.cpp resampler.cpp plugins.cpp method.cpp decoder.cpp windowfunction.cpp powerspectrum.cpp melspectrum.cpp discretecosinetransform.cpp mfcc.cpp gaussianstatistics.cpp mutualproximity.cpp lib.cpp

c++ -fPIC -c -lstdc++ -DNDEBUG -Dlibmusly_EXPORTS
-DHAVE_AVUTIL_CHANNEL_LAYOUT -DMUSLY_VERSION=\"0.2\" -I./ -I./include/ -I./libresample/ -I./decoders/ -I./kissfft/ -I./methods/ -I/usr/include/python3.5m/ -I/usr/include/eigen3/ -I/usr/include/x86_64-linux-gnu libresample/filterkit.c libresample/resamplesubs.c libresample/resample.c 

echo "Linking." 
cc  -fPIC   -shared -Wl,-soname,libmusly_resample.so
-o libmusly_resample.so libresample/filterkit.o libresample/resamplesubs.o libresample/resample.o 

c++ -fPIC  -shared -Wl,-soname,_libmusly.so -o _libmusly.so kiss_fft.o kiss_fftr.o mandelellis.o timbre.o libav.o resampler.o plugins.o method.o decoder.o windowfunction.o powerspectrum.o melspectrum.o discretecosinetransform.o mfcc.o gaussianstatistics.o mutualproximity.o libmusly_resample.so lib.o lib_wrap.o -lavcodec
-lavformat -lavutil -lpython3.5m

Упомянутый в названии я могу импортировать полученный модуль в интерпретатор Python, с которым я связан, 3,5 м, без ошибок.Но у модуля просто нет методов, кроме стандартных, которые бывают и заканчиваются на «_» (подчеркивание), и несколько методов, связанных с swig, которые также начинаются и заканчиваются подчеркиванием.

Я попытался импортироватьlibmusly и _libmusly, первое всегда содержит последнее в любом случае.Методы внутри них разные, но существует одна и та же проблема, ни один из моих методов не существует.

Файлы в каталоге после компиляции:

./:
build.sh
decoder.cpp
decoder.h
decoder.o
decoders
discretecosinetransform.cpp
discretecosinetransform.h
discretecosinetransform.o
files.txt
filterkit.o
gaussian.h
gaussianstatistics.cpp
gaussianstatistics.h
gaussianstatistics.o
idpool.h
include
kissfft
kiss_fft.o
kiss_fftr.o
libav.o
lib.cpp
lib.i
libmusly.py
libmusly_resample.so
_libmusly.so
lib.o
libresample
lib_wrap.cxx
lib_wrap.o
mandelellis.o
melspectrum.cpp
melspectrum.h
melspectrum.o
method.cpp
method.h
method.o
methods
mfcc.cpp
mfcc.h
mfcc.o
mutualproximity.cpp
mutualproximity.h
mutualproximity.o
plugins.cpp
plugins.h
plugins.o
powerspectrum.cpp
powerspectrum.h
powerspectrum.o
resample.o
resampler.cpp
resampler.h
resampler.o
resamplesubs.o
timbre.o
windowfunction.cpp
windowfunction.h
windowfunction.o

./decoders:
libav.cpp
libav.h

./include:
CMakeLists.txt
minilog.h
minilog.h.gch
musly

./include/musly:
musly.h
musly.h.gch
musly_types.h

./kissfft:
CHANGELOG
COPYING
kiss_fft.c
_kiss_fft_guts.h
kiss_fft.h
kiss_fftr.c
kiss_fftr.h
README
README.simd
TIPS

./libresample:
CMakeLists.txt
filterkit.c
filterkit.h
filterkit.o
libresample.h
LICENSE.txt
README.txt
resample.c
resample_defs.h
resample.o
resamplesubs.c
resamplesubs.o

./methods:
mandelellis.cpp
mandelellis.h
timbre.cpp
timbre.h

Содержимое libmusly.py:

# This file was automatically generated by SWIG (http://www.swig.org).
# Version 3.0.10
#
# Do not make changes to this file unless you know what you are doing--modify
# the SWIG interface file instead.





from sys import version_info as _swig_python_version_info
if _swig_python_version_info >= (2, 7, 0):
    def swig_import_helper():
        import importlib
        pkg = __name__.rpartition('.')[0]
        mname = '.'.join((pkg, '_libmusly')).lstrip('.')
        try:
            return importlib.import_module(mname)
        except ImportError:
            return importlib.import_module('_libmusly')
    _libmusly = swig_import_helper()
    del swig_import_helper
elif _swig_python_version_info >= (2, 6, 0):
    def swig_import_helper():
        from os.path import dirname
        import imp
        fp = None
        try:
            fp, pathname, description = imp.find_module('_libmusly', [dirname(__file__)])
        except ImportError:
            import _libmusly
            return _libmusly
        if fp is not None:
            try:
                _mod = imp.load_module('_libmusly', fp, pathname, description)
            finally:
                fp.close()
            return _mod
    _libmusly = swig_import_helper()
    del swig_import_helper
else:
    import _libmusly
del _swig_python_version_info
try:
    _swig_property = property
except NameError:
    pass  # Python < 2.2 doesn't have 'property'.

try:
    import builtins as __builtin__
except ImportError:
    import __builtin__

def _swig_setattr_nondynamic(self, class_type, name, value, static=1):
    if (name == "thisown"):
        return self.this.own(value)
    if (name == "this"):
        if type(value).__name__ == 'SwigPyObject':
            self.__dict__[name] = value
            return
    method = class_type.__swig_setmethods__.get(name, None)
    if method:
        return method(self, value)
    if (not static):
        if _newclass:
            object.__setattr__(self, name, value)
        else:
            self.__dict__[name] = value
    else:
        raise AttributeError("You cannot add attributes to %s" % self)


def _swig_setattr(self, class_type, name, value):
    return _swig_setattr_nondynamic(self, class_type, name, value, 0)


def _swig_getattr(self, class_type, name):
    if (name == "thisown"):
        return self.this.own()
    method = class_type.__swig_getmethods__.get(name, None)
    if method:
        return method(self)
    raise AttributeError("'%s' object has no attribute '%s'" % (class_type.__name__, name))


def _swig_repr(self):
    try:
        strthis = "proxy of " + self.this.__repr__()
    except __builtin__.Exception:
        strthis = ""
    return "<%s.%s; %s >" % (self.__class__.__module__, self.__class__.__name__, strthis,)

try:
    _object = object
    _newclass = 1
except __builtin__.Exception:
    class _object:
        pass
    _newclass = 0

# This file is compatible with both classic and new-style classes.

Я использую Debian 9 на Intel i3 с ~ 2013 года, все было установлено из репозиториев.Swig - это версия 3 и c ++ 6.3.0.Документация Swig рекомендует c ++ для компиляции c ++, но я попробовал другие компиляторы и получил тот же результат.


Когда я пытаюсь добавить следующий код в конец /libmusly/CMakeLists.txt и компилировать Iполучить два файла "libmusly.py" и "_libmusly.so", первый из которых мне нужно переименовать в "_libmusly.py" только для того, чтобы получить ту же проблему.Но результирующий _libmusly.so намного больше, чем тот, который я получаю другим способом, 14,6 МБ против 3,5 МБ.

FIND_PACKAGE(SWIG REQUIRED) INCLUDE(${SWIG_USE_FILE})

FIND_PACKAGE(PythonLibs) INCLUDE_DIRECTORIES(${LIBMUSLY_INCLUDE}    ${EIGEN3_INCLUDE_DIR}   ${LIBAV_INCLUDE_DIRS}   ${CMAKE_CURRENT_SOURCE_DIR}     ${PYTHON_INCLUDE_PATH})

INCLUDE_DIRECTORIES(${CMAKE_CURRENT_SOURCE_DIR})

SET(CMAKE_SWIG_FLAGS "")

SET_SOURCE_FILES_PROPERTIES(lib.i PROPERTIES CPLUSPLUS ON) SET_SOURCE_FILES_PROPERTIES(lib.i PROPERTIES SWIG_FLAGS "-includeall") SWIG_ADD_MODULE(libmusly python lib.i
    kissfft/kiss_fft.c
    kissfft/kiss_fftr.c
    methods/mandelellis.cpp
    methods/timbre.cpp
    decoders/libav.cpp
    resampler.cpp
    plugins.cpp
    method.cpp
    decoder.cpp
    windowfunction.cpp
    powerspectrum.cpp
    melspectrum.cpp
    discretecosinetransform.cpp
    mfcc.cpp
    gaussianstatistics.cpp
    mutualproximity.cpp
    lib.cpp) SWIG_LINK_LIBRARIES(libmusly
    ${LIBMUSLY_LIBS}
    ${LIBAV_LIBRARIES}
    ${LIBMUSLY_EXTERNAL}
    ${PYTHON_LIBRARIES})

Обновление после ответа Марка

Iбольше не могу импортировать полученный модуль после использования %inline перед блоком %{ %}.Интерпретатор жалуется на неопределенный символ, даже если он определен в файлах .i и .cpp.Я думаю, что это может быть ошибкой компоновки, но я не знаю что.Ошибка:

Traceback (most recent call last):
  File "/home/tuco/Desenvolvimento/libmusly_swig/libmusly.py", line 18, in swig_import_helper
    return importlib.import_module(mname)
  File "/usr/lib/python3.5/importlib/__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "<frozen importlib._bootstrap>", line 986, in _gcd_import
  File "<frozen importlib._bootstrap>", line 969, in _find_and_load
  File "<frozen importlib._bootstrap>", line 958, in _find_and_load_unlocked
  File "<frozen importlib._bootstrap>", line 666, in _load_unlocked
  File "<frozen importlib._bootstrap>", line 577, in module_from_spec
  File "<frozen importlib._bootstrap_external>", line 914, in create_module
  File "<frozen importlib._bootstrap>", line 222, in _call_with_frames_removed
ImportError: /home/tuco/Desenvolvimento/libmusly_swig/_libmusly.so: undefined symbol: _Z26musly_jukebox_listdecodersv

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "<string>", line 1, in <module>
  File "/home/tuco/Desenvolvimento/libmusly_swig/libmusly.py", line 21, in <module>
    _libmusly = swig_import_helper()
  File "/home/tuco/Desenvolvimento/libmusly_swig/libmusly.py", line 20, in swig_import_helper
    return importlib.import_module('_libmusly')
  File "/usr/lib/python3.5/importlib/__init__.py", line 126, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
ImportError: /home/tuco/Desenvolvimento/libmusly_swig/_libmusly.so: undefined symbol: _Z26musly_jukebox_listdecodersv

Новый libmusly.py

# This file was automatically generated by SWIG (http://www.swig.org).
# Version 3.0.10
#
# Do not make changes to this file unless you know what you are doing--modify
# the SWIG interface file instead.





from sys import version_info as _swig_python_version_info
if _swig_python_version_info >= (2, 7, 0):
    def swig_import_helper():
        import importlib
        pkg = __name__.rpartition('.')[0]
        mname = '.'.join((pkg, '_libmusly')).lstrip('.')
        try:
            return importlib.import_module(mname)
        except ImportError:
            return importlib.import_module('_libmusly')
    _libmusly = swig_import_helper()
    del swig_import_helper
elif _swig_python_version_info >= (2, 6, 0):
    def swig_import_helper():
        from os.path import dirname
        import imp
        fp = None
        try:
            fp, pathname, description = imp.find_module('_libmusly', [dirname(__file__)])
        except ImportError:
            import _libmusly
            return _libmusly
        if fp is not None:
            try:
                _mod = imp.load_module('_libmusly', fp, pathname, description)
            finally:
                fp.close()
            return _mod
    _libmusly = swig_import_helper()
    del swig_import_helper
else:
    import _libmusly
del _swig_python_version_info
try:
    _swig_property = property
except NameError:
    pass  # Python < 2.2 doesn't have 'property'.

try:
    import builtins as __builtin__
except ImportError:
    import __builtin__

def _swig_setattr_nondynamic(self, class_type, name, value, static=1):
    if (name == "thisown"):
        return self.this.own(value)
    if (name == "this"):
        if type(value).__name__ == 'SwigPyObject':
            self.__dict__[name] = value
            return
    method = class_type.__swig_setmethods__.get(name, None)
    if method:
        return method(self, value)
    if (not static):
        if _newclass:
            object.__setattr__(self, name, value)
        else:
            self.__dict__[name] = value
    else:
        raise AttributeError("You cannot add attributes to %s" % self)


def _swig_setattr(self, class_type, name, value):
    return _swig_setattr_nondynamic(self, class_type, name, value, 0)


def _swig_getattr(self, class_type, name):
    if (name == "thisown"):
        return self.this.own()
    method = class_type.__swig_getmethods__.get(name, None)
    if method:
        return method(self)
    raise AttributeError("'%s' object has no attribute '%s'" % (class_type.__name__, name))


def _swig_repr(self):
    try:
        strthis = "proxy of " + self.this.__repr__()
    except __builtin__.Exception:
        strthis = ""
    return "<%s.%s; %s >" % (self.__class__.__module__, self.__class__.__name__, strthis,)

try:
    _object = object
    _newclass = 1
except __builtin__.Exception:
    class _object:
        pass
    _newclass = 0

class musly_jukebox(_object):
    __swig_setmethods__ = {}
    __setattr__ = lambda self, name, value: _swig_setattr(self, musly_jukebox, name, value)
    __swig_getmethods__ = {}
    __getattr__ = lambda self, name: _swig_getattr(self, musly_jukebox, name)
    __repr__ = _swig_repr
    __swig_setmethods__["method"] = _libmusly.musly_jukebox_method_set
    __swig_getmethods__["method"] = _libmusly.musly_jukebox_method_get
    if _newclass:
        method = _swig_property(_libmusly.musly_jukebox_method_get, _libmusly.musly_jukebox_method_set)
    __swig_setmethods__["method_name"] = _libmusly.musly_jukebox_method_name_set
    __swig_getmethods__["method_name"] = _libmusly.musly_jukebox_method_name_get
    if _newclass:
        method_name = _swig_property(_libmusly.musly_jukebox_method_name_get, _libmusly.musly_jukebox_method_name_set)
    __swig_setmethods__["decoder"] = _libmusly.musly_jukebox_decoder_set
    __swig_getmethods__["decoder"] = _libmusly.musly_jukebox_decoder_get
    if _newclass:
        decoder = _swig_property(_libmusly.musly_jukebox_decoder_get, _libmusly.musly_jukebox_decoder_set)
    __swig_setmethods__["decoder_name"] = _libmusly.musly_jukebox_decoder_name_set
    __swig_getmethods__["decoder_name"] = _libmusly.musly_jukebox_decoder_name_get
    if _newclass:
        decoder_name = _swig_property(_libmusly.musly_jukebox_decoder_name_get, _libmusly.musly_jukebox_decoder_name_set)

    def __init__(self):
        this = _libmusly.new_musly_jukebox()
        try:
            self.this.append(this)
        except __builtin__.Exception:
            self.this = this
    __swig_destroy__ = _libmusly.delete_musly_jukebox
    __del__ = lambda self: None
musly_jukebox_swigregister = _libmusly.musly_jukebox_swigregister
musly_jukebox_swigregister(musly_jukebox)


def musly_version():
    return _libmusly.musly_version()
musly_version = _libmusly.musly_version

def musly_debug(level):
    return _libmusly.musly_debug(level)
musly_debug = _libmusly.musly_debug

def musly_jukebox_listmethods():
    return _libmusly.musly_jukebox_listmethods()
musly_jukebox_listmethods = _libmusly.musly_jukebox_listmethods

#def musly_jukebox_listdecoders():
#    return _libmusly.musly_jukebox_listdecoders()
#musly_jukebox_listdecoders = _libmusly.musly_jukebox_listdecoders

def musly_jukebox_aboutmethod(jukebox):
    return _libmusly.musly_jukebox_aboutmethod(jukebox)
musly_jukebox_aboutmethod = _libmusly.musly_jukebox_aboutmethod

def musly_jukebox_poweron(method, decoder):
    return _libmusly.musly_jukebox_poweron(method, decoder)
musly_jukebox_poweron = _libmusly.musly_jukebox_poweron

def musly_jukebox_similarity(jukebox, seed_track, seed_trackid, tracks, trackids, num_tracks, similarities):
    return _libmusly.musly_jukebox_similarity(jukebox, seed_track, seed_trackid, tracks, trackids, num_tracks, similarities)
musly_jukebox_similarity = _libmusly.musly_jukebox_similarity

def musly_track_alloc(jukebox):
    return _libmusly.musly_track_alloc(jukebox)
musly_track_alloc = _libmusly.musly_track_alloc

def musly_track_free(track):
    return _libmusly.musly_track_free(track)
musly_track_free = _libmusly.musly_track_free

def musly_track_size(jukebox):
    return _libmusly.musly_track_size(jukebox)
musly_track_size = _libmusly.musly_track_size

def musly_track_analyze_audiofile(jukebox, audiofile, excerpt_length, excerpt_start, track):
    return _libmusly.musly_track_analyze_audiofile(jukebox, audiofile, excerpt_length, excerpt_start, track)
musly_track_analyze_audiofile = _libmusly.musly_track_analyze_audiofile
# This file is compatible with both classic and new-style classes.

1 Ответ

0 голосов
/ 31 января 2019

В файле .i код между %{ и %} напрямую включен в оболочку без изменений.Код на уровне модуля анализируется SWIG, и создаются функции-оболочки.Например:

%module test

%{
int func(int a, int b) { return a + b; }  // declares a function that will appear in test_wrap.c
%}

int func(int a, int b);  // SWIG creates a wrapper function in test_wrap.c 

Вы также можете сделать %inline %{ %}, который одновременно объявляет и создает оболочки:

%module test

%inline %{
int func(int a, int b) { return a + b; }
%}
...