Ошибка компиляции Cython & Hadoopy ... есть идеи по исправлению? - PullRequest
Новая
       42

Ошибка компиляции Cython & Hadoopy ... есть идеи по исправлению?

2 голосов
/ 22 сентября 2011

Я пытаюсь запустить Hadoopy , но получаю ошибку компиляции в OS X: 

ImportError: Building module failed: ["CompileError: command 'llvm-gcc-4.2' failed with exit status 1\n"

У меня /Developer/usr/bin в моем $PATH, и я использую последнюю версию XCode на OS X Lion 10.7. Cython был установлен через easy_install.

Полный вывод: 

>>> import pyximport; pyximport.install()
>>> import hadoopy
/Users/dolan/.pyxbld/temp.macosx-10.7-intel-2.7/pyrex/hadoopy/_main.c:236:22: error: getdelim.h: No such file or directory
/Users/dolan/.pyxbld/temp.macosx-10.7-intel-2.7/pyrex/hadoopy/_main.c:236:22: error: getdelim.h: No such file or directory
/Users/dolan/.pyxbld/temp.macosx-10.7-intel-2.7/pyrex/hadoopy/_main.c: In function ‘__pyx_f_7hadoopy_5_main_11HadoopyTask_read_offset_value_text’:
/Users/dolan/.pyxbld/temp.macosx-10.7-intel-2.7/pyrex/hadoopy/_main.c:4399: warning: implicit conversion shortens 64-bit value into a 32-bit value
lipo: can't open input file: /var/folders/8b/n0j5pn_13qn_x8p2v4f848zh0000gn/T//ccC8x2Ex.out (No such file or directory)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/Library/Python/2.7/site-packages/hadoopy/__init__.py", line 22, in <module>
    from _main import run, print_doc_quit
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/pyximport/pyximport.py", line 335, in load_module
    self.pyxbuild_dir)
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/pyximport/pyximport.py", line 183, in load_module
    so_path = build_module(name, pyxfilename, pyxbuild_dir)
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/pyximport/pyximport.py", line 167, in build_module
    reload_support=pyxargs.reload_support)
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/pyximport/pyxbuild.py", line 85, in pyx_to_dll
    dist.run_commands()
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/dist.py", line 953, in run_commands
    self.run_command(cmd)
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/dist.py", line 972, in run_command
    cmd_obj.run()
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/Cython/Distutils/build_ext.py", line 135, in run
    _build_ext.build_ext.run(self)
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/command/build_ext.py", line 340, in run
    self.build_extensions()
  File "/Library/Python/2.7/site-packages/Cython-0.15.1-py2.7-macosx-10.7-intel.egg/Cython/Distutils/build_ext.py", line 143, in build_extensions
    self.build_extension(ext)
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/command/build_ext.py", line 499, in build_extension
    depends=ext.depends)
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/ccompiler.py", line 624, in compile
    self._compile(obj, src, ext, cc_args, extra_postargs, pp_opts)
  File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/distutils/unixccompiler.py", line 180, in _compile
    raise CompileError, msg
ImportError: Building module failed: ["CompileError: command 'llvm-gcc-4.2' failed with exit status 1\n"

Ответы [ 2 ]

6 голосов
/ 26 ноября 2013

Для меня это была проблема с установкой, и я когда-то исправил ее, используя следующие шаги:

4 голосов
/ 22 сентября 2011

Вместо использования pyximport создайте модули расширения на месте с помощью python setup.py build_ext --inplace (или установите для разработки на месте с помощью python setup.py develop, или просто обычную установку с помощью python setup.py install). Для пакетов вы почти всегда хотите запустить установку, которая правильно настроит среду компиляции, сборку и процесс установки.

pyximport подходит для ваших личных сценариев, если вы используете Cython для ускорения вашего кода (например, для научных вычислений). Даже тогда вам может понадобиться добавить другие библиотеки и собрать их из нескольких источников. В этом случае вы можете использовать файл pyxbld для настройки источников и include_dirs. Например, скажем, у вас есть foo.pyx, тогда вы можете поместить инструкции по сборке в foo.pyxbld в том же каталоге. Например: 

#foo.pyxbld
def make_ext(modname, pyxfilename):
    from distutils.extension import Extension
    return Extension(name = modname,
                     sources=[pyxfilename, 'bar.c'],
                     include_dirs=['/myinclude'] )
def make_setup_args():
    return dict(script_args=["--compiler=mingw32"])

Теперь использовать foo так же просто, как показано ниже: 

import pyximport
pyximport.install()
import foo

Предполагается, что ошибок компиляции нет, это практически прозрачно, но с задержкой при первом импорте модуля. Последующие импорты будут искать встроенное расширение в подкаталоге .pyxbld вашего домашнего каталога / каталога профиля.

...