параметры cURL для загрузки веб-страницы

Question

Когда я использую браузер для вызова веб-страницы, я могу сохранить вывод правой кнопкой мыши «сохранить как ...». Чтобы автоматизировать этот процесс в сценарии, я решил использовать команду cURL. Для обычной веб-страницы stati c это просто, но эта отличается. Веб-страница, вероятно, перенаправляет, вызывает скрипты. Я установил javascript .enabled = false в firefox, и страница все еще работает. Но когда я

curl 'https://www.brenneisen-capital.de/bcag/wi/neuemissionen'

ничего не возвращается. Может кто-нибудь помочь мне с правильными параметрами cURL, чтобы получить то, что я вижу в браузере, пожалуйста? Или это неправильный подход?

Сначала казалось, что решением будет wget, но некоторый контент отсутствует.

Answer 1

Вы определенно можете достичь этого с wget. Просто убедитесь, что вы используете правильные параметры:

$ wget \
     --recursive \
     --convert-links \
     --no-clobber \
     --page-requisites \
     --html-extension \
     --domains example.org \
     --no-parent \
         www.example.org/page