Я хотел бы запускать DAG с воздушным потоком для блоков данных.
Я установил apache-airflow 1.9.0 (пакет python3) для блоков данных.
В записной книжке блоков данных я использовал:
%sh
airflow list_dags
Я получил:
-------------------------------------------------------------------
DAGS
-------------------------------------------------------------------
example_bash_operator
example_branch_dop_operator_v3
example_trigger_target_dag
example_xcom
latest_only
latest_only_with_trigger
test_utils
tutorial
Я хотел бы представить вышеприведенные группы DAG в виде графика.
Я могу сделать это, установив образ док-станции airflow на мой локальный компьютер, а затем зайти на localhost: 8080.
Но я не могу узнать, как это сделать на блоках данных.
Спасибо
ОБНОВЛЕНИЕ Я запустил
%sh
airflow webserver -p 8080
Я попытался получить доступ к localhost: 8080, запустив
%sh
curl localhost:8080
на блокноте с блоком данных.
Я получил:
% Total % Received % Xferd Average Speed Time Time Time
Current
Dload Upload Total Spent Left
Speed
0 0 0 0 0 0 0 0 --:--:-- --:--:-- --:--:-- 0
100 221 100 221 0 0 23440 0 --:--:-- --:--:-- --:--:-- 24555
<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2 Final//EN">
<title>Redirecting...</title>
<h1>Redirecting...</h1>
<p>You should be redirected automatically to target URL: <a href="/admin/">/admin/</a>. If not click the link.
Но они есть на выходе ноутбуков и на них нет кликабельных ссылок. Воздушный поток установлен на кластере блоков данных, а не на моей локальной машине. Если я запускаю localhost: 8080 на моей локальной машине, я не могу получить к нему доступ.
спасибо