Я работаю над преобразованием технологии обработки аналитических данных. Идея состоит в том, чтобы изменить процесс с u-sql scritps (DataLake Analytics) на ноутбуки (Databricks).
Однако у меня есть некоторые трудности с извлечением переменных из пути, как мы можем это сделать в u-sql (виртуальные столбцы).
Пример:
• ОБЪЯВИТЬ ВНЕШНЕЕ @inputpath string = @ "/ input / {date: yyyy} / {date: MM} / {date: dd} /data.txt";
@ вход =
ЭКСТРАКТ даты DateTime,
строка column1,
column2 int
ОТ @inputpath
ИСПОЛЬЗОВАНИЕ Extractors.Text (разделитель: '\ n', цитата: false);
Любая идея или обходной путь, чтобы сохранить те же данные в хранилище озера данных и использовать блоки данных?
Заранее спасибо!