Как мы можем сохранить происхождение и происхождение в MarkLogic - PullRequest
2 голосов
/ 14 января 2020

Как мы можем сохранить происхождение и происхождение в MarkLogi c?

Какой вариант использования для шаблона конверта?

Существует ли какой-либо подход для отслеживания происхождения данных при экспорте данных из источников данных?

1 Ответ

2 голосов
/ 14 января 2020

Возможно, вас заинтересует MarkLogi c Учебное пособие по отслеживанию данных Учебное пособие по запросу

В первом выпуске серии «Управление данными» вы будем исследовать концепцию происхождения данных. Вы узнаете, как отслеживание происхождения данных или происхождения данных имеет решающее значение для понимания данных и их происхождения. Вы получите практические навыки и узнаете, как достичь этой цели, интегрируя хранилища данных с использованием среды MarkLogi c Data Hub и шаблона оболочки.

Эта концепция применяется в MarkLogi c Data Hub

MarkLogi c Data Hub Provenance и Lineage

В MarkLogi c, происхождение отслеживает происхождение данных, а происхождение - история данные. Метаданные провенанса - это объединенный набор информации о происхождении и информации о происхождении, отслеживаемый MarkLogi c Data Hub. Информация о происхождении обновляется с каждым изменением, внесенным в запись, начиная с момента ее приема и до момента ее существования на сервере MarkLogi c.

Вся информация о происхождении и происхождении хранится в виде XML документов (с использованием схемы PROV XML ) в базе данных data-hub-JOBS и добавляются в защищенную коллекцию http://marklogic.com/provenance-services/record. При создании записей о происхождении и происхождении также создаются тройки, определяющие взаимосвязи между частями информации.

Шаблон проектирования описан в этом блоге

Triple Provenance с шаблоном разработки аннотаций документов

При создании приложений, использующих данные из разнородных источников, особенно в контексте семантики, часто требуется захватывать информацию о происхождении, например, источник и время последнего обновления. ,

Используя Envelope Pattern , аннотируйте JSON / XML сериализацию троек с данными о происхождении.

...