У меня есть фабрика данных Azure, но теперь компания хочет реализовать фабрику для некоторой доступности коннекторов и существования ресурса.
План состоит в том, чтобы извлечь данные из локальной среды (sybase, postgres) в Lakehouse в фабрике с использованием фабрики данных (внешней). Проблема возникает, когда помимо этого извлечения мне нужно сразу после этого организовать другой процесс (ноутбук или другой конвейер внутри фабрики), как можно я организую все это... не умирая, пытаясь.
Возможно ли какое-либо решение этой проблемы или рекомендации по решению этой проблемы?
Вы можете выполнить весь процесс в конвейере Fabric, если у вас есть локальный шлюз данных (он не поддерживает SHIR).
В противном случае вы можете запустить и отслеживать конвейер Fabric с помощью REST API. Итак, в конце вашего внешнего конвейера ADF запустите конвейер Fabric, чтобы выполнить дальнейшую работу.
https://learn.microsoft.com/en-us/fabric/data-factory/pipeline-rest-api#run-on-demand-item-job