Вопрос:

Непрерывная работа в Azure

python-3.x azure azure-data-factory azure-data-factory-2 azure-databricks

41 просмотра

1 ответ

124 Репутация автора

Я создал простое задание Python для наблюдения за удаленным каталогом SFTP на наличие новых файлов, добавленных туда внешней системой. Задача состоит в том, чтобы в основном читать новые файлы, помещенные в каталог, практически в режиме реального времени. В настоящее время задание запланировано в планировщике заданий на виртуальной машине Windows, но я хотел бы переместить его в любую службу PaaS в Azure, чтобы запланировать выполнение этого задания непрерывно, но не в пакетном режиме. Может кто-нибудь сообщить мне, есть ли какие-либо службы в Azure, которые поддерживают этот вариант использования?

Автор: AngiSen Источник Размещён: 11.08.2019 06:46

Ответы (1)


0 плюса

12286 Репутация автора

Вы можете получить представление о приложении Azure Logic и коннекторе SFTP, который поддерживает мониторинг, создание, отправку и получение файлов на SFTP-сервере.

Триггеры SFTP работают путем опроса файловой системы SFTP и поиска любого файла, который был изменен с момента последнего опроса. Более подробную информацию см. По этой ссылке .

Кстати, у SFTP-соединителя есть ограничение: он обрабатывает только файлы размером 50 МБ или меньше и не поддерживает разбиение на сообщения. Для больших файлов необходимо использовать SFTP-SSH-соединитель .

Автор: Jay Gong Размещён: 13.08.2019 02:41
Вопросы из категории :
32x32