Задача файловой системы Hadoop

Область применения:SQL Server среда выполнения интеграции SSIS в Фабрика данных Azure

Задача файловой системы Hadoop позволяет пакету SSIS копировать файлы из кластера Hadoop, в кластер Hadoop и внутри него.

Чтобы добавить задачу файловой системы Hadoop, перетащите её в область конструктора. Затем дважды щелкните задачу или щелкните правой кнопкой мыши и выберите команду Изменить, чтобы открыть диалоговое окно Редактор задач файловой системы .

Редактор задач файловой системы Hadoop

Параметры

Настройте следующие параметры в диалоговом окне Редактор задачи файловой системы Hadoop .

Поле Описание
Hadoop Connection (Подключение Hadoop) Укажите существующий диспетчер подключений Hadoop или создайте новый. Этот диспетчер подключений указывает, где размещены конечные файлы.
Hadoop File Path (Путь к файлу Hadoop) Укажите путь к файлу или каталогу HDFS.
Hadoop File Type (Тип файла Hadoop) Укажите, чем является объект файловой системы HDFS — файлом или каталогом.
Перезаписать место назначения Укажите, следует ли перезаписать целевой файл, если он уже существует.
Операция Укажите операцию. Доступны следующие операции: CopyToHDFS, CopyFromHDFSи CopyWithinHDFS.
Local File Connection (Локальное подключение файлов) Укажите существующий диспетчер подключения файлов или создайте его. Этот диспетчер подключений указывает, где размещены исходные файлы.
Рекурсивный Укажите, следует ли копировать вложенные папки рекурсивно.