Notatka
Dostęp do tej strony wymaga autoryzacji. Może spróbować zalogować się lub zmienić katalogi.
Dostęp do tej strony wymaga autoryzacji. Możesz spróbować zmienić katalogi.
DOTYCZY:
Azure Data Factory
Azure Synapse Analytics
Wskazówka
Data Factory w usłudze Microsoft Fabric jest następną generacją Azure Data Factory z prostszą architekturą, wbudowaną sztuczną inteligencją i nowymi funkcjami. Jeśli dopiero zaczynasz integrować dane, zacznij od Fabric Data Factory. Istniejące obciążenia ADF można zaktualizować do Fabric, aby uzyskać dostęp do nowych możliwości w zakresie nauki o danych, analiz w czasie rzeczywistym oraz raportowania.
Jeśli używasz funkcji kopiowania potoków Azure Data Factory lub Synapse Analytics do kopiowania danych z źródła do odbiornika, w poniższych scenariuszach możesz również zachować metadane i listy ACL.
Zachowywanie metadanych na potrzeby migracji w usłudze Lake
Podczas migracji danych z jednego magazynu data lake do innego, takich jak Amazon S3, Azure Blob, Azure Data Lake Storage Gen2 i Azure Files, można wybrać opcję zachowania metadanych plików wraz z danymi.
działanie Kopiuj obsługuje zachowywanie następujących atrybutów podczas kopiowania danych:
- Wszystkie metadane określone przez klienta
- A następujące pięć wbudowanych właściwości systemu magazynu danych:
contentType,contentLanguage(z wyjątkiem Amazon S3),contentEncoding, ,contentDispositioncacheControl.
Obsługa różnic w metadanych: Amazon S3 i Azure Storage zezwalają na różne zestawy znaków w kluczach metadanych określonych przez klienta. Jeśli zdecydujesz się zachować metadane przy użyciu działania kopiowania, usługa automatycznie zastępuje nieprawidłowe znaki znaki '_'.
Podczas kopiowania plików w postaci niezmienionej z Amazon S3/Azure Data Lake Storage Gen2/Azure Blob Storage/Azure Files do Azure Data Lake Storage Gen2/Azure Blob Storage/Azure Files w formacie binarnym można znaleźć opcję Preserve na karcie Copy Activity>Settings dla tworzenia działań lub na stronie Settings w narzędziu do kopiowania danych.
Oto przykład konfiguracji JSON operacji kopiowania (zobacz preserve):
"activities":[
{
"name": "CopyAndPreserveMetadata",
"type": "Copy",
"typeProperties": {
"source": {
"type": "BinarySource",
"storeSettings": {
"type": "AmazonS3ReadSettings",
"recursive": true
}
},
"sink": {
"type": "BinarySink",
"storeSettings": {
"type": "AzureBlobFSWriteSettings"
}
},
"preserve": [
"Attributes"
]
},
"inputs": [
{
"referenceName": "<Binary dataset Amazon S3/Azure Blob/ADLS Gen2 source>",
"type": "DatasetReference"
}
],
"outputs": [
{
"referenceName": "<Binary dataset for Azure Blob/ADLS Gen2 sink>",
"type": "DatasetReference"
}
]
}
]
Zachowywanie list ACL z Data Lake Storage Gen1/Gen2 do Gen2
Podczas uaktualniania z Azure Data Lake Storage Gen1 do gen2 lub kopiowania danych między usługą ADLS Gen2 można zachować listy kontroli dostępu (ACL) POSIX wraz z plikami danych. Aby uzyskać więcej informacji na temat kontroli dostępu, zobacz Kontrola dostępu w usłudze Azure Data Lake Storage Gen1 oraz Kontrola dostępu w usłudze Azure Data Lake Storage Gen2.
działanie Kopiuj obsługuje zachowywanie następujących typów list kontroli dostępu podczas kopiowania danych. Możesz wybrać jeden lub więcej typów:
- ACL: Kopiowanie i zachowywanie list kontroli dostępu POSIX na plikach i katalogach. Kopiuje pełne istniejące listy ACL ze źródła do ujścia.
- Właściciel: skopiuj i zachowaj właściciela plików i katalogów. Wymagany jest dostęp użytkownika z uprawnieniami superużytkownika do Data Lake Storage Gen2.
- Grupa: skopiuj i zachowaj grupę będącą właścicielem plików i katalogów. Dostęp administratora do ujścia Data Lake Storage Gen2 lub użytkownika będącego właścicielem (jeśli użytkownik będący właścicielem jest również członkiem grupy docelowej) jest wymagany.
Jeśli określisz, że chcesz skopiować z folderu, usługa replikuje listy ACL dla danego folderu oraz pliki i katalogi w nim, jeśli recursive jest ustawiona na wartość true. Jeśli określisz kopiowanie z pojedynczego pliku, ACL-y w tym pliku zostaną skopiowane.
Uwaga
Jeśli używasz działania kopiowania do zachowywania list ACL z Data Lake Storage Gen1/Gen2 do Gen2, istniejące listy ACL na odpowiednich folderach/plach ujścia Gen2 zostaną zastąpione.
Ważne
Jeśli zdecydujesz się zachować listy kontroli dostępu (ACL), upewnij się, że przyznasz usłudze wystarczająco wysokie uprawnienia do działania na koncie ujściowym Data Lake Storage Gen2. Na przykład użyj uwierzytelniania przy użyciu klucza konta lub przypisz rolę właściciela danych obiektu Blob Storage do jednostki usługi albo tożsamości zarządzanej.
Gdy konfigurujesz źródło jako Data Lake Storage Gen1/Gen2 z formatem binarnym lub opcją kopiowania binarnego, a miejsce docelowe jako Data Lake Storage Gen2 z formatem binarnym lub opcją kopiowania binarnego, możesz znaleźć opcję Preserve na stronie Settings w narzędziu do kopiowania danych lub na karcie Copy Activity>Settings dla tworzenia aktywności.
Oto przykład konfiguracji JSON operacji kopiowania (zobacz preserve):
"activities":[
{
"name": "CopyAndPreserveACLs",
"type": "Copy",
"typeProperties": {
"source": {
"type": "BinarySource",
"storeSettings": {
"type": "AzureDataLakeStoreReadSettings",
"recursive": true
}
},
"sink": {
"type": "BinarySink",
"storeSettings": {
"type": "AzureBlobFSWriteSettings"
}
},
"preserve": [
"ACL",
"Owner",
"Group"
]
},
"inputs": [
{
"referenceName": "<Binary dataset name for Azure Data Lake Storage Gen1/Gen2 source>",
"type": "DatasetReference"
}
],
"outputs": [
{
"referenceName": "<Binary dataset name for Azure Data Lake Storage Gen2 sink>",
"type": "DatasetReference"
}
]
}
]
Powiązana zawartość
Zobacz inne artykuły dotyczące działania kopiowania: