Trabalhar com dados não estruturados

Armazene, governe e processe ficheiros não estruturados, como documentos, imagens, áudio e vídeo, juntamente com dados estruturados no Unity Catalog.

Introdução

Experimente um exemplo de ponta a ponta para ver como as peças se encaixam.

Guide Description
Guia de iniciação rápida das funções FILE Cria uma tabela com uma FILE coluna e trabalha com ficheiros usando FILE funções.
Tutorial de dados não estruturados Armazene, analise, processe e partilhe ficheiros não estruturados usando volumes do Unity Catalog.

Armazenar e referenciar ficheiros

Escolha como armazenar e referenciar ficheiros consoante se os acede por caminho ou como valores numa tabela.

Approach Description
Volumes do catálogo Unity Regula o armazenamento para ficheiros não tabulares. Carregar, organizar e aceder a ficheiros num volume por caminho.
Tipo de ficheiro Ficheiros de referência e os seus metadados como valores de primeira classe numa tabela, governados pelo acesso às linhas que os referenciam. Para a definição do tipo, veja a referência do tipo FILE.
Fonte de dados binária Armazene os bytes brutos de um ficheiro numa BINARY coluna.
Fonte de dados da imagem Leia ficheiros de imagem num DataFrame.

Ficheiros de processo

Depois de guardares os teus ficheiros no Unity Catalog, extrai conteúdo, executa código personalizado e constrói pipelines.

Task Description
Processar documentos Extrair conteúdo estruturado de documentos com ai_parse_document e outras funções de IA.
Ficheiros de processo com UDFs Lê metadados e bytes de ficheiros, e gera novos ficheiros, usando o teu próprio código em UDFs.
Importar ficheiros como referências FILE Carregar ficheiros em tabelas como FILE referências.
Construir um pipeline de ficheiros Processar ficheiros de ponta a ponta num pipeline.
Procurar ficheiros num volume Indexe os ficheiros num volume para que utilizadores e agentes possam pesquisá-los.

Ficheiros de govern

Controla quem pode aceder aos ficheiros e gerir o seu ciclo de vida com o Unity Catalog.

Capacidade Description
Controlo de acesso a volumes Atribuir privilégios nos volumes para controlar quem pode ler e escrever ficheiros com base no caminho.
CICLO DE VIDA DE FICHEIRO GERIDO Deixe o Azure Databricks gerir o armazenamento e o ciclo de vida dos ficheiros referenciados por uma tabela.
Filtros de linha nas colunas FILE Restringa o acesso a ficheiros aplicando filtros de linha às linhas que os referenciam.