Uma ferramenta de extração de dados para data warehouse baseada em agentes distribuídos

Dissertação (mestrado) - Universidade Federal de Santa Catarina, Centro Tecnológico. Programa de Pós-Graduação em Ciência da Computação.Esta dissertação tem como objetivo pesquisar uma solução baseada na tecnologia de agentes de software para melhorar o processo de ETL (Extraction, Transformation and Load) em data warehouses. A fundamentação teórica deste trabalho apresenta aspectos fundamentais relativos a data warehouses e agentes de software. Inicialmente são apresentados os conceitos, as propriedades, os componentes e a arquitetura dos data warehouses. Em seguida, os agentes de software são descritos através de suas características, categorias e aplicações, com o intuito de demonstrar a viabilidade do uso desta tecnologia no processo de ETL. Visando descrever o estado da arte, são apresentadas em seguida as características e funcionalidades de algumas das principais ferramentas ETL atualmente disponíveis no mercado. Com base nos fundamentos teóricos e no estado da arte, desenvolvemos a ferramenta de ETL "Data Warehouse Extractor" com o objetivo de demonstrar na prática o uso da tecnologia de agentes de software no processo ETL. A ferramenta proposta apresenta características como alta escalabilidade, processamento distribuído, multi-plataforma e funcionalidades como compactação de dados, criptografia de dados, retransmissão de dados em caso de falhas e repositório de metadados