Idioma
Python
Tipo de ferramenta
Algoritmo
Licença
AM331-A3
Version
1.0.0
Banco Interamericano de Desenvolvimento
IDBx Data Engine é uma ferramenta que extrai, analisa e consolida dados de cursos online do BID, melhorando a tomada de decisões e a gestão educacional com visualizações claras e monitoramento contínuo. Desenvolvido pelo INDES do BID, este sistema responde à necessidade de analisar eficazmente a educação online na América Latina, utilizando dados para ajustar e melhorar os programas MOOC na região.
O IDBx Data Engine permite a centralização e simplificação da análise de grandes volumes de dados educacionais, garantindo uma gestão mais eficaz e a adaptação dos conteúdos educacionais às reais necessidades dos alunos no contexto latino-americano.
Integração de dados: o mecanismo de dados do IDBX suporta a integração de dados de várias fontes, consolidando diversos conjuntos de dados. Análise e visualização: os usuários podem executar a análise de dados e criar visualizações interativas para extrair insights. Garantia da qualidade dos dados: o mecanismo oferece verificações de qualidade de dados e validação para garantir a precisão dos dados.
Utiliza padrões abertos como AWS S3 para armazenamento de informações, garantindo interoperabilidade. Emprega MongoDB como banco de dados NoSQL para gestão e armazenamento eficiente de dados. Implementa um processo ETL para extrair, descriptografar e transformar dados de AWS S3 para MongoDB. Gera relatórios em formato CSV usando processos Python, otimizando a exportação de dados. Desdobra e executa processos em contêineres Docker, garantindo um ambiente controlado e reproduzível. Incorpora scripts para administração do sistema.
Consulte o equipamento de Código para o Desenvolvimento e descubra como nossas herramientas de código abertas, cuidadosamente curadas, podem se apoiar em sua instituição na América Latina e no Caribe. Escritores para explorar soluções, resolver dúvidas de implementação, compartilhar resultados de reutilização ou apresentar uma nova ferramenta. Escreva para [email protected]
Esta imagem representa um diagrama de fluxo de dados, mostrando um processo ETL (Extrato, Transformagem, Carga) do espaço da nuvem EDX para a entrada da ferramenta BI por meio de MongoDB e geração de tabela.
Esta imagem contém texto que descreve o mecanismo do DBx Data Engine, que extrai, analisa e consolida dados do MOOC para o programa IDBX, incluindo processos de ETL e análise.
A imagem mostra instruções para "Como instalar" o motor de dados IDBx. Inclui arquivos para o ambiente de trabalho: Dockerfile, Makefile, units/. E para ETL: Key-old.asc, Package.json, Run.sh, shell.js, Edx-import.js, commands/*.js.
Descreve o fluxo de extração e transformação de dados do edX.