{"repo":"datosgobar/georef-ar-etl","free":true,"listed":false,"github":"https://github.com/datosgobar/georef-ar-etl","clone":"git clone https://github.com/datosgobar/georef-ar-etl.git","description":"ETL del Servicio de Normalización de Datos Geográficos de Argentina.","language":"Python","stars":11,"topics":["etl","georef","datos","argentina","normalizacion","json","csv","ndjson","geo"],"license":"MIT","category":"data-pipelines","readme_excerpt":"georef-ar-etl Segunda iteración del ETL del Servicio de Normalización de Datos Geográficos de Argentina. La primera iteración puede encontrarse bajo la rama etl-legacy . Documentación Para consultar la documentación del ETL, acceder a https://datosgobar.github.io/georef-ar-api/etl/. Contenedores Para correr los contenedores asegúrate de tener instalado docker-compose\\ El archivo de configuración puede correr tres servicios creando los siguientes contenedores: - georef-etl db: Un contenedor con postgres y postgis para almacenar los datos procesados. Estos datos son almacenados y persistidos en un volumen de docker. La configuración de credenciales de la base de datos se lee del archivo .env - georef-etl app: Un contenedor con la aplicación. Al correrlo la primera vez, o después de modificar algún modelo, es necesario correr una migración. - georref-etl db test: En forma optativa se puede levantar el tercer contenedor para correr las pruebas del ETL Antes de levantar los servicios de la base de datos deberás configurar las variables de entorno en el archivo .env\\ Antes de levantar el servicio de la app deberás generar un archivo georef.cfg que puedes hacerlo copiando el que ya existe (georef.example.cfg) y renombrando ciertas variables. Tener en cuenta que los dominios para los servidores de postgres de la base de datos del ETL y de la base de datos de pruebas son \"db\" y \"db-test\" respectivamente; los puertos son 5432 por defecto y las credenciales deberán ser las mismas que la","default_branch":null,"files":null,"tree":[],"storefront":"/r/datosgobar","claimed":false,"request_supported":{"post":"https://gitbuyer.com/r/datosgobar/georef-ar-etl/request-supported","requests":0},"note":"indexed from public GitHub; nothing is for sale on this page. Clone it from GitHub. Paid listings live at /search."}