MACROPROCESO O PROCESO

Transcripción

1 Versión 2.0 Página 1 de OBJETIVO Facilitar la ubicación de los posibles deudores (Elusores, Evasores y Morosos) del aporte parafiscal de la entidad, que no están cumpliendo con las obligaciones, mediante scripts desarrollados en SQL que es la herramienta que nos proporciona Oracle, se hacen las consultas necesarias para identificar a los responsables del no cumplimiento de los aportes parafiscales para posteriormente ser notificados por el ICBF. 2. ALCANCE Inicia con el cargue de información de la DIAN mediante scripts y finaliza con la generación de reportes que se entregan al Grupo de Recaudo. 3. DEFINICIONES Archivo.Bat Es un archivo de procesamiento por lotes: se trata de archivos de texto sin formato, guardados con la extensión *.bat que contienen un conjunto de comandos DOS. Cuando se ejecuta este archivo bat, los comandos contenidos son ejecutados en grupo, de forma secuencial, permitiendo automatizar diversas tareas. Cualquier comando DOS puede ser utilizado en un archivo batch. Hay que aclarar Batch que no es un Lenguaje de Programación. Es un archivo de código que contiene comandos del, Shell de Windows, llamado MS-DOS, que pueden ejecutar desde Inicio->Ejecutar->CMD. Archivo.SQL Es un archivo de lenguaje declarativo de acceso a bases de datos relacionales que permite especificar diversos tipos de operaciones en éstas. Una de sus características es el manejo del álgebra y el cálculo relacional permitiendo efectuar consultas con el fin de recuperar de una forma sencilla información de interés de una base de datos, así como también hacer cambios sobre ella. Archivo.TXT Los archivos de texto plano (en inglés plain text) son aquellos que están compuestos únicamente por texto sin formato, sólo caracteres. Estos caracteres se pueden codificar de distintos modos dependiendo de la lengua usada. Algunos de los sistemas de codificación más usados son: ASCII, ISO o Latín-1, Unicode, etc...

2 Versión 2.0 Página 2 de 10 Se les conoce también como archivos de texto llano, o texto simple, por carecer de información destinada a generar formatos (negritas, subrayado, cursivas, tamaño, etc.) y tipos de letra (por ejemplo, Arial, Times, Courier, etc.). El término texto plano proviene de una traducción literal del término inglés plain text, término que en lengua castellana significa texto simple o texto sencillo. Las aplicaciones destinadas a la escritura y modificación de archivos de texto se llaman editores de texto. En el artículo podrá encontrar varios ejemplos de editores. Archivo.CVS Los ficheros CSV (del inglés comma-separated values) son un tipo de documento en formato abierto sencillo para representar datos en forma de tabla, en las que las columnas se separan por comas (o punto y coma en donde la coma es el separador decimal: España, Francia, Italia...) y las filas por saltos de línea. Los campos que contengan una coma, un salto de línea o una comilla doble deben ser encerrados entre comillas dobles. El formato CSV es muy sencillo y no indica un juego de caracteres concreto, ni cómo van situados los bytes, ni el formato para el salto de línea. Estos puntos deben indicarse muchas veces al abrir el fichero, por ejemplo, con una hoja de cálculo. Archivo.LST Contiene una lista de varios tipos de información, utilizado por muchos tipos de programas, como Microsoft Visual Studio u ORACLE se pueden exportar desde un programa de hoja de cálculo o base de datos o puede incluir una lista de archivos para ser instalado por un instalador de software. Los archivos LST suelen ser archivos de texto sin formato, que se pueden ver y editar con un editor de texto. Si el archivo no se abrirá en un editor de texto, lo más probable es guardado en un formato binario que sólo puede ser abierto por el programa que creó el archivo. Tipos de datos en PL/SQL Cada constante y variable tiene un tipo de dato en el cual se especifica el formato de almacenamiento, restricciones y rango de valores válidos. PL/SQL proporciona una variedad predefinida de tipos de datos. Casi todos los tipos de datos manejados por PL/SQL son similares a los soportados por SQL. A continuación se muestran los TIPOS de DATOS más comunes:

3 Versión 2.0 Página 3 de 10 NUMBER (Numérico): Almacena números enteros o de punto flotante, virtualmente de cualquier longitud, aunque puede ser especificada la precisión (Número de dígitos) y la escala que es la que determina el número de decimales. -- NUMBER [(precisión, escala)] saldo NUMBER(16,2); /* Indica que puede almacenar un valor numérico de 16 posiciones, 2 de ellas decimales. Es decir, 14 enteros y dos decimales */ CHAR (Carácter): Almacena datos de tipo carácter con una longitud máxima de y cuyo valor de longitud por default es 1 -CHAR [(longitud máxima)] nombre CHAR(20); /* Indica que puede almacenar valores alfanuméricos de 20 posiciones */ VARCHAR2 (Carácter de longitud variable): Almacena datos de tipo carácter empleando sólo la cantidad necesaria aun cuando la longitud máxima sea mayor. -- VARCHAR2 (longitud máxima) nombre VARCHAR2(20); /* Indica que puede almacenar valores alfanuméricos de hasta 20 posiciones */ /* Cuando la longitud de los datos sea menor de 20 no se rellena con blancos */ BOOLEAN (lógico): Se emplea para almacenar valores TRUE o FALSE. DATE (Fecha): Almacena datos de tipo fecha. Las fechas se almacenan internamente como datos numéricos, por lo que es posible realizar operaciones aritméticas con ellas. Atributos de tipo. Un atributo de tipo PL/SQL es un modificador que puede ser usado para obtener información de un objeto de la base de datos. El atributo %TYPE permite conocer el tipo de una variable, constante o campo de la base de datos. El atributo %ROWTYPE permite obtener los tipos de todos los campos de una tabla de la base de datos, de una vista o de un cursor. PL/SQL también permite la creación de tipos personalizados (registros) y colecciones (tablas de PL/SQL), que veremos en sus apartados correspondientes. Tipos de Sentencias de SQL Las sentencias SQL pertenecen a dos categorías principales: Lenguaje de Definición de Datos, DDL y Lenguaje de Manipulación de Datos, DML. Estos dos lenguajes no son lenguajes en sí mismos, sino que es una forma de clasificar las sentencias de lenguaje SQL en función de su cometido. La diferencia principal reside en que el DDL crea objetos en la base de datos y sus efectos se pueden ver en el diccionario de la base de datos; mientras que el DML es el que permite consultar, insertar, modificar y eliminar la

4 Versión 2.0 Página 4 de 10 información almacenada en los objetos de la base de datos. Cuando se ejecutan las sentencias DDL de SQL, el SGBD confirma la transacción actual antes y después de cada una de las sentencias DDL. En cambio, las sentencias DML no llevan implícito el commit y se pueden deshacer. Existe pues un problema al mezclar sentencias DML con DDL, ya que estas últimas pueden confirmar las primeras de manera involuntaria e implícita, lo que en ocasiones puede ser un problema. A continuación se presenta una tabla con las sentencias SQL más comunes, clasificadas según el lenguaje al que pertenecen. Sentencia DDL Alter procedure Alter Table Analyze Create Table Create Index Drop Table Drop Index Grant Truncate Revoke Sentencia DML Insert Delete Update Select Commit Rollback Objetivo Recompilar un procedimiento almacenado. Añadir o redefinir una columna, modificar la asignación de almacenamiento. Recoger estadísticas de rendimiento sobre los objetos de la BD para utilizarlas en el optimizador basado en costes. Crear una tabla. Crear un índice. Eliminar una tabla. Eliminar un índice. Conceder privilegios o papeles, roles, a un usuario o a otro rol. Eliminar todas las filas de una tabla. Retirar los privilegios de un usuario o rol de la base de datos. Objetivo Añadir filas de datos a una tabla. Eliminar filas de datos de una tabla. Modificar los datos de una tabla. Recuperar datos de una tabla. Confirmar como permanentes las modificaciones realizadas. Deshacer todas las modificaciones realizadas desde la última confirmación. Script En informática un script, archivo de órdenes, archivo de procesamiento por lotes o guion es un programa usualmente complejo, que por lo regular se almacena las órdenes que están escritas en Lenguaje de Consulta Estructurado en un archivo de texto plano. Los script son casi siempre interpretados. El uso habitual de los scripts es realizar diversas tareas como combinar componentes, interactuar con el sistema operativo o con el usuario. SQL*PLUS

5 Versión 2.0 Página 5 de 10 Es la herramienta que nos proporciona ORACLE para interactuar con la base de datos se llama SQL*Plus. Básicamente, es un intérprete SQL con algunas opciones de edición y formateo de resultados. Antes de ver la manera de conectarse a SQL*Plus, conviene tener claros algunos conceptos: Usuario/Clave Para poder acceder a una base de datos gestionada por ORACLE debemos ser un usuario Autorizado de la misma y conocer la palabra clave, password, asociada al usuario. Variable de ambiente ORACLE_SID Indica la base de datos con la que vamos a trabajar. Conexión Para entrar en SQL*Plus desde el shell se debe ejecutar el comando: Sqlplus Variable de ambiente ORACLE_SID 4. DESARROLLO 4.1 CARGUE INFORMACIÓN DIAN Una vez detectado el formato electrónico de envío de la información de la DIAN ejemplo txt, csv, lst y los campos informativos remitidos se crean la información en un archivo.txt separado por punto y comas (;) llamado DIAN.TXT, se crea la tabla correspondiente a la vigencia del Reporte en el servidor , mediante comandos de SQL PLUS. Ejemplo de sentencia de creación de tabla DIAN CREATE TABLE "CONSOLID"."DIAN_AÑO ("NIT" NUMBER(14), "CODIGO_MODALIDAD" NUMBER(1), "RAZON_SOCIAL" VARCHAR2 (100 byte), "DIRECCION" VARCHAR2(100 byte), "COD_MUN" NUMBER (3), "NOMBRE_MUNICIPIO" VARCHAR2 (15 byte), "COD_REG" NUMBER(2), "NOMBRE_DEPTO" VARCHAR2(10 by te), "ACT_ECO" VARCHAR2(4 byte), "COD_ADMON" VARCHAR2(2 byte), "TELEFONO" NUMBER(20), "GASTOS_NOMINA" NUMBER(20), "APO_SEGURIDAD" NUMBER(20), "APO_ENTIDADES" NUMBER(20), "APORTEICBF" NUMBER(30), "APO_REAL" NUMBER, "NIT2" VARCHAR2(14 byte)) TABLESPACE "SIF_DATOS" ; El campo la palabra AÑO deberá ser cambiada por la vigencia de la información

6 Versión 2.0 Página 6 de 10 entregada por la Dian. Realizar el cargue de la información de la Dian en la Tabla creada, así: Se crea un archivo DIAN.BAT ó ejecutable por lotes con la siguiente instrucción SQLLDR CONSOLID/ CONS OL ID@ RE CA UDO CONTROL=DIAN.CTL ERRORS=50000 Se crea un archivo DIAN.CTL, el cual deberá tener la siguiente estructura: LOAD DATA INFILE DIAN.TXT INTO TABLE DIAN_AÑO -- (este es el nombre de la tabla creada anteriormente) REPLACE FIELDS TERMINATED BY ';' (AÑO, NIT, PRIMER_APELLIDO, SEGUNDO_APELLIDO, PRIMER_NOMBRE, SEGUNDO_NOMBRES, RAZON_SOCIAL, DIRECCION, MUNICIPIO, COD_DEPTO, TELEFONO, ACT_ECO, GASTOS_NOMINA, APO_SEGURIDAD, APO_ENTIDADES, APO_REAL (estos son los campos de la tabla creada) Para tener en cuenta: los archivos DIAN.BAT, DIAN.TXT y DIAN.CTL deben estar en la misma carpeta SIREC Se ejecutan todos y cada uno de los archivos.bat que se encuentran en la siguiente ruta D:\RECA3456, del equipo con dirección IP , correspondientes a las 33 Departamentos del País, estos archivos generan la información de las regionales desde la vigencia 2007 a la fecha de corte en la ruta D:\RECA3456\Archivos. Cada archivo.bat tiene la siguiente instrucción: C:\ORANT\BIN\PLUS33W.EXE consulta/co n n ti oq gp es el codigo de la regional--a conectar EXIT y ejecutado genera un archivo por cada vigencia desde el 2007, si se requiere adicionar una vigencia se deberá crear un archivo de nombre xgp11.sql (11 corresponde al año a adicionar), con la siguiente estructura SET PAGESIZE 0 SET LINESIZE 250 SET ECHO OFF SET FEEDBACK ON SET VERIFY OFF SET HEADING OFF SET EMBEDDED OFF SPOOL E:\RECA3456\ARCHIVOS\B11&1 --(este 11 se cambia por el año de la

7 Versión 2.0 Página 7 de 10 vigencia) SELECT A.NIT ' ' A.CONEMP ' ' UPPER(E.RAZSOC) ' ' TO_CHAR(A.FECPAG,'YYYYMMDD') ' ' A.PERINIPAG ' ' A.PERFINPAG ' ' A.VALPAG ' ' A.CONPAG ' ' E.SECTOR ' ' &1 ' ' E.CODMUN ' ' UPPER(E.DIREMP) ' ' UPPER(E.BARRIO) ' ' E.TEL1 ' ' UPPER(E. ) ' ' (MAX(E.ACTECOINS)) ' ' D.TIPCAN ' ' A.NITCAN ' ' UPPER(D.ABRRAZSOC) ' ' B.NUMPAQ ' ' B.PERCAP ' ' TO_CHAR(C.FECCON,'YYYYMMDD') ' ' C.PERCAP ' ' FROM GENPAGO A, CANPAQUETE B, CANGIRO C, GENCANAL D, GENEMPLEADOR E WHERE TO_CHAR(C.FECCON,'YYYY') = '2011' (este año cambia por el año de la vigencia) AND B.CODOFI=C.CODOFI AND B.CONGIR=C.NUMGIR AND B.PERCAP=C.PERCAP AND B.NIT=C.NIT AND B.CONEMP=C.CONEMP AND A.NUMPAQ=B.NUMPAQ AND A.NITCAN=D.NIT AND A.CONEMPCAN=D.CONEMP AND A.CODOFICAN=D.CODOFI AND A.NIT=E.NIT(+) AND A.CONEMP=E.CONEMP(+) AND (E.TIPSUS IS NULL OR E.TIPSUS='02' OR E.TIPSUS='01') GROUP BY A.NIT,A.CONEMP, E.RAZSOC, A.FECPAG, A.PERINIPAG, A.PERFINPAG, A.VALPAG,A.CONPAG, E.SECTOR,E.CODMUN, E.DIREMP, E.BARRIO,E.TEL1,E. ,D.TIPCAN, A.NITCAN,D.ABRRAZSOC, B.NUMPAQ,E.ACTECOINS, B.PERCAP,C.FECCON,C.PERCAP; SPOOL OFF EXIT Y se adiciona al archivo del año anterior (en nuestro caso xgp10.sql) en la parte inferior la siguiente instrucción, para que se ejecute \RECA3456\xgp11.SQL 4.2. CONSOLIDACIÓN: Se ejecuta el archivo consolidar.bat que se encuentra en la siguiente ruta E:\RECA3456\Archivos del equipo con dirección IP , que crea un archivo SIREC2007.TXT, que contiene el consolidado de los archivos generados en el ítem 1, en el la siguiente ruta E:\Aplicacion\SIREC2007_2009 del equipo con IP Contenido del archivo consolidar.bat COPY *.LST S: \SIREC2007.TXT (es la una unidad compartida en el equipo )

8 Versión 2.0 Página 8 de BACKUP: Desde el equipo y mediante conexión SQLPLUS de Oracle en el servidor (inicio/recaudo) y por comandos de SQL PLUS se crea una copia de la tabla denominada SIREC2007_2009 como backup de la información del mes anterior al corte y se borra el contenido de la tabla esta misma tabla, porque es requerida para cargar la información actual y realizar el cruce correspondiente al mes actual. Ejemplo de sentencia de creación de tabla Backup de Sirec CREATE TABLE SIREC_ENE11 ENE11 se cambia por el mes y año al cual pertenece el backup SELECT * FROM SIREC2007_2009; Borrar el contenido de la tabla Sirec2007_2009 TRUNCATE TABLE SIREC2007_2009; 4.4. CARGUE EN SERVIDOR: Se ejecuta el archivo sirec2007.bat ubicado en la siguiente ruta E:\Aplicacion\SIREC2007_2009 del equipo con IP , para que guarda la información consolidada de Sirec en el ítem 2 en el Servidor Contenido del archivo Sirec.bat SQLLDR CONSOLID/ CONS OL ID@ RE CA UDO CONTROL=SIREC2007.CTL ERRORS=50000 Que ejecuta el archivo SIREC2007.CTL, que contiene el siguiente contenido LOAD DATA INFILE SIREC2007.TXT INTO TABLE SIREC2007_2009 REPLACE FIELDS TERMINATED BY ' ' TRAILING NULLCOLS (NIT, SUCURSAL, RAZ_SOC, FECHA_CONSIGNA, PERIODO_INIC, PERIODO_FINAL, VALOR_APO, CONCEPTO_PAGO, SECTOR, COD_REG, COD_MUN, DIREMP, BARRIO, TEL1, , ACT_ECON, COD_CANAL_CAPT, NIT_CANAL_CAPT, RAZ_SOC_CANAL, FECHA_CONSIG_RECA)

9 Versión 2.0 Página 9 de CRUCE DE LA INFORMACIÓN Se realiza el ajuste a la fecha inicial del cruce en el archivo 1_Morosos.SQL, de la ruta D:\Aplicacion\SCRIPTS del equipo con IP , denominado en el script como PERIODO_INIC, esta fecha deberá der igual a la fecha actual (MM/AA) menos 55 meses, se guarda el archivo y se cierra. Se realizan los ajustes correspondientes al mes a evaluar en el archivo: 6_CANTIDAD_APORTANTES_MES_comodin.SQL D:\Aplicacion\SCRIPTS del equipo con IP , de nominado en todo script como FECHA_CONSIGNA, que será delimitado por las fechas entre el primer y último día calendario del mes a evaluar, se guarda el archivo y se cierra. Se ejecuta el archivo EJECUTAR.bat, de la siguiente ruta D:\Aplicacion\SCRIPTS del equipo con IP Estructura del archivo EJECUTAR.bat D:\oracle\product\10.2.0\client_1\BIN\sqlplusw.exe CONSOLID/C ONSOL ID@ REC AU \Aplicacion\SCRIPTS\cargue_sirec_paso_2.SQL Como producto de los pasos anteriores se generarán los archivos planos en la siguiente ruta D:\Aplicacion\INFOTXT del equipo con IP , la cual deberá ser cargada a Excel y tabulada por regional (en los formatos establecidos) INFORMES Archivos de evasores EVASORES_SIN_CTA.TXT (Información Sin Cooperativas, NI SECTOR DE LA CONSTRUCCIÓN) DIAN_EVASORES.TXT Informe con todos los sectores Archivos de elusores ELUSORES_SIN_CTA.TXT Información Sin Cooperativas, NI SECTOR DE LA CONSTRUCCIÓN) DIAN_ELUSORES.TXT (Informe con todos los sectores)

10 Versión 2.0 Página 10 de 10 Archivos de morosos MOROSOS_SIN_CTA.TXT (Información Sin Cooperativas, NI SECTOR DE LA CONSTRUCCIÓN) MOROSOS.TXT (Informe con todos los sectores) aportantes_mes_xxx.txt CTA_MINPRO_ESTE_SI_ES.TXT MAYORES_APORTANTES_PILA.TXT MAYORES_APORTATES_A_LA_FECHA.T XT aportantes_ccf_bancos.txt (Aportantes del mes) (Reporte pago de las CTA del mes) Mayores aportantes en número de empleados por PILA del mes) (Mayores aportantes en aporte por SIREC del mes) (Aportes realizados por los canales de Bancos y CCF en el mes) Este documento aplica únicamente para los procesos que adelanta el Grupo de Recaudo de la Dirección Financiera, por medio del cual permite detectar los posibles deudores del aporte fiscal. Anexo 1 NATURALEZA DE LOS CAMBIOS (obligatorio): Registrar los cambios de la versión que se está revisando Ítem Modif. Nombre del ítem Descripción del Cambio Se ajustó el documento al formato de Manual definido por la Subdirección de Mejoramiento Organizacional.