O3 Certificación de Calidad

Transcripción

1 IdeaSoft Uruguay S.R.L. Phone: +598 (2) de Setiembre 2570 Fax: +598 (2) Montevideo Uruguay O3 Certificación de Calidad Consultora Norteamericana auditó la calidad de O3 Resumen O3 es un producto nuevo e innovador. Esta basado en tecnología revolucionaria. Es desarrollado por una empresa Uruguaya. A mediados de 1999 solicitamos a Dimensional Systems, principal consultora a nivel mundial en esta área, que analizara y auditara la Calidad del Producto. Los resultados obtenidos son importantes: Se comprobó la calidad y correcto funcionamiento con distintos y extensos volúmenes de información: 4, 20 y 50 millones de registros. Se certificó la altísima velocidad de respuesta, alcanzando 95 consultas por segundo en un modelo de 4 millones de registros. Se verificó el funcionamiento de O3 orientado a Internet. Todos los resultados incluyeron simulación de clientes internos y remotos (Applet en un Internet Browser). Estos resultados demuestran la capacidad de O3 de satisfacer mas de 2000 usuarios concurrentes por servidor, en forma local o a través de Internet.

2 Preparación y contexto La elección del Modelo de Datos La preparación de un juego de datos representativo de las distintas situaciones en que se aplica un producto de alcance general como O3 es una tarea difícil. La objetividad y generalidad de los datos a utilizar es indispensable para dotar a la prueba de validez y proyección. Nada esta más lejos de nuestro espíritu que aquellas situaciones en las que mediante la utilización de un entorno tendencioso y poco representativo se pretende destacar artificialmente características de un producto. Optamos por un caso definido por una organización de la que no formamos parte, llamada Olap Council. El modelo de datos publicado por esta organización, es parte de la especificación de un benchmark o test para evaluar servidores de bases de datos multidimensionales. La especificación de esa prueba no esta orientada a una herramienta con el alcance de O3. Se limita exclusivamente al servidor y en arquitecturas y con restricciones que no se aplican a nuestro producto que incluye además de un servidor los componentes orientados al usuario final. Pero a pesar de esto, hemos cumplido en gran parte con la especificación. Principalmente, al tomar como modelo de datos el allí propuesto y cumplir con el 100 % de la metodología planteada para su carga. Esto garantiza la ausencia de optimizaciones particulares a un juego de datos y que no pueden trasladarse a la práctica ya que en la realidad la información cambia continuamente. Por otra parte, todas las consultas que se realizan en la prueba responden a la especificación y cubren distintos casos de análisis. El modelo concreto: Ventas / Marketing / Inventario El modelo multidimensional utilizado representa un ejemplo elaborado de Análisis de Ventas y Marketing. Contiene: 5 dimensiones: Fecha, Productos, Clientes, Canales y Escenarios (Actual, Presupuesto y Pronóstico) con distintas jerarquías en cada uno. La cantidad de elementos en cada dimensión se muestra en la siguiente tabla. El 90% corresponden al nivel mas bajo de la jerarquía. Dimensión Elementos Fecha 34 Productos Clientes 1000 Canales 10 Escenarios 3 Cantidad de elementos por dimensión 2

3 5 medidas que provienen de las fuentes de datos: Unidades vendidas, Monto vendido, Inventario, Costo fabricación y Costo envío. 5 medidas derivadas: Precio promedio, Costo del producto, Margen, Margen Porcentual y Ventas promedio de los últimos 6 meses. Los datos que se cargan en este modelo son generados antes de cada paso de la prueba por un programa que asegura datos frescos. Estos datos consisten en tres conjuntos de archivos ASCII: Datos históricos, representan el volumen de información ya disponible en el modelo correspondiente a 17 meses. Datos incrementales, representan los datos de un nuevo mes a cargar. Dada la complejidad de la información ingresada como carga incremental, el procesamiento de estos datos además de la carga requiere complejos cálculos que involucran al conjunto completo de información disponible (incremental e histórica) y que es realizado en forma automática por O3. Parámetros para las consultas. Permiten que se generen consultas distintas para evitar repeticiones ficticias que afectarían la validez de los resultados. Este modelo está lejos de ser un caso simple, por el contrario, utiliza varios de los mecanismos más avanzados de O3 para la representación y cálculos de información derivada. Es importante destacar que todo el desarrollo de este modelo no está realizado con programación a medida sino que sólo se ha aplicado la funcionalidad disponible en forma estándar en el producto. En otros documentos incluimos información detallada de todos los aspectos técnicos. La prueba La prueba se llevó a cabo en la ciudad de Boston en las instalaciones de la empresa Dimensional Systems. Fue auditada por George Spofford, reconocido mundialmente por su capacidad técnica y experiencia en este tipo de evaluaciones. Infraestructura En uno de los laboratorios se instaló el siguiente equipamiento: Servidor Windows NT Servidor Solaris 10 PCs Pentium 250MB RAM Dell PowerEdge 6300 with 4 Pentium III (450 MHz.) processors and 2 GB RAM running Microsoft Windows NT Server Enterprise Edition and Sun Java Virtual Machine (HotSpot) Sun Ultra Enterprise 450 with 4 UltraSparc II (400 MHz) processors and 2GB RAM running Solaris 2.6 and the Sun Java Virtual Machine (HotSpot) 3

4 Metodología En los 10 PCs se corren varios clientes en forma simultánea ya que la prueba busca medir la capacidad del server de soportar muchos usuarios concurrentes. Adicionalmente a las mediciones de tiempos, se realiza una verificación de correctitud de los resultados. Los datos son cargados en una base de datos relacional y luego se selecciona al azar un subconjunto de consultas del total y se verifica que los resultados de las consultas del sistema auditado coincidan con los del sistema de referencia. Los resultados O3 pasó todas las verificaciones de correcto funcionamiento que compararon los resultados durante las pruebas de performance contra otra aplicación tomada como referencia. A continuación se presentan los resultados de las 4 corridas realizadas: Microsoft Windows NT Server Cantidad total de registros: 3,890,700 Carga histórica (2,829,150 registros) 0:11:59 Carga Incremental (1,061,550 registros) & Cálculos 0:21:06 Procesamiento de 112,500 consultas 0:19:44 Cantidad total de registros: 50,146,500 Carga histórica (35,980,850 registros) 3:54:09 Incremental Load (14,165,650) & Cálculos 5:05:28 Procesamiento de 112,500 consultas 2:06:08 SUN Solaris Cantidad total de registros: 3,890,700 Carga histórica (2,829,150 registros) 0:11:53 Carga incremental (1,061,550 registros) & Cálculos 0:29:05 Procesamiento de 112,500 consultas 0:20:28 Cantidad total de registros: 21,225,450 Carga histórica (15,130,775 registros) 1:33:27 Carga incremental (6,094,675 registros) & Cálculos 3:16:55 Procesamiento de 112,500 consultas 1:17:01 4

5 Qué significan estos números? Altísima performance facilita la construcción de los modelos Un modelo de casi 4 millones se construye en 12 minutos. Uno de 35 millones en menos de 4 horas. La velocidad de carga es determinante de la capacidad de esta herramienta. Es fundamental para mantener controlada la complejidad de la solución a implementar y permitir que en ventanas de tiempo acotadas (pe: la noche) se actualice y procese toda la información requerida. Resolución de consultas: máxima performance y altísima escalabilidad La capacidad de O3 de resolver 95 consultas por segundo en el modelo de 4 millones de registros es indicativa los elevados niveles de optimización que se han logrado. Este nivel de respuesta asegura la capacidad del servidor para atender grandes cantidades de usuarios. Si consideramos que un usuario realiza una consulta cada 30 segundos (más que razonable si además consideramos que el muchos pedidos del cliente relacionados con la presentación de la información como el cambio de tipo de gráfico o ciertos ordenamientos se procesan sin hacer nuevas consultas) fácilmente podemos comprobar que un mismo servidor de O3 es capaz de atender a mas de 2500 usuarios en forma simultánea. Conclusiones O3 es un producto que integra varios años de investigación, un conjunto de ideas innovadoras y los beneficios de la tecnología mas moderna. Sus avanzadas prestaciones son realidades concretas y tangibles. La certificación rigurosa, repetible y objetiva a la que se ha sometido la calidad del producto lo demuestran. Los excelentes niveles de prestación indican que O3 es un producto preparado para operar en los más exigentes entornos de producción. Pero al poner todas estas prestaciones sobre Internet, el valor y alcance del producto se extienden hasta niveles difíciles de limitar. Cuando consideramos que los tiempos que corren demandan más que nunca decisiones oportunas, precisas y respaldadas por el conocimiento de la realidad, vemos que una herramienta de apoyo es de valor estratégico para las organizaciones. La certificación lograda, demuestra en el laboratorio que O3 está preparado para convertirse en el sistema clave para el apoyo a la toma de decisiones. La exitosa experiencia de mas de 50 empresas en 10 países, lo confirma en la práctica. 5