POSTGRESQL 8.4. Una fotografía del nuevo release. Emanuel Calvo Franco

Transcripción

1 POSTGRESQL 8.4 Una fotografía del nuevo release Emanuel Calvo Franco

2 Disertante: Emanuel Calvo Franco Miembro de la comunidad del Arpug (Postgresql Argentina) y de la comunidad del AoSUG (Open Solaris). Actualmente trabajo como DBA y consultor en Bases de datos en el consorcio SIU ( dependiente del Ministerio de Educación. Sitio personal: Trabajo con gestores como Postgresql, Mysql, Oracle, Informix, Sqlite, Hsql.

3 Agenda Breve Brief. Porque utilizar Postgresql. Porque migrar? Compilación en diversas plataformas. Contribs Prestaciones nuevas. Algunas cosas para OLAP. Proyectos. Posibles prestaciones para 8.5

4 Postgresql Brief Base de datos Objeto-Relacional. Basada en el trabajo pionero de Stonebraker. Versionado de tres dígitos. <Mayor>.<Nuevas Prestaciones>.<Patches> , 8.3.7, Soporta varios sistemas operativos. Desarrollado integramente en standard C89. Seguridad transaccional.

5 Porque tengo que usar pgsql 8.4? (1) Reducción del TCO. Licencia BSD. Exelente soporte a través de las listas. Crecimiento de soporte comercial en Argentina y en otros países. Exelente documentación. Rendimiento acorde a prestaciones. Prestaciones a 0 costo. Extensibilidad.

6 Porque tengo que usar pgsql 8.4? (2) Full-text search MVCC PostGIS PL/* Por defecto es quizás la base de datos más segura del mercado. Compatibilidad con el estándar (créanme, es importante) Soporte Nativo de XML (--with-xml) One-click installer para varios sistemas operativos. 2-Phase Commit

7 Porque tengo que usar pgsql? (3) Particionado de tablas básico a través de herencia. RANGE HASH? Soporte de consultas complejas. Ventajas de determinadas extensiones de objetos: funciones polimórficas, herencia, operadores sobrecargados, identificadores de instancias (tuplas con OID o CTID) INHERITS Select * from tabla where ctid = $$(0,64)$$; Vistas Materializadas, implementadas a través de RULES.

8 Porqué tengo que migrar? (1) Mejora de rendimiento en herramientas de DBA (VACUUM y pg_restore). Mapa de Visibilidad. Mayor énfasis en BI y OLAP. Más objetos (OPERATOR FAMILY CLASS, entre otros). Mayor integración con Dtrace (+ probes) Más sencillez para la puesta a punto (adiós max_fsm_pages!). Características propias de bases privativas a 0 costo (window functions, recursive, etc). Mejora del Soporte a plataformas uindous.

9 Porqué tengo que migrar? (2) Mejoras al psql (cliente de consola). variadic functions Case-insensitive text (citext) Disparadores en llamadas a TRUNCATE Soporte para busqueda parcial en índices GIN (ex r- tree) y Full Text Search. ALTER SEQUENCE... RESTART LIMIT (SELECT...) AS optional in SELECT Common Table Expressions & Recursive Queries

10 Porqué tengo que migrar? (3) current_query() generate_subscripts() time-based generate_series() select * from generate_series(current_date::timestamp, (CURRENT_DATE+10)::timestamp,'1 day'::interval); array_agg() y unnest() Mejoras al Warm Standby Permisos a nivel de columna y para la acción TRUNCATE. quote_nullable() (convierte NULL en NULL ) :o

11 Porqué tengo que migrar? (4) Metodo de hash para las consultas que utilizan DISTINCT/ UNION/ INTERSECT/ EXCEPTION (ya no vendrán ordenadas, a menos que utlices ORDER BY). Mejoras en índices hash (en especial en columnas con ID). Parámetros de cantidad variable (variadic functions) Valores por defecto en parametros de funciones. CASE Control Structure in PL/pgSQL RETURN QUERY EXECUTE support in PL/pgSQL Foreign Data Wrapper (para uso con DBlink y PL/PRoxy) suppress_redundant_updates_trigger()

12 Basta! Vamos a mirar!

13 Compilación en Solaris con Sun Studio 12: A tener en cuenta: No se puede utilizar la librería readline. Debemos utilizar Gmake (no el make por defecto) Instalar Sun Studio (si es que queremos utilizarlo para compilar)../configure --prefix=/usr/local/pgsql84 CC=/opt/SUNWspro/bin/cc 'CFLAGS=-xO3 -xarch=native -xspace -W0,-Lt -W2,-Rcond_elim -Xa -xildoff -xc99=none -xcc' --datadir=/usr/local/pgsql84/data84 --enable-dtrace --enable-cassert --with-perl --with-python --with-libxml --with-libxslt --without-readline

14 Compilación en Debian y derivados. Instalar build-essentials

15 En uindous Se puede compilar con mingw y con Visual Studio Tiene una serie de requerimientos previos como: instalación de Active Perl.

16 Consideraciones luego de compilar Se crea automáticamente un directorio data. NO utilizarlo, es un template de cluster. Iniciar el cluster con initdb -D <directorio>

17 Contribs incluidos (extensiones al kernel)

18 Ya arrancó!

19 Nuevas asignaciones de permisos: Por columna: GRANT SELECT (year), INSERT (valor), UPDATE (otrovalor) ON tabla TO usuario; Para truncate: GRANT TRUNCATE ON tabla TO usuario;

20 Funciones internas del windowing functions: row_number() Rank() dense_rank() lag() lead() dense_rank() first_value() percent_rank() last_value() cume_dist() nth_value() ntile()

21 Windowing Functions - Sum

22 + windowing funct. rank() GAP

23 Otro ejemplo con sum...

24 Más ejemplos:

25 Cláusula WITH Pertenece a la novedad de CTE (Common table Expressions). Se convirtió en estándar en el 2008.

26 WITH simple:

27 Explaneando el WITH ':

28 WITH recursivo simple:

29 With recursivo complejo con EXPLAIN

30 With recursive (Hausdorf-Besicovich) WITH RECURSIVE Z(Ix, Iy, Cx, Cy, X, Y, I) AS ( SELECT Ix, Iy, X::float, Y::float, X::float, Y::float, 0 FROM (SELECT * i, i FROM generate_series(0,101) AS i) AS xgen(x,ix) CROSS JOIN (SELECT * i, i FROM generate_series(0,101) AS i) AS ygen(y,iy) UNION ALL SELECT Ix, Iy, Cx, Cy, X * X - Y * Y + Cx AS X, Y * X * 2 + Cy, I + 1 FROM Z WHERE X * X + Y * Y < 16::float AND I < 27 ),

31 ...continuing (2) --FILTER Zt (Ix, Iy, I) AS ( SELECT Ix, Iy, MAX(I) AS I FROM Z GROUP BY Iy, Ix ORDER BY Iy, Ix ) --DISPLAY SELECT array_to_string( array_agg( SUBSTRING( '.,,, %%%%@@@@#### ', GREATEST(I,1), 1 ) ), '' ) FROM Zt GROUP BY Iy ORDER BY Iy;

32 WOW!

33 Restauración de dumps con threads pg_restore --multi-thread=5 dump.sql dump.dump pg_restore

34 Performance mejorada posix_fadvice ( pre solicitud de I/O para discos en RAID) VACUUM solo sobre la data modificada. Autoconfiguración del max_fsm_pages y max_fsm_relations (Free Space Map). Anteriormente, podiamos ver si necesitabamos aumentar este parámetro con VACUUM ANALYZE (HINT:...)

35 Pre-fetch I/O RAID QUERY 1 2 3

36 Localización por DB CREATE DATABASE nuevita WITH ENCODING UTF8 COLLATE en_gb.utf8 CTYPE en_gb.utf8 ;

37 Mejoras al PL/pgsql y funciones CREATE FUNCTION f101 (int, int DEFAULT 9)... No más IF -END IF. CASE se utilizará en estos casos, inclusive mejorado para soportar BETWEEN. RETURNS TABLE (Alias para SETOF)

38 Array_Agg Unnest emanuel=# select array_agg(valor) from winpro where year = 2010; array_agg {9,7,7} (1 row) emanuel=# select unnest(array_agg(valor)) from winpro where year = 2010; unnest (3 rows)

39 N parametros variable CREATE OR REPLACE FUNCTION sumito(variadic v int[]) RETURNS int AS $$ DECLARE s int; i int; BEGIN s:=0; FOR i IN SELECT generate_subscripts(v,1) LOOP s := s + i; END LOOP; RETURN s; END; $$ LANGUAGE 'plpgsql';

40 Algunas 'cosillas' para OLAP...

41 Instalar un contrib... Debemos tener en cuenta que debemos compilar con lo que necesite el contrib que querramos utilizar. Xml2 libxml Ejemplo con tablefunc= # cd contrib # gmake #gmake install $ psql -Upostgres <base> < tablefunc.sql

42 Connectby (Jerarquía) emanuel=# SELECT * FROM connectby('connectby_tree', 'keyid', 'parent_keyid', 'row2', 0, '-') AS t(keyid text, parent_keyid text, level int, branch text);emanuel-# keyid parent_keyid level branch row2 0 row2 row4 row2 1 row2-row4 row6 row4 2 row2-row4-row6 row5 row2 1 row2-row5 (4 rows)

43 Crosstab (cube)

44 Proyectos interesantes a nivel comunidad Certificación Oficial. Empresas sponsor que se dedican integramente al desarrollo sobre Postgresql (Enterprise, Command Prompt, PGX) En Argentina: Posible certificación a nivel nacional. Fuerte calendario de capacitaciones en el interior y charlas.

45 Posibles prestaciones para 8.5 Permisos a nivel de tupla con SE-Postgresql Consultas de solo lectura para archivado continuo en esclavos (hot standby) Streaming de archivado continuo (log streaming) Index-only scans (covering index) Simplified table partitioning Automatically updatable views Vistas con CHECK OPTION

46 Bibliografía Presentación 8.4 de Hitoshi Harada, David Fetter y Bruce Momjian Manual 8.4