Introducción a MySQL. Fernando Ipar Percona. Febrero 2011 ASUOC

Transcripción

1 Introducción a MySQL Fernando Ipar Percona 1 Febrero 2011 ASUOC

2 Agenda Presentación e introducción Historia Características Arquitectura Uso básico Administración Uso avanzado Respaldos y restauración 2

3 3 Presentación e introducción

4 Presentación Percona Mayor y mas antiguo proveedor independiente de consultoría y soporte MySQL Fundada en 2006 Fuerza de trabajo global Fernando Ipar Gerente de Soporte 24x7 MySQL 5.0 Certified Developer & DBA Usuario desde 2001 (3.23) 4

5 Introducción a MySQL DBMS Open Source mas popular (GPL) MySQL AB -> Sun -> Oracle MySQL + MySQL Cluster ACID Usando el Motor de Almacenamiento apropiado (p.e. Innodb) Replicación nativa SBR (Statement based) o RBR (Row Based) (Replication) Multitud de APIs C/C++, PHP, Java, Ruby, Python, Perl,... 5

6 6 Historia

7 Breve historia de MySQL ISAM msql Cuando resultó lento, comienza MySQL 3.23: Ene : Oct 2004 (subconsultas, PSs) 5.0: Oct 2005 (cursores, SPs,triggers, vistas, XA) 2008: Sun Microsystems 2010: Oracle 5.5: Dic 2010 (Innodb por omisión, mejoras en escalabilidad, replicación, etc) 7

8 8 Características

9 Glosario instance proceso servidor mysqld database / schema (!= Oracle schema) table user 9

10 SQL estándar Intenta cumplir todo el estándar ANSI/ISO Pero sin comprometer velocidad y calidad de código SQL modes por servidor o por conexión definen nivel de permisividad o exigencia Ejemplos: ANSI, ORACLE Extensiones: /*! */ STRAIGHT_JOIN

11 Plugins API introducida en 5.1 Funciones (UDFs) Comparten espacio de direccionamiento con el servidor Almacenamiento (Storage Engines) Innodb plugin 11

12 Replicación Nativa No failover automático mysql_mmm o flipper SBR (Statement Based, original) RBR (Row Based, desde 5.1) MIXED Desde 5.1, elige el tipo mas apropiado para cada sentencia Monohilo Soporta filtros O también Blackhole storage engine 12

13 13 Arquitectura

14 Cliente/Servidor Cliente (CLI, PHP, Java,.NET,...) Servidor Pool de conexiones Interface SQL Parser Optimizador Caches y buffers Motores de almacenamiento Logs y archivos o particiones Logs 14

15 Plugins Cargados dinámicamente Un mal plugin puede hacer caer mysqld Plugins de: Almacenamiento Funciones Almacenamiento Cargar motores dinámicamente Funciones Mejora de desempeño p.e. checksumming 15

16 API de almacenamiento Primitivas de acceso a datos próxima fila, próximo registro de índice, etc SQL (casi) independiente del motor 16

17 17 Uso básico

18 telecaster-6:~ fernandoipar$ mysql -uroot sakila Reading table information for completion of table and column names You can turn off this feature to get a quicker startup with -A Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 3 Server version: log Source distribution Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. 18 mysql>

19 mysql> show tables; Tables_in_sakila actor actor_info address category city country rows in set (0.00 sec) 19

20 mysql> select first_name, last_name from actor limit 3; first_name last_name PENELOPE GUINESS NICK WAHLBERG ED CHASE rows in set (0.00 sec) 20

21 21 mysql> pager egrep 'Name Index_length' PAGER set to 'egrep 'Name Index_length'' mysql> show table status\g Name: actor Index_length: Name: actor_info Index_length: NULL Name: address Index_length: Name: category Index_length: rows in set (0.47 sec)

22 mysql> select * from actor into outfile '/tmp/ actors.csv' fields terminated by ','; Query OK, 200 rows affected (0.00 sec) telecaster-6:~ fernandoipar$ more /tmp/actors.csv 1,PENELOPE,GUINESS, :34:33 2,NICK,WAHLBERG, :34:33 3,ED,CHASE, :34:33 4,JENNIFER,DAVIS, :34:33 5,JOHNNY,LOLLOBRIGIDA, :34:33 6,BETTE,NICHOLSON, :34:33 7,GRACE,MOSTEL, :34:

23 23 mysql> load data infile '/tmp/actors.csv' into table actor fields terminated by ','; ERROR 1062 (23000): Duplicate entry '1' for key 'PRIMARY' mysql> SET foreign_key_checks = 0; Query OK, 0 rows affected (0.04 sec) mysql> truncate table actor; Query OK, 0 rows affected (0.06 sec) mysql> load data infile '/tmp/actors.csv' into table actor fields terminated by ','; Query OK, 200 rows affected (0.05 sec) Records: 200 Deleted: 0 Skipped: 0 Warnings: 0 mysql> SET foreign_key_checks = 1; Query OK, 0 rows affected (0.00 sec)

24 mysql> select CURRENT_USER; CURRENT_USER row in set (0.01 sec) mysql> log

25 25 Administración

26 Usuarios Usuario MySQL = Usuario + Host root@localhost!= root@ Privilegios Globles Por base de datos (schema/database) Por tabla Por columna Por programa almacenado Límites Consultas, actualizaciones, conexiones 26

27 mysql> create database asuoc; Query OK, 1 row affected (0.01 sec) mysql> use asuoc; Database changed mysql> ^Z [1]+ Stopped mysql sakila telecaster-6:~ fernandoipar$ ls -la /opt/local/var/db/ mysql5/ grep asu drwx _mysql wheel 102 Feb 9 03:55 asuoc 27

28 create table prueba (id int not null auto_increment primary key, descr char(40)); Query OK, 0 rows affected (0.06 sec) mysql> insert into prueba values (NULL,'una prueba'); Query OK, 1 row affected (0.00 sec) mysql> select * from prueba; id descr una prueba row in set (0.00 sec) mysql> drop database asuoc; Query OK, 1 row affected (0.07 sec) No relacionado con número de filas/tuplas afectadas en las tablas de la base eliminada 28

29 mysql> create user identified by 'unaclave'; Query OK, 0 rows affected (0.00 sec) mysql> ^Z [1]+ Stopped mysql telecaster-6:~ fernandoipar$ mysql -ufipar -punaclave Welcome to the MySQL monitor. Commands end with ; or \g. Your MySQL connection id is 10 Server version: log Source distribution Type 'help;' or '\h' for help. Type '\c' to clear the current input statement. mysql> Bye telecaster-6:~ fernandoipar$ mysql -ufipar -punaclave sakila ERROR 1044 (42000): Access denied for user 'fipar'@'localhost' to database 'sakila' 29telecaster-6:~ fernandoipar$

30 mysql> grant select on sakila.* to Query OK, 0 rows affected (0.04 sec) mysql> grant all on sakila.* to 'fiparr'@'localhost'; Query OK, 0 rows affected (0.00 sec) telecaster-6:~ fernandoipar$ mysql -ufipar - punaclave sakila... mysql> Bye telecaster-6:~ fernandoipar$ mysql -ufiparr sakila... mysql> 30

31 mysql> select as Username, Password from user where user like 'fipar%'\g **************** 1. row *************** Username: P a s s w o r d : *FCB53C8F9A FC4018AF8DFE5921D ***************** 2. row *************** Username: fiparr@localhost Password: 2 rows in set (0.00 sec) 31

32 mysql> update user set Password=PASSWORD ('unaclave') where user = 'fiparr'; Query OK, 1 row affected (0.00 sec) Rows matched: 1 Changed: 1 Warnings: 0 mysql> select concat(user,'@',host) as Username, Password from user where user like 'fipar%'\g ************* 1. row ************* Username: fipar@localhost P a s s w o r d : *FCB53C8F9A FC4018AF8DFE5921D ************** 2. row ************ Username: fiparr@localhost P a s s w o r d : *FCB53C8F9A FC4018AF8DFE5921D 322 rows in set (0.00 sec)

33 Configuración my.cnf Ejemplos incluídos my-[huge large medium small innodb-heavy-4g].cnf Valores por omisión asumen MySQL comparte recursos Uso conservativo Difícil configurar para múltiples Motores MyISAM usa cache del SO InnoDB usa cache propio (buffer pool) 33

34 Configuración - secciones Secciones Leído por [mysqld], [server] (o específicos: [mysqld-5.0]) [mysqld_safe], [safe_mysqld] mysqld, mysql.server,mysqld_safe mysqld_safe [mysql.server] mysql.server [client] Programas cliente 34

35 35 (Sorpresas de) comportamiento

36 mysql> insert into now_test values (NULL,' '); Query OK, 1 row affected, 1 warning (0.00 sec) mysql> show warnings; Level Code Message Warning 1264 Out of range value for column 'ts' at row row in set (0.00 sec) 36

37 mysql> set sql_mode=strict_all_tables; Query OK, 0 rows affected (0.00 sec) mysql> insert into now_test values (NULL,' '); ERROR 1292 (22007): Incorrect datetime value: ' ' for column 'ts' at row 1 37

38 mysql> set SQL_MODE = STRICT_ALL_TABLES; Query OK, 0 rows affected (0.00 sec) mysql> insert into now_test values (NULL,' '); ERROR 1292 (22007): Incorrect datetime value: ' ' for column 'ts' at row 1 38

39 STRICT_ALL_TABLES es inseguro en Motores no transaccionales

40 No usar motores no transaccionales a menos que haya una buena razón

41 mysql> create table prueba_txt ( id int not null auto_increment, descr char(40), primary key (id)); Query OK, 0 rows affected (0.41 sec) mysql> insert into prueba_txt values (NULL,'una cadena'),(null,"otra cadena"); Query OK, 2 rows affected (0.00 sec) Records: 2 Duplicates: 0 Warnings: 0 41

42 mysql> select * from prueba_txt\g *********** 1. row ******** id: 1 descr: una cadena *********** 2. row ********* id: 2 descr: Otra cadena 2 rows in set (0.00 sec) 42

43 43 Uso avanzado

44 Subconsultas Desde MySQL 4.1 Tipos Scalar Row Column Table En muchos casos, se sugiere reescribir como JOIN Especialmente para subconsultas dependientes 44

45 Subconsulta Scalar mysql> select film_id, title, (select name from language where language_id = f.language_id) as language from film f limit 3; film_id title language ACADEMY DINOSAUR English 2 ACE GOLDFINGER English 3 ADAPTATION HOLES English rows in set (0.00 sec) 45

46 Subconsulta Row mysql> select rating from film_list where (title,description) = (select title,description from film where film_id = 1); rating PG row in set (0.59 sec) 46

47 Subconsulta Column mysql> select first_name, last_name from actor where actor_id in (select actor_id from film_actor where film_id = 1); first_name last_name PENELOPE GUINESS CHRISTIAN GABLE... MARY KEITEL rows in set (0.37 sec) 47

48 Subconsulta Table mysql> select first_name,last_name from employees e join (select emp_no,from_date,to_date from dept_emp where dept_no = 'd005') _de using (emp_no) limit 3; first_name last_name Georgi Facello Anneke Preusig Saniya Kalloufi rows in set (0.64 sec) 48

49 Reescrito como JOIN mysql> select first_name,last_name from employees e join dept_emp using (emp_no) where dept_no = 'd005' limit 3; first_name last_name Georgi Facello Anneke Preusig Saniya Kalloufi rows in set (0.00 sec) 49

50 Vistas Desde No vistas materializadas Algoritmos de implementación MERGE TEMPTABLE Limitado soporte para vistas modificables Mal desempeño 50

51 Vistas mysql> create view emp_d005 as select first_name,last_name from employees e join dept_emp using (emp_no) where dept_no = 'd005'; Query OK, 0 rows affected (0.49 sec) 51 mysql> select * from emp_d005 limit 3; first_name last_name Georgi Facello Anneke Preusig Saniya Kalloufi rows in set (0.00 sec)

52 Claves foráneas Solo en InnoDB Pueden habilitarse/deshabilitarse (para cargar dumps) SET foreign_key_checks = [0 1]; Impacto negativo en rendimiento Mas bloqueos 52

53 Claves foráneas CREATE TABLE `dept_emp` ( èmp_no` int(11) NOT NULL, `dept_no` char(4) NOT NULL, `from_date` date NOT NULL, `to_date` date NOT NULL, PRIMARY KEY (èmp_no`,`dept_no`), KEY èmp_no` (èmp_no`), KEY `dept_no` (`dept_no`), CONSTRAINT `dept_emp_ibfk_1` FOREIGN KEY (èmp_no`) REFERENCES èmployees` (èmp_no`) ON DELETE CASCADE, CONSTRAINT `dept_emp_ibfk_2` FOREIGN KEY (`dept_no`) REFERENCES `departments` (`dept_no`) ON DELETE CASCADE ) ENGINE=InnoDB DEFAULT CHARSET=latin1 1 row in set (0.00 sec) 53

54 ACID Innodb Transaction logs Análogos a Redo logs de Oracle Solo se usan en recuperación Escritura Log Buffer pool Table space Background thread para checkpoints 54

55 Lecturas no bloqueantes InnoDB Lecturas no bloqueantes con versiones por TRX ID Trx read view will not see trx with id>= , sees < TRANSACTION ISOLATION LEVEL READ_UNCOMMITED, READ_COMMITED, REPEATABLE_READ, SERIALIZABLE innodb_flush_log_at_trx_commit ACID = 1 Riesgo / Rendimiento = 0 o 2 55

56 Programas almacenados Desde 5.0 Procedimientos o funciones Se compilan por sesión Mal desempeño para casos de uso comunes en otros DBMSs Pueden causar problemas con replicación (SBR) Recomendados: Procesos lote complejos de ejecución poco frecuente Procesos complejos de ejecución frecuente por sesión 56

57 Optimización de consultas 57 mysql> explain select first_name,last_name from employees e join (select emp_no,from_date,to_date from dept_emp where dept_no = 'd005') _de using (emp_no) limit 3\G *************************** 1. row *************************** id: 1 select_type: PRIMARY table: <derived2> type: ALL possible_keys: NULL key: NULL key_len: NULL ref: NULL rows: Extra:

58 Optimización de consultas *************************** 2. row *************************** id: 1 select_type: PRIMARY table: e type: eq_ref possible_keys: PRIMARY key: PRIMARY key_len: 4 ref: _de.emp_no rows: 1 Extra: 58

59 Optimización de consultas *************************** 3. row *************************** id: 2 select_type: DERIVED table: dept_emp type: ref possible_keys: dept_no key: dept_no key_len: 4 ref: rows: Extra: Using where 3 rows in set (0.68 sec) 59

60 Optimización de consultas mysql> explain select first_name,last_name from employees e join dept_emp using (emp_no) where dept_no = 'd005' limit 3\G *************************** 1. row *************************** id: 1 select_type: SIMPLE table: dept_emp type: ref possible_keys: PRIMARY,emp_no,dept_no key: dept_no key_len: 4 ref: const rows: Extra: Using where; Using index 60

61 Optimización de consultas *************************** 2. row *************************** id: 1 select_type: SIMPLE table: e type: eq_ref possible_keys: PRIMARY key: PRIMARY key_len: 4 ref: employees.dept_emp.emp_no rows: 1 Extra: 2 rows in set (0.00 sec) 61

62 Replicación nativa Usa binlogs Independientemente del motor de almacenamiento Esclavos 1 hilo de IO (descarga binlogs desde el maestro) 1 hilo de SQL (lee y ejecuta sentencias desde el relay log) 62

63 1 hilo de SQL

64 Replicación nativa Peligros Funciones o procedimientos no deterministas Combinación de motores de almacenamiento MyISAM en maestro: rollback InnoDB en esclavo: Error! Por qué? Escrituras en el esclavo read_only=1 (my.cnf [mysqld]) Lag entre maestro y esclavo(s) 1 solo hilo SQL 64

65 65 Respaldos y restauración

66 mysqldump Genera una secuencia de sentencias SQL Bueno para exportar version A y cargar en B (A<B) Bueno para exportar motor A y cargar en B Lento para restaurar mysqldump -uroot --all-databases mysqldump --no-data sakila mysqldump --single-transaction --all-databases 66

67 mysqlhotbackup No es hot! Solo MyISAM Bloquea las tablas y copia los archivos mysqlhotcopy /var/lib/mysql /backup/mysql/latest 67

68 innodb hot backup / xtrabackup InnoDB MyISAM también, pero es bloqueante. respaldos incrementales (xtrabackup) respaldos no bloqueantes innobackupex /backups/mysql/latest 68

69 mylvmbackup MyISAM, InnoDB Bloquea tablas, toma snapshot LVM, libera tablas Restauración == inicial MySQL y esperar al crash recovery mylvmbackup --mycnf=/etc/my.cnf --vgname datavg --lvname=mysql --backuptype=tar 69

70 70 Preguntas?

71 Muchas gracias?: 71