JDBC: Conexiones con bases de datos desde Java JDBC. Luis Fernando Llana Díaz. 27 de abril de 2010

Transcripción

1 Departamento de Sistemas Informáticos y Computación Universidad Complutense de Madrid de abril de 00 JDBC Conexión con una fuentes de datos. Realizar peticiones y actualizaciones. Manejar los resultados de las consultas Aplicación Java JDBC DBMS MySQL DBMS Oracle DBMS PostgresSQL

2 Drivers JDBC Es necesario un driver dependiente del proveedor de la Base de datos. MySQL MySQL java connector Estructura del ejemplo valores -- build. xml -- classes -- lib -- mysql. jar -> / usr / share / java / mysql. jar -- prj.el -- sql -- acciones. csv -- borra. sql -- crea. sql -- datos. csv -- valores. csv -- src -- valores -- Conexion. java -- ConsigueDatos. java -- LeeAcciones. java -- LeeValores. java -- PrQueries. java 0

3 Creando la base de datos Fichero crea.sql create database valores ; use valores ; create table valores ( id int unsigned auto_increment primary key, nombre varchar (), ibex_id varchar (00), url varchar (), tipo enum (" acciones "," fondos ") ); create table datos ( id int unsigned auto_increment primary key, valor int unsigned, fecha date, precio double, index ( fecha ), unique index (fecha, valor ) ); grant all on valores.* to luis identified by patata ; 0 0 ~/ valores$ mysql -u root -- password = mates < sql / crea. sql Interfaz java.sql.connection Establece conexión con la base de datos. No tiene constructor. Es un interfaz (está implementado en el driver). Constuye instrucciones SQL precompiladas (método preparestatement).

4 Realizando conexión con la base de datos package valores ; import java.sql. Connection ; import java.sql. DriverManager ; import java.sql. SQLException ; public class Conexion { protected static Connection getmysqlconnection ( String url, String db, String user, String passwd ) throws ClassNotFoundException, InstantiationException, 0 SQLException, IllegalAccessException { Class. forname ("com. mysql. jdbc. Driver "). newinstance (); return DriverManager. getconnection (" jdbc : mysql :// "+url+"/"+db+ "? user="+user+"& password="+passwd ); protected static Connection getmysqlconnection () throws ClassNotFoundException, InstantiationException, SQLException, 0 IllegalAccessException { return getmysqlconnection (" localhost ", " valores ", " luis ", " patata "); protected static String getfich ( String fich ) { java. net. URL url = ClassLoader. getsystemresource ( fich ); return url. getpath (); Ficheros de datos Fichero de valores: valores.csv BSCH BSCH acciones http :// www. bolsamadrid.es/esp / mercados / acciones / accind_. htm Endesa ENDESA acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_. htm Repsol - YPF REPSOL YPF acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_. htm Acciona ACCIONA acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_.htm Inditex INDITEX acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_.htm Teléfonica TELEFONICA acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_. htm Banco Popular BA. POPULAR acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / accind_. htm Ebro - Puleva EBRO PULEVA acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / igbm.htm Mittal - Steel ARCELOR MIT. acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / igbm.htm Indra INDRA A acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / igbm./ htm EADS EADS acciones http :// www. bolsamadrid.es/esp / mercados / acciones / igbm. htm Unipapel UNIPAPEL acciones http :// www. bolsamadrid.es/ esp / mercados / acciones / igbm.htm Madrid Bolsa MADRID BOLSA fondos http :// www. bolsamadrid.es/ esp / mercados / fondos / htmfondos /00 alfa.htm Plus Madrid PLUSMADRID fondos http :// www. bolsamadrid.es/ esp / mercados / fondos / htmfondos /00 alfa. htm FonCaixa FONCAIXA BOLSA INDICE ESPA &#; A fondos http :// www. bolsamadrid.es/esp / mercados / fondos / htmfondos /00 alfa00.htm

5 Cargar datos package valores ; import java.io. BufferedReader ; import java.io. FileReader ; import java.io. IOException ; import java.sql. Connection ; import java.sql. PreparedStatement ; import java.sql. SQLException ; import java. util. Scanner ; public class LeeValores { private static void insertadatos ( Connection con, BufferedReader in) 0 throws IOException, SQLException {... public static void main ( String [] args ) throws Exception { Connection con = null ; BufferedReader in = null ; try { con = Conexion. getmysqlconnection (); in = new BufferedReader ( new FileReader ( Conexion. getfich ("sql / valores. csv " ))); insertadatos (con,in ); 0 finally { if ( con!=null ) con. close (); if (in!=null ) in. close (); Accediendo sql/valores.csv Los objetos de clase ClassLoader permitend acceder a los recursos Java. java. net. URL url = ClassLoader. getsystemresource ( fich ); fich debe estar dentro del CLASSPATH en la ejecución. ~/ valores$ export CLASSPATH =.:./ classes :./ lib / mysql. jar ~/ valores$ $JAVA_HOME / bin / java valores. LeeValores

6 Cargar datos private static final String sqlins = " insert into valores ( nombre, ibex_id,url, tipo ) "+ " values (?,?,?,?)"; private final static int NOMBRE =; private final static int IBEX_ID =; private final static int URL_BOLSA =; private final static int TIPO =; private static void insertadatos ( Connection con, BufferedReader in) throws IOException, SQLException { 0 String linea = in. readline (); PreparedStatement pstmt = con. preparestatement ( sqlins ); while ( linea!=null ) { Scanner scan = new Scanner ( linea ); scan. usedelimiter (" "); String nombre = scan. next (); String ibex_id = scan. next (); String tipo = scan. next (); String url = scan. next (); System. out. println ( nombre +":"+ ibex_id +":"+ tipo +":"+ url ); 0 pstmt. setstring ( NOMBRE, nombre ); pstmt. setstring ( IBEX_ID, ibex_id ); pstmt. setstring (TIPO, tipo ); pstmt. setstring ( URL_BOLSA, url ); int n = pstmt. executeupdate (); linea=in. readline (); Ficheros de datos Fichero de valores: valores.csv B S C H E N D E S A R E P S O L - Y P F A C C I O N A I N D I T E X T e l e f ó n i c a B a n c o P o p u l a r E b r o - P u l e v a M i t t a l - S t e e l I N D R A E A D S U n i p a p e l M a d r i d B o l s a P l u s M a d r i d Valor compra /0/ /0/ /0/ /0/ /0/ /0/ /0/ /0/ /0/

7 Cargar datos public class LeeAcciones { public static void main ( String [] args ) throws Exception { Connection con = null ; BufferedReader in = null ; try { con = Conexion. getmysqlconnection (); 0 in = new BufferedReader ( new FileReader ( Conexion. getfich ("sql / acciones. csv " ))); Map <Integer, Integer > tabla = leevalores (con,in ); insertavalorescompra ( tabla, con, in ); insertadatos ( tabla,con,in ); finally { if ( con!= null ) { con. close (); if (in!= null ) { in. close (); 0 Cargar datos private static int getid ( Connection con, String nombre ) throws SQLException { String sql = " select id from valores where nombre like?"; PreparedStatement pstmt = con. preparestatement ( sql ); pstmt. setstring (, nombre ); ResultSet rs = pstmt. executequery (); if (rs. next ()) { return rs. getint (); return -; 0 private static Map <Integer, Integer > leevalores ( Connection con, BufferedReader in) throws IOException, SQLException { Map <Integer, Integer > tabla = new HashMap <Integer, Integer >(); Scanner scan = new Scanner (in. readline ()); scan. usedelimiter (" "); int pos = ; while ( scan. hasnext ()) { String nombre = scan. next (); 0 if (! nombre. equals ("") ) { int id = getid (con, nombre ); tabla.put ( new Integer ( pos ), new Integer (id )); pos ++; return tabla ;

8 Cargar datos private static void insertavalorescompra (Map <Integer, Integer > tabla, Connection con, BufferedReader in) throws IOException, SQLException { String linea = in. readline (); Scanner scan = new Scanner ( linea ); scan. usedelimiter (" "); scan. next (); // Nos saltamos la columna de las fechas int col = ; String sql = " update valores "+ " set valor_compra =?, participaciones =? where id=?"; PreparedStatement pstmt = con. preparestatement ( sql ); while ( scan. hasnext ()) { String porc = scan. next (); double part = Double. parsedouble ( scan. next ()); double precio = Double. parsedouble ( scan. next ()); String total = scan. next (); Integer id = tabla. get (new Integer (col )); pstmt. setdouble (, precio ); pstmt. setdouble (, part ); pstmt. setint (, id. intvalue ()); pstmt. executeupdate (); col ++; 0 0 Cargar datos private static void insertalinea ( String linea, Map <Integer, Integer > tabla, Connection con, BufferedReader in) throws IOException, SQLException, ParseException { Scanner scan = new Scanner ( linea ); scan. usedelimiter (" "); int col = ; PreparedStatement pstmt = con. preparestatement (" insert into datos "+ "( valor, fecha, precio ) values (?,?,?)"); 0 DateFormat df = new SimpleDateFormat ("dd/mm/yy"); NumberFormat nf = NumberFormat. getinstance (); String str_fecha = scan. next (); if (! str_fecha. equals ("")) { while ( scan. hasnext ()) { String porc = scan. next (); String part = scan. next (); String precio = scan. next (); String total = scan. next (); if (! precio. equals ("") ) { 0 Integer valor = tabla.get ( new Integer ( col )); pstmt. setint (, valor. intvalue ()); Date fecha = df. parse ( str_fecha ); pstmt. setdate (, new java. sql. Date ( fecha. gettime ())); pstmt. setdouble (, nf. parse ( precio ). doublevalue () ); pstmt. executeupdate (); col ++; 0

9 Realizar actualizaciones Instrucciones: INSERT, UPDATE, DELETE public static void pr ( Connection con ) throws SQLException { String sql = " update datos set precio=precio +"; PreparedStatement pstmt = con. preparestatement ( sql ); int n = pstmt. executeupdate (); System. out. println (n+" filas actualizadas "); SQLWarning warning = pstmt. getwarnings (); if ( warning!=null ) { System. out. println (" AVISOS... "); while ( warning!=null ) { System. out. println (" Message : " + warning. getmessage ()); warning = warning. getnextwarning (); else { System. out. println ("No hay avisos "); 0 Realizar Consultas Instrucciones Select select id, nombre, tipo from valores ResultSet rs = pstmt.executequery(); rs.next(); rs id nombre tipo rs BSCH acciones rs Endesa acciones rs Repsol-YPF acciones rs Acciona acciones rs Inditex acciones rs Telefónica acciones

10 Ejemplos de consultas I public static void pr ( Connection con ) throws SQLException { String sql = " select * from valores "; PreparedStatement pstmt = con. preparestatement ( sql ); ResultSet rs = pstmt. executequery (); while (rs. next ()) { int id = rs. getint ("id"); String nombre = rs. getstring (" nombre "); System. out. println (id+":"+nombre ); 0 Ejemplos de consultas II public static void pr ( Connection con ) throws SQLException { String sql = " select valores. nombre, datos.fecha, datos. precio "+ " from datos left join valores on valores.id= datos. valor "+ " where datos. fecha >= "+ " order by valores.tipo, valores. nombre, datos. fecha "; PreparedStatement pstmt = con. preparestatement ( sql ); ResultSet rs = pstmt. executequery (); while (rs. next ()) { String nombre = rs. getstring (" valores. nombre "); Date fecha = rs. getdate (" datos. fecha "); 0 double precio = rs. getdouble (" datos. precio "); DateFormat df = new SimpleDateFormat ("dd de MMMM de yyy "); NumberFormat nf = new DecimalFormat (" #, o \ euro o "); System. out. println (df. format ( fecha )+"\t"+nombre+"\t"+nf. format ( precio ));

11 Ejemplos de consultas III public static int getid ( String ibex_id, Connection con ) throws SQLException { String sql = " select id from valores where ibex_id like "+ ibex_id +" "; PreparedStatement pstmt = con. preparestatement ( sql ); ResultSet rs = pstmt. executequery (); if (rs. next ()) { return rs. getint (); else { return -; 0 Consiguiendo datos desde Conseguir el fichero HTML. Analizar el fichero. Añadir datos en la base de datos.

12 Conseguir el fichero HTML Fichero de valores: valores.csv private static String cargapagina ( java. net. URL url ) throws IOException { InputStream in = url. openstream (); StringBuffer sb = new StringBuffer (); int c = in. read (); while (c!= -) { sb. append (( char )c); c = in. read (); String res = sb. tostring (); return res ; 0 Analizar el fichero HTML Fichero de valores: <IMG SRC="/ images /arr -up.gif " BORDER =0> BSCH</A></TD><TD>,0</TD> <IMG SRC="/ images /arr -dw.gif " BORDER =0> ENDESA </A></TD><TD>0,</TD>... private static double getvalor ( String ibexid, String datos, String tipo ) throws ParseException { String regexp = null ; if ( tipo. equals (" acciones ")) { regexp=ibexid+" *</A></TD ><TD >([0 -,]+) </ TD >"; else if ( tipo. equals (" fondos ")) { regexp=ibexid+" *</a></td >.*? <TD *[^ >]* >([0 -,]+) </ TD >"; else { throw new RuntimeException (" Tipo \ "+ tipo +"\ desconocido "); 0 Pattern p = Pattern. compile ( regexp ); Matcher m = p. matcher ( datos ); if (m. find ()) { // Double. parsedouble no vale, no analiza,0 NumberFormat nf = NumberFormat. getinstance (); return nf. parse (m. group ()). doublevalue (); else { throw new RuntimeException (" Acciones \ "+ ibexid +"\ no encontrada "); 0

13 Insertar los datos en la Base de datos private static final String sqlins = " insert into datos ( fecha, valor, precio ) values (?,?,?)"; private static final int FECHA =; private static final int VALOR =; private static final int PRECIO =; private static void insertadatos ( java. sql. Date fecha, Connection con ) throws SQLException, IOException, ParseException { HashMap <String, String > paginas = new HashMap <String,String >(); String sql = " select * from valores "; PreparedStatement pstmtvalores = con. preparestatement ( sql ); ResultSet rs = pstmtvalores. executequery (); PreparedStatement pstmtins = con. preparestatement ( sqlins ); while (rs. next ()) { insertadatos ( pstmtins, fecha, rs, paginas ); 0 Insertar los datos en la Base de datos private static void insertadatos ( PreparedStatement pstmtins, java. sql. Date fecha, ResultSet rs, HashMap <String, String > paginas ) throws SQLException, IOException, ParseException { String url = rs. getstring ("url "); String datos = paginas. get ( url ); if ( datos ==null ) { datos = cargapagina ( paginas, url )); paginas.put (url, datos ); String tipo = rs. getstring (" tipo "); String ibexid = rs. getstring (" ibex_id "); double valor = getvalor ( ibexid,datos, tipo ); int id = rs. getint ("id"); String nombre = rs. getstring (" nombre "); pstmtins. setdate (FECHA, fecha ); pstmtins. setint (VALOR,id ); pstmtins. setdouble (PRECIO, valor ); int n = pstmtins. executeupdate (); 0 0

14 Consiguiendo datos automáticamente #!/ bin / sh # $Id : transparencias.tex,v :0: luis Exp $ JAVA_HOME =/ usr /lib / jvm /java sun CLASSPATH =/ home / casa / ahorros / classes $JAVA_HOME /bin / java -cp $CLASSPATH valores. ConsigueDatos $* $ crontab -l SHELL =/ bin / bash MAILTO = luis # Directorios donde buscar programas PATH =/ bin :/ usr / bin :/ usr / XR / bin :/ usr / local / bin :/ home / luis /bin * *,,,, / home / casa / ahorros / scripts / consiguedatos.sh > / dev / null >&