Ir al contenido principal

Usando el ScrollMode con Hibernate

JDBC nos proporciona cursores tipo Scroll (soportados por algunas bases de datos eso si), para recorrer poco a poco una cantidad muy grande de filas en una determinada tabla; como es de suponer una consulta que recupere miles o millones de objetos, puede traerse abajo el sistema por falta de memoria; Estos cursores también están disponibles con Hibernate y los mismos son utilizados en forma objetual mediante la implementación del patrón iterable (regularmente en JDBC tenemos los métodos last(), first(), next(), previous, relative con los cuales nos movemos a través del ResultSet y este se encarga de encapsular la traída por demanda de los Rows.

Dicho lo anterior, vamos al ejemplo con Hibernate:


SessionFactory sessionFactory = this.getSessionFactory();
Session session = sessionFactory.openSession();
String sql = "from MyDomainObject"; // fetch all data.
ScrollableResults results = null;
Object [] objects = null;

Transaction transaction = session.beginTransaction();
int rowCount = 0;
MyDomainObject domain = null;

results = session.createQuery(sql).setCacheMode(CacheMode.IGNORE)
.scroll(ScrollMode.FORWARD_ONLY);


while (results.next()) {

objects = results.get();
domain = MyDomainObject .class.cast(objects[0]);

// TODO: save or update or do something
if (rowCount % 20 == 0) { // clean buffer every 20 objects.

session.flush();
session.clear();
}

rowCount++;
}

System.out.println("Row process: " + rowCount);
transaction.commit(); // send de transaccion
session.close();
session = null;


La linea importante en realidad es esta:

results = session.createQuery(sql).setCacheMode(CacheMode.IGNORE)
.scroll(ScrollMode.FORWARD_ONLY);

Esta, nos proporciona un iterador con el cual podemos recuperar por demanda, miles si no millones de registros sin la necesidad de cargarlos todos en memoria, el resto del código me parece que es muy estándar, se trata de un iterador, hago alguna operación con el valor actual, hago flush y close, para salvar objetos proxy que hibernate no ha persistido del todo, al final envio la transacción si todo estuvo bien, realiza la operación y listo.

Un saludo,
J

Comentarios

Entradas más populares de este blog

Impensando acerca de las referencias en Java

Fue hace ya algún tiempo que pase un rato discutiendo con algunos compañeros acerca de si existe o no el paso por referencia; el discurso fue mucho hacia que en Java el comportamiento, en el supuestamente pasamos por referencia un objeto y por valor los objetos primitivos creo mucha polémica. Para ubicarnos en contexto veamos el siguiente ejemplo. public static void main(String[] args) { int value = 10; changeValue(value); System.out.println("value = " + value); User user = new User(); Name name = new Name(); user.setName(name); name.setName("jsanca"); name.setLastName("XXX"); user.setPassword("123queso"); System.out.println("user: " + user.getName().getName() + ", " + user.getName().getLastName() + ", " + user.getPassword()); changeValue1(user); System.out.println("user: " + user.getName().getName() + ", " + user.getName().getLastName() + ", " + user.ge...

Links acerca de usabilidad

Bueno esta haciendo un research acerca de usabilidad y decidi compartir algunos de los links mas interesantes: Este esta muy cool y dice por que son buenos, gmail #1: http://www.1stwebdesigner.com/design/well-designed-usable-sites/ Los mejores menus: http://www.kronikmedia.co.uk/blog/website-navigation-menu-design/3580/ Otro top ten: http://www.topsite.com/best/usability los CMS con mas usabilidad http://net.tutsplus.com/articles/web-roundups/top-10-most-usable-content-management-systems/ Las grandes companias que incorporan usabilidad en sus sistemas: http://www.siteiq.net/7806/the-2013-usability-top-10-ibm-leads-sap-soars-and-apple-screws-up-the-rankings-2 + Algo interesante: top ten de sitios de Universidades http://blog.thebrickfactory.com/2010/03/top-11-best-designed-university-websites/ Y estos son 10 videitos acerca de usabilidad: http://www.usefulusability.com/10-must-see-usability-videos/ Enjoy!

Wikipedia data base schema

Algo interesante como caso de estudio, especialmente para los que estén cursando bases de datos, el esquema de la Wikipedia esta disponible para hechar un ojo. A simple vista, me gusta mucho la simplicidad y lo bien documentada que se encuentra, vale la pena dedicarle un tiempo. http://www.wikipedia.org/