El Big Data

El Big Data és un terme àmpliament utilitzat que es refereix a l'acumulació massiva de dades que no poden ser analitzades utilitzant les eines tradicionals. Es tracta d'un fenomen cada vegada més estès que afecta molts camps com la sanitat, l'ocupació, la productivitat econòmica, la delinqüència, la seguretat, o la gestió de recursos. No és fàcil gestionar totes aquestes dades. El procés involucra diferents passos com la captura, emmagatzematge, recerca, intercanvi, anàlisi i visualització.

El problema de la gestió de grans quantitats de dades també apareix en molts camps d'investigació científica. La computació d'alt rendiment és un dels pilars per accelerar el descobriment de materials, desenvolupament en molts camps de la ciència i l'enginyeria, el més prominent de la química, la física i àrees relacionades. El volum d'informació que es genera diàriament, que ve dels resultats dels càlculs científics està augmentant exponencialment i els investigadors necessiten tenir eines per a la seva gestió. També és un problema per accedir a les dades generades. La majoria de les vegades, encara que el treball ha estat publicat, els resultats de projectes d'investigació científica són difícils o fins i tot impossibles de processar causa de l'alt grau de diversitat en els formats de dades que requereix la definició de normes.

En la recerca de solucions a aquest problema, els investigadors en l'ICIQ i a la URV han desenvolupat la plataforma ioChem-BD, una eina de múltiples caps destinada a la gestió de grans volums de resultats de química computacional d'un grup divers de paquets de simulació ja comuns. La plataforma automatitza l'extracció de les dades pertinents i la seva conversió en informació completament etiquetada en una base de dades distribuïda. Proporciona eines per a l'investigador per a poder validar, enriquir, publicar i compartir informació i eines en el núvol per accedir-hi i veure-la.

S'ha desenvolupat una eina útil amb la intenció que es converteixi en un estàndard. Ja es disposa d'un recull de dades, però la idea és que altres grups de recerca puguin incorporar les seves dades a la plataforma. Així, els resultats dels projectes d'investigació publicats estaran disponibles gairebé immediatament.

El disseny inicial de la plataforma s'ha realitzat d'acord amb les exigències de la química computacional. Però una vegada que s'estableixi, es podria aplicar a qualsevol camp en el qual es generen grans quantitats de dades.


Font: La gestió de la Química Computacional Big Data Problema: El ioChem-BD Plataforma