BD muy grandes ¿Qué criterio usar?

[PaFernan99]

Hola gente!
Estoy trabajando en un sistema de administración documental, donde se manejan imágenes escaneadas con un tamaño total que superan los 50 GB (entre texto e imágen).
El sistema deberá ser multiusuario y web. Supongo que las mejores opciones para desarrollarlo serían con Java, Visual Studio o alguna de las versiones de Delphi .Net.

Las dudas que se me plantean con este problema son las siguientes:

¿Qué motor es es que más me conviene usar?

¿Conviene (o posible), guardar las imágenes en la BD?

Suponiendo que cada colección documental esté en un promedio de 50 GB, y tenga alrededor de 9 colecciones ¿Conviene tener una BD para cada colección o es preferible tener una sola BD para todas, ya que debo realizar búsquedas cruzadas entre las colecciones ?


¿Suponiendo que el texto escaneado esté entre 1 GB y 2 GB (creo que exagerando un poco), cuál es el tipo de campo que debo usar para lograr la mejor performance de búsqueda?

Creo que por ahora es sólo eso. Seguramente se me plantearán más dudas todavía.

Muchas gracias y saludos!

[[coso]]

Hola, no se si te valdria mas la pena crearte tu propio sistema, dejando las imagenes en archivos comprimidos tal cual y de igual manera el texto, mientras que en la base de datos tansolo poner las referencias a estos archivos. Podrias, por ejemplo, por cada entrada de la base de datos tener un directorio y dentro de este la información en archivos mas optimizados segun el tipo de dato. saludos.

[[Delphius]]

Hola PaFernan99,
Estoy con coso, no creo que sea tan viable empezar un sistema de cero. A menos que sea demasiado a la medida, y tengas los recursos, el presupuesto y el tiempo necesario me parece que es mejor buscar algo ya hecho.
¿Es para ti el sistema? ¿Para un cliente en particular? O por el contrario... ¿Un desarrollo genérico y con posibilidad de licenciamiento a muchas empresas?

Aqui en Salta, PLUMADA ofrece un servicio de gestión y resguardo de información tanto física como digital. ¿No hay una empresa así por allí?
Eso si, los servicios de PLUMADA no son tan baratitos que digamos.

Saludos,

[[coso]]

Estoy con coso, no creo que sea tan viable empezar un sistema de cero

no,no, si yo decia lo contrario

[[Delphius]]

Empezado por coso

no,no, si yo decia lo contrario

Juraría haber leído un "Pero" entre "...tu propio sistema," y "dejando las imágenes..."

No más digo que tal vez lo mejor, como una opción o alternativa a contemplar es emplear algo ya hecho. En este caso, yo di el ejemplo de PLUMADA, que ofrece el servicio de resguardo y gestión de documentos físicos y digitales (que no es lo único que hace).

En fin, ya nos dirá PaFernan99 que es lo que se está buscando.

Saludos,

[[coso]]

No no, mi idea era que creara un sistema de carpetas, correspondiendo cada directorio a una entrada en la base de datos. Si pone imagenes de 10Gb y cosas por el estilo (por otra parte, que lo veo muy exagerado) lo mejor seria trabajar con el formato nativo de las imagenes, ya que tendran su propio tipo de compresion, etc...si se pone raw data en la base de datos, quiza cada entrada te ocupa ...no se...230 Gb. Hacer un browse a una base de datos asi seria lentisimo. Te recomiendo otra vez eso mismo: usar en tu bd tansolo las referencias a los archivos, y crear un sistema fijo de directorios,etc...cargando y haciendo previews segun necesites. De todas maneras, si se opta por un alojamiento externo, la velocidad de subida y bajada de red tendra que ser mas que aceptable para que tu programa no se vaya estancando cada segundo.