¿Qué soluciones de almacenamiento existen para trabajar con grandes volúmenes de datos de fotografías digitales?

17

Estoy saliendo con un fotógrafo profesional que ha estado acumulando imágenes digitales a un ritmo alarmante (miles de imágenes de alta resolución por mes).

¿Alguien tiene alguna recomendación de soluciones de almacenamiento externo y / o remoto para trabajar de manera efectiva con tan grandes volúmenes de datos? Administrar DVD grabados parece un poco aterrador.

storage  curation 
— Nate
fuente
2
Danos una estimación aproximada de tus incrementos mensuales de almacenamiento de datos.
— Alan
55
Estoy en TI y siempre he dicho que los datos más importantes del mundo son la colección de fotos digitales de su esposa (bueno, tal vez la colección de la esposa de su jefe ...) Entonces, aunque administrar un proceso de copia de seguridad parece un poco aterrador, no es nada al igual que su novia será si usted le dice, 'miel, el disco duro ha fallado y todas sus imágenes se han ido ...'
— BillN
también intente hacer esta pregunta en www.superuser.com
— studiohack
— mattdm
1
Noté que la otra publicación anterior podría ser un duplicado, pero en realidad me gusta más esta porque no solo se centra en la copia de seguridad, sino que también funciona de manera efectiva con los datos.
— mattdm

Respuestas:

12

Para ampliar lo que Nate ha sugerido, tiene las siguientes opciones:

  • Un servidor dedicado con RAID
  • Dispositivo USB externo como medio de almacenamiento secundario.
  • NAS basado en red con soporte RAID
  • Unidad de disco externa basada en USB que luego puede usar como un sistema de copia de seguridad en cinta y también asegurar el HDD almacenado fuera del sitio en caso de incendio

También hay algún software que puede crear una imagen ISO (imagen de CD / DVD) que puede contener bits de recuperación y almacenarla dentro de la ISO o como un archivo separado. Luego puede usar esto para recuperar datos del medio a medida que se vuelven defectuosos.

Actualización: El software que he estado buscando se llama: DVDisaster

Ah, y lo más importante, ¡siempre tenga más de una copia! También debe tener en cuenta la descomposición de bits que puede ocurrir en los medios, por lo que siempre vale la pena volver a copiar todo el catálogo a otro medio para garantizar que los bits se restablezcan.

— Wayne
fuente
10

Yo mismo comencé a generar una cantidad considerable de datos fotográficos. Mi biblioteca principal de Lightroom tiene más de 300 conciertos, y también hay todas las copias de seguridad. Probé un par de dispositivos Drobo RAID, que se conectan a través de USB (o posiblemente en red, con un dispositivo adicional). El Drobo, aunque es un dispositivo fácil de usar, es excesivamente lento.

Después de investigar un poco, me encontré con los dispositivos NetGear ReadyNAS. Estos son pequeños dispositivos de almacenamiento conectado a la red (NAS) que admiten 1-4 discos duros en la configuración RAID. Puede comenzar con una sola unidad y expandirse según lo necesite. Una vez que alcanza la capacidad máxima de la unidad, puede cambiar una de las unidades por una unidad más grande, y el sistema se expandirá al espacio adicional.

NetGear ofrece un par de generaciones de sus dispositivos NAS ahora. La generación anterior, ReadyNAS NV +, ofrece X-RAID 1, que requiere desconectarse cuando se agrega o actualiza una nueva unidad. La nueva generación, ReadyNAS NVX, ofrece X-Raid 2, que permite que su NAS permanezca en línea y se pueda usar mientras la unidad se expande en un nuevo espacio. Elegí un NVX yo mismo.

El costo total de un ReadyNAS varía de $ 300 a 700 por el gabinete, más el costo de las unidades. Comprar un ReadyNAS con unidades tiende a ser más costoso, ya que las unidades de alta velocidad se pueden comprar mucho más baratas individualmente. Recomiendo usar las unidades Seagate Barracuda o Hitachi, ya que tienen un caché más grande (32 MB para 2 TB) y platos de mayor densidad. La memoria caché más grande y la densidad más alta generalmente equivalen a velocidades más altas (un Western Digital Green o Blue ejecuta aproximadamente 20-30mb / s sostenido, mientras que un Seagate o Hitachi ejecuta aproximadamente 90-130mb / s sostenido). Mi configuración ReadyNAS NVX usa tres Hitachi 2Tb La memoria caché de 32 mb conduce y alcanza una velocidad de lectura sostenida de 80-85 mb / sy una velocidad de escritura sostenida de aproximadamente 60 mb / s.

A pesar del costo, la inversión es bastante sólida. Por alrededor de $ 400- $ 800, puede obtener un dispositivo sólido, silencioso y simple como una roca que puede almacenar una gran cantidad de datos y puede crecer con usted durante muchos, muchos años. Si comienza con 1TB, puede expandirse fácilmente a 8Tb o más en el futuro. El rendimiento es fenomenal, el dispositivo es flexible y debería durar.

— jrista
fuente
pero, ¿un incendio o una fuga de agua destruirán toda su copia de seguridad?
— Davy Landman
1
También tengo copias de seguridad en el disco BluRay, que guardo en una caja fuerte a prueba de fuego. ReadyNAS NVX es un sistema de almacenamiento secundario de almacenamiento en vivo, no una copia de seguridad en sí misma. Siempre debe tener copias de seguridad "duras" de sus datos críticos en una forma permanente de medios ... cualquier tipo de disco en vivo nunca debería considerarse realmente una copia de seguridad real.
— jrista
de hecho, pensé que se olvidó de mencionarlo, pero ahora leí la pregunta nuevamente y la pregunta no era sobre la estrategia inversa.
— Davy Landman
4

Mucho más importante que los medios de almacenamiento es el sistema de catálogo utilizado para saber qué hay almacenado donde :)

Todavía tengo que encontrar uno que funcione para mí, que sea lo suficientemente flexible como para permitirme crear las categorías y subcategorías que quiero, que funcione en todos los medios (digital, diapositivas, negativos, impresiones) y que sea fácil de usar.

— jwenting
fuente
3

Drobo ofrece interesantes dispositivos de almacenamiento adjuntos (USB, red, etc.). No son baratos, pero el almacenamiento basado en RAID parece una buena idea.

— Nate
fuente
2
ADVERTENCIA: Recientemente probé un par de dispositivos RAID Drobo. Me absolutamente no los recomiendo . Son los dispositivos más lentos que he usado, con una velocidad de lectura de aproximadamente 19mb / sy una velocidad de escritura de 11-12mb / s. Una simple memoria USB de $ 15 y 16 Gb es más rápida que un Drobo. Cambiar a un NetGear ReadyNAS NVX me llevó de 11-19mb / s de velocidad a más de 85mb / s de velocidad. Tomaría casi cualquier cosa sobre un Drobo.
— jrista
@Jrista: la primera iteración de Drobo no fue genial (aunque esas velocidades son las más bajas que he visto citadas: búho). Se han mejorado mucho actualmente; ciertamente no he tenido ningún problema aquí.
— ex-ms
Los probé recientemente, hace aproximadamente un mes. Creo que eran la generación actual. Es posible que haya recibido algunos malos, o tal vez su interfaz USB sea pobre, o algo así. De cualquier manera, el ReadyNAS grita, y estoy feliz con eso.
— jrista
@jrista - Al usar un ReadyNAS, ¿qué pasaría dentro de 5 años si falla una unidad en el RAID y ya no puede obtener una unidad coincidente para reemplazarla? Tengo entendido que un inconveniente de usar un RAID es que todas las unidades en el RAID deben coincidir.
— Dave Nelson
@Dave Nelson: ReadyNAS no requiere unidades idénticas. Utiliza X-Raid, un sistema RAID adaptativo patentado. No estoy seguro de qué tan bien funcionaría mezclar unidades de disco con SSD, pero no hay nada que me impida dejar caer una unidad de 10TB junto con mis unidades de 2TB actuales. También es posible eliminar una unidad, colocar una unidad de mayor capacidad y el sistema X-Raid restaurará todos los datos de la unidad eliminada por paridad a la nueva unidad. Por eso decidí invertir el dinero (que era considerable) en ReadyNAS NVX /
— jrista
3

¿Qué pasa con los discos duros externos simples?

— Studiohack
fuente
1
Buena respuesta. Lo bueno de los discos duros externos es su longevidad y portabilidad. Son simples y es poco probable que su interfaz desaparezca durante años.
— jrista
1
Sin embargo, asegúrese de tener copias de seguridad reales.
— mattdm
1
y para la copia de seguridad a largo plazo, cintas y / o DVD almacenados en una ubicación controlada a distancia (IronMountain ofrece dichos servicios, por ejemplo. Caro, por supuesto).
— Jwent
Tengo que estar en desacuerdo re: Longevidad. La portabilidad es genial. Fiabilidad, no tanto.
— voces
3

Soy un gran fanático del uso de almacenamiento en línea basado en la nube para mis imágenes (DropBox, Amazon S3, etc.).

Personalmente, uso JungleDisk para sincronizar todas mis imágenes de "guardián" con Amazon S3 ADEMÁS de tener múltiples copias locales en discos duros externos.

Notas: 1. Solo archive archivos JPG (no imágenes RAW) en línea para mantener bajos los costos de almacenamiento. 2. Califico todas las imágenes como parte de mi flujo de trabajo normal y luego exporto los JPG de todas las imágenes de una o más estrellas a la estructura de directorios que se respalda en Amazon.

— Scrappydog
fuente
Lo mismo ocurre aquí: elegí un plan 'ilimitado' en CrashPlan , que se encarga de hacer una copia de seguridad automática de todo a medida que se desarrolla. Sin problemas con los procesos manuales y cuesta casi lo mismo que un disco duro externo grande.
— Morten Siebuhr
2

El dolor del DVD podría mitigarse con Blu-Ray, pero no lo recomendaría, en realidad es una opción bastante costosa, especialmente cuando se considera el tamaño de los medios frente al costo. Creo que Wayne tiene una lista bastante buena, el disco es barato.

Una opción, no cubierta, es la opción SAS externa. Puede obtener gabinetes configurables RAID que se pueden conectar a su máquina y ofrecer velocidades muy superiores a las opciones de USB o NAS. Escribir gigabytes de archivos a través de USB o la red puede ser tedioso ...

— John Cavan
fuente
Al usar nuestro sitio, usted reconoce que ha leído y comprende nuestra Política de Cookies y Política de Privacidad.
Licensed under cc by-sa 3.0 with attribution required.