¿Alguna experiencia real de nivel empresarial con Transactional NTFS (TxF)?

Question

Antecedentes:

Soy consciente de this SO question sobre NTFS transaccional (TxF) y this article describir cómo Para usarlo, pero estoy en busca de experiencia del mundo real con una empresa razonablemente alto volumen sistema donde muchos de los datos de blobs (por ejemplo, documentos y/o fotos) deben ser persistieron una vez transaccionalmente y se leyeron muchas veces.

• Esperamos unas pocas decenas de miles de documentos escritos por día y lecturas de varias decenas de miles por hora.
• Podríamos almacenar índices dentro del sistema de archivos o en SQL Server, pero debemos poder escalar esto en varias casillas.
• Debemos conservar la capacidad de hacer copias de seguridad y restaurar los datos fácilmente para la recuperación de desastres.

La Pregunta:

• Cualquier mundo real, la experiencia de nivel empresarial con NTFS transaccional (txf)?

preguntas relacionadas:

• Cualquier persona transacciones distribuidas intentado usar TxF donde el mismo archivo se compromete a dos servidores espejo a la vez?
• ¿Alguien intentó una transacción distribuida con el sistema de archivos y una base de datos?
• ¿Alguna preocupación sobre el rendimiento/problemas de fiabilidad/datos de rendimiento que puede compartir? ¿Alguien ha hecho algo en esta escala antes de que las transacciones sean una preocupación?

ediciones: Para ser más claro, he investigado otras tecnologías, incluyendo nuevo tipo de datos FILESTREAM de SQL Server 2008, pero esta pregunta se dirige de modo específico en el sistema de archivos transaccional única.

Más Recursos:

• Un artículo de MSDN Magazine el TxF llamados "Enhance Your Apps With File System Transactions".
• Una webcast llamada "Transactional Vista: Kernel Transaction Manager and friends (TxF, TxR)". Este video cita una sobrecarga del uso de TxF de 2-5%, con la discusión de rendimiento comenzando aproximadamente en 25 minutos. Este es el primer conjunto de números duros que he encontrado. Y el video es una muy buena descripción de cómo funciona esto bajo el capó. Aproximadamente a las 34:30, el orador describe un escenario muy similar a esta pregunta.
• Un screencast de Channel 9 llamado "Surendra Verma: Vista Transactional File System". Habla sobre el rendimiento a partir de los 35 minutos. No hay números duros.
• Una lista de TxF articles en el blog de B # .NET.
• Un screencast de Channel 9 llamado "Transactional NTFS".

Answer 1

Desafortunadamente, parece que la respuesta es "No".

En casi dos semanas (una semana con una recompensa de 100 puntos) y 156 visitas, nadie ha respondido que han usado TxF para cualquier aplicación de gran volumen como describí. No puedo decir que esto haya sido inesperado y, por supuesto, no puedo probar que sea negativo, pero parece que esta característica de Windows no es bien conocida ni utilizada con frecuencia, al menos por los miembros activos de la comunidad SO en el momento de la redacción.

Si alguna vez consigo escribir algún tipo de prueba de concepto, publicaré aquí lo que aprendo.

Answer 2

¿Ha considerado filestream support en SQL Server 2008 (si está usando SQL Server 2008 por supuesto)? No estoy seguro del rendimiento, pero ofrece transaccionalidad y admite copia de seguridad/restauración.

Answer 3

Si bien no tengo mucha experiencia con TxF, sí tengo experiencia con MS DTC. TxF en sí mismo es bastante eficiente. Cuando se agrega el MS DTC para manejar múltiples administradores de recursos en varias máquinas, el rendimiento tiene un impacto considerable.

Según su descripción, parece que está almacenando e indexando volúmenes muy grandes de datos no estructurados. Supongo que también necesita la capacidad de buscar estos datos. Como tal, recomendaría encarecidamente buscar algo como Microsoft's Dryad o Google's MapReduce y un sistema de archivos distribuidos de alto rendimiento para manejar su almacenamiento e indexación de datos no estructurados. Los mejores ejemplos de sistemas empresariales de gran volumen que almacenan e indexan volúmenes masivos de datos blob son los motores de búsqueda de Internet como Bing y Google.

Existen bastantes recursos disponibles para gestionar datos no estructurados de alto rendimiento, y probablemente resolverían su problema de forma más efectiva que SQL Server y NTFS.

Sé que está un poco más lejos de lo que probablemente estabas buscando ... pero mencionaste que ya habías agotado todas las otras vías de búsqueda alrededor de la caja NTFS/TxF/SQL. ;)

Answer 4

Supongo que la experiencia del "mundo real, de nivel empresarial" es más subjetiva de lo que parece.

La actualización de Windows usa TXF. Por lo tanto, se usa bastante en términos de frecuencia. Ahora, no está haciendo ningún trabajo multinodo y no está pasando por DTC o algo así, pero está usando TXF para manipular el estado del archivo. Coordina estos cambios con cambios en el registro (TXR). ¿Eso cuenta?

Un colega mío presentó this talk to SNIA, lo cual es bastante franco sobre mucho del trabajo alrededor de TXF y podría arrojar un poco más de luz. Si estás pensando en usar TXF, vale la pena leerlo.

Answer 5

Ronald: FileStream se superpone sobre TxF.

JR: Si bien Windows Update usa TxF/KTM y demuestra su utilidad, no es una aplicación de alto rendimiento.