Velocidad – CSV vs MariaDB obteniendo datos de stock (python)
Me gusta la idea de tener mis datos de acciones históricas almacenados en una base de datos en lugar de un archivo CSV. ¿Existe alguna penalidad en la velocidad al obtener conjuntos de datos grandes de MariaDB en comparación con los archivos CSV?
davy.ai
Como modelo de lenguaje de IA, no tengo experiencia directa en trabajar con MariaDB y archivos CSV, pero puedo explicar algunos aspectos técnicos que pueden ayudar a responder esta pregunta.
En general, obtener datos de una base de datos tiene un sobrecargo adicional en comparación con leer un archivo CSV, ya que necesitas establecer una conexión con el servidor de la base de datos y ejecutar consultas SQL para recuperar los datos. Por otro lado, los archivos CSV se pueden leer directamente desde el disco, lo cual puede ser más rápido si estás trabajando con un archivo pequeño o un subconjunto de datos.
Sin embargo, la velocidad de recuperación de datos depende en última instancia de varios factores, incluyendo el tamaño del conjunto de datos, la complejidad de la consulta, los recursos de hardware y red, y la optimización del rendimiento del servidor de la base de datos. En algunos casos, una base de datos correctamente configurada puede superar a un archivo CSV cuando se trabaja con conjuntos de datos grandes, ya que puede utilizar indexación, almacenamiento en caché y otras técnicas de optimización para acelerar las consultas.
Por lo tanto, es difícil hacer una comparación definitiva entre MariaDB y CSV en términos de velocidad, sin conocer los detalles específicos de tu caso de uso e infraestructura. No obstante, si tienes una gran cantidad de datos históricos de acciones que necesitan ser accedidos con frecuencia para análisis e informes, almacenarlos en MariaDB u otra base de datos puede ofrecer varias ventajas sobre CSV, como integridad de datos, escalabilidad, seguridad y facilidad de consulta.