10433
Grupo de discusión sobre el lenguaje Python en español
No , es una condición para asegurar que la partición no se mayor a la memoria para abrir el archivo
Читать полностью…
Bueno gente como lo ve sirve o no ? Pensaba publicarlo como contribución cuando terminara de hacer los test. Hoy mismo porque estoy estudiando ingeniería de datos y me desvíe con este fascinante modelo.
Читать полностью…
Sigue sin ser un modelo hiperbólico, por lo que yo veo... no tiene la forma (x^2 + y^2) = 1, donde he obviado lis coeficientes por claridad... de ahí mi pregunta
Читать полностью…
Por último Ncelda lo definimos límite de celda seguro a nuestra porción de ram Ncelda=Mabrir/Bpesado ahora como nuestra retención depende también de La columna entonces podemos decir F(C)=Mabri/C*Bpesado y a su vez simplificando tenemos F(C)=Ncelda/C
Читать полностью…
Mreserva=Mlibre*(0.30) Mabrir es la cantidad de memoria para particionar las filas si que no quedemos sin ram en el proceso. Mabrir =Mreserva*0.25 porque 25% porque por cada 25% de memoria lo vamos asignar a cada partición que vamos abrir. Esto evite que si la memoria se dispare aún podamos garantizar que el proceso tenga memoria para continuar el proceso. 😔me va a silenciar por floting
Читать полностью…
Ok primero para entender el modelo, partamos de donde nace... Mi modelo busca solventar encontrar la fila por partición que asegure que la memoria no se desborde.
Читать полностью…
Por qué hiperbólica? No es una ecuación algebraica? memoria_total - memoria_actual = x * memoria_float + y * memoria_int + ...
Lo cual me hace pensar que como tengas strings vas a tener problemas, porque no sabes cuánta memoria reservar?
Eso requiere conocer los tipos de dato de cada columna a priori, y la cantidad de memoria accesible a la hora de leer, no?
Читать полностью…
Este curso es para aprender desde el principio?
Читать полностью…
"F * C * Bpesado" arriba es el tamaño máximo del archivo, no?
Читать полностью…
creo que es interesante tu propuesta, habría que ver qué dicen los demás cuando hagas una pull requests a la librería
Читать полностью…
Solo se considera el tamaño en byte del dato más grande que puede haber en una sola celda para estimar el valor de cada celda.
Читать полностью…
Entiendo que haces un cálculo aproximado: "esto pesa cada celda, multiplicado por filas y columnas, me da lo que pesa el archivo entero. Luego el chunksize será una proporción de algo así como el peso del archivo partido por la memoria que te puedes permjtir. Lo que hace chunk_size = archivo / memoria_accesible, o f(x) = 1 / x, que pare mí es una racional.
Por la imagen aquí no puedo pasar image pero su imagen es una hipérbola, solo que aja solo consideramos el lado positivo, ya que no tiene sentido hablar de filas negativas
Читать полностью…
No me gusta que hagan flooding. Jessec ha sido temporalmente silenciado por 1 minuto.
Читать полностью…
Luego que tenemos esto definido partamos de esta condición F*C*Bpesado donde F es filas , C son columnas y Bpesado es una constante aproximada de 72 u 80 byte que lo defino como la cantidad máxima que una celda puede tener en este consideremos un object pesado. Esto tres valores lo metemos en una inecuación F*C*Bpesado<Mabrir está es nuestra retención final nuestra función hiperbólica debe asegurar que esto siempre se cumpla. 😔ya me falta poco para llegar a la función.
Читать полностью…
Esto significa que trabajo: Mlibre: esto signficia la memoria libre cuando inicio todo para Mlibre>0. Luego necesitamos sacar Mreserva que va significar la cantidad de memoria para abrir el archivo necesitamos solo el 30% porque además de abrir el archivo luego vamos a necesitar leerlo.
Читать полностью…
Para poder leer la cantidad más eficiente en cada momento, trabajar con esas filas, desechar, continuar con las siguientes filas...
Читать полностью…
si viene lo basico el hola mundo, variables , ciclos , condiciones , funciones , listas y asi je
Читать полностью…
no se puede por aca je
si quieres dale jeje :)
Mañana lo leeré con calma y te digo te parece?
Читать полностью…
Es que me mire libros de phython desde cero pero sentí que no tenía base suficiente 😅
Читать полностью…