Preguntas etiquetadas con split

Relacionado, pero sin respuestas satisfactorias: ¿Cómo puedo dividir un archivo de texto grande en partes de 500 palabras más o menos? Estoy tratando de tomar un archivo de texto ( http://mattmahoney.net/dc/text8.zip ) con> 10 ^ 7 palabras en una sola línea, y dividirlo en líneas con N palabras cada una. …

11 text-processing  sed  awk  split 

Tengo un árbol de directorios que me gustaría hacer una copia de seguridad en los discos ópticos. Desafortunadamente, excede el tamaño de cualquier disco (es de aproximadamente 60 GB). Estoy buscando un script que divida este árbol en fragmentos de tamaño apropiado con enlaces duros o cualquier otra cosa (dejando …

11 backup  disk-usage  split  burning 

Tengo tres tipos de datos que están en diferentes formatos; Para cada tipo de datos, hay un script de Python que lo transforma en un único formato unificado. Este script de Python es lento y está vinculado a la CPU (a un solo núcleo en una máquina multinúcleo), por lo …

10 text-processing  pipe  split  parallelism 

Tenía un archivo comprimido grande (~ 60G) ( tar.gz). Solía splitdividirlo en 4 partes y luego catunirlas nuevamente. Sin embargo, ahora, cuando estoy tratando de estimar el tamaño del archivo sin comprimir, ¿resulta que es más pequeño que el original? ¿Cómo es esto posible? $ gzip -l myfile.tar.gz compressed uncompressed …

9 compression  gzip  split 

Tengo un archivo de texto grande (~ 50 Gb cuando gz'ed). El archivo contiene 4*Nlíneas o Nregistros; Es decir, cada registro consta de 4 líneas. Me gustaría dividir este archivo en 4 archivos más pequeños, cada uno con un tamaño aproximado del 25% del archivo de entrada. ¿Cómo puedo dividir …

9 text-processing  sed  awk  split  wc 

Estoy cargando un archivo bastante gigantesco en una base de datos postgresql. Para hacer esto, primero lo uso spliten el archivo para obtener archivos más pequeños (30 Gb cada uno) y luego cargo cada archivo más pequeño en la base de datos usando GNU Parallely psql copy. El problema es …

9 files  split  gnu-parallel 

Quiero dividir 'hello'en h e l l oen una matriz utilizando sólo golpe, que podría hacerlo en sed con sed 's/./& /g'pero quiero saber cómo dividir una cadena en una matriz en Bash cuando no sé lo que sería el delimitador o el delimitador es cualquier solo personaje No creo …

9 bash  string  split 

Tengo un archivo que se parece a lo siguiente: chr19 61336212 + 0 0 CG CGT chr19 61336213 - 0 0 CG CGG chr19 61336218 + 0 0 CG CGG chr19 61336219 - 0 0 CG CGC chr19 61336268 + 0 0 CG CGG chr19 61336269 - 0 0 CG …

8 text-processing  awk  split 

Tengo un archivo .msg bastante grande formateado en el formato UIEE. $ wc -l big_db.msg 8726593 big_db.msg Básicamente, el archivo está compuesto por entradas de varias longitudes que se parecen a esto: UR|1 AA|Condon, Richard TI|Prizzi's Family CN|Collectable- Good/Good MT|FICTION PU|G.P. Putnam & Sons DP|1986 ED|First Printing. BD|Hard Cover NT|0399132104 …

8 text-processing  split 

¿Cómo consigo que K3b divida un volumen en varios medios? Por ejemplo, si le doy una carpeta que tiene 6 GB (no un archivo de 6 GB), ¿debería crear varios discos de 4.4 GB automáticamente, en lugar de que lo haga manualmente? Si K3B no puede hacerlo, ¿hay algún software …

8 iso  split  mkisofs