Preguntas etiquetadas con text-processing

He estado tratando de escribir un script bash simple que usaré para instalar una aplicación y actualizar su archivo de configuración. Estoy teniendo dificultades para modificar su archivo de configuración. # DBHost=localhost DBName=test # DBPassword= ¿Alguna sugerencia de cómo puedo modificar la modificación de la siguiente manera? DBHost=localhost DBName=database DBPassword=password

9 bash  shell-script  text-processing  configuration 

Estoy tratando de ejecutar una verificación PEP8 contra un gran árbol fuente. El árbol está compuesto por una mezcla de archivos en varios idiomas. La idea es verificar todos los scripts de Python sin tener que enumerarlos explícitamente. La mayoría de estos archivos en realidad no tienen una .pyextensión. ¿Hay …

9 shell-script  text-processing  search 

Estoy tan harto de espacios inútiles en los archivos fuente que incluso configuré vim para mostrarlos. El problema es que a menudo (si no siempre) tengo que lidiar con espacios inútiles con los desarrolladores de mis compañeros. Solo me gustaría escanear archivos fuente (dada una expresión regular) y eliminar espacios …

9 shell-script  text-processing 

Tengo que crear regularmente más de 100 archivos de texto a partir de plantillas. Actualmente uso un script de shell demasiado complicado. Creo que hay una forma más inteligente de manejar esto, pero no sé cómo. Tengo una "base de datos": # outputfile template data1 data2 data3 first.txt $template_main $text1 …

9 shell-script  text-processing 

Tengo un archivo html con mucho texto UTF-8 codificado en% en las URL. Por ejemplo, "% D1% 80% D0% B5% D1% 81% D1% 83% D1% 80% D1% 81% D1% 8B" significa "ресурсы" ("recursos" en ruso). La tarea es reemplazar todas esas subcadenas con texto legible UTF-8. Para simplificar la tarea, …

9 text-processing  character-encoding  text  unicode 

Aquí hay un fragmento de la ENTRADA: ... #################### Bala Bela;XXXXXX12345;XXXXXX12345678;A SERVER345Z3.DOMAIN.com0 SERVER346Z3.DOMAIN.com0 SERVER347Z3.DOMAIN.com0 SERVER348Z3.DOMAIN.com0 ssh-dss ...pubkeyhere... #################### Ize Jova;XXXXXX12345;XXXXXX12345;A SERVER342Z3.DOMAIN.com0 SERVER343Z3.DOMAIN.com0 SERVER345Z3.DOMAIN.com0 ssh-rsa ...pubkeyhere... ... Y aquí hay un fragmento de la SALIDA que necesito: Bala Bela;XXXXXX12345;XXXXXX12345678;A 4 Ize Jova;XXXXXX12345;XXXXXX12345;A 3 Por lo tanto, necesito una SALIDA de la …

9 bash  text-processing 

Me preguntaba si hay herramientas de trazado genéricas disponibles en la caja de herramientas de Unix. Al trazar me refiero a barras simples o cosas que ves en muchas utilidades basadas en maldiciones. Y por caja de herramientas de Unix me refiero a cosas en las que se pueden canalizar …

9 text-processing  logs  plotting 

El entorno Unix tiene algunas herramientas excelentes para analizar texto en varias formas. Sin embargo, en los últimos tiempos, los datos no están en los formatos tradicionales (históricos) (CSV, TSV, basados ​​en registros o en algún otro delimitador) que solían tener antes. Los datos de estos días se intercambian en …

9 text-processing  xml 

Tengo un programa texcountque genera la cantidad de palabras en mi documento LaTeX. También puedo canalizar el resultado de esto para sedhacer los saltos de línea TeX de nueva línea y escribir esto en un archivo que luego pueda incluir en mi documento final. Pero cuando hago, texcount foo.tex | …

9 shell  text-processing  utilities 

¿Cómo se puede eliminar el último separador de coma de un archivo en Linux? Ejemplo de archivo: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" : "128000", "kafka_user_nproc_limit" : "65536", Resultados previstos: "is_supported_kafka_ranger" : "true", "kafka_log_dir" : "/var/log/kafka", "kafka_pid_dir" : "/var/run/kafka", "kafka_user" : "kafka", "kafka_user_nofile_limit" …

9 text-processing  awk  sed  perl 

Tengo ~ 30k archivos. Cada archivo contiene ~ 100k líneas. Una línea no contiene espacios. Las líneas dentro de un archivo individual se ordenan y no se duplican. Mi objetivo: quiero encontrar todas las líneas duplicadas en dos o más archivos y también los nombres de los archivos que contienen …

9 shell-script  text-processing  performance  large-files  deduplication 

Tengo una colección de archivos (* .zip, * .txt, * .tar.gz, * .doc, ... etc.). Estos archivos residen dentro de una ruta. Quiero encontrar todos los archivos (* .txt), luego copiar, solo, los archivos de texto que contienen palabras específicas (por ejemplo, LINUX / UNIX). Ejecuté lo siguiente: find . …

9 text-processing  grep  find  cp 

Considere los siguientes archivos: file1: boo,8,1024 foo,7,2048 file2: foo,0,24,154 noo,0,10,561 file3: 24,154,7,1024,0 Lo que necesito es ir a File1 y verificar si $2==7; si es cierto, tomar $1, $2y $3de archivo1 ; ahora tengo que comparar si $1desde File1 igual a $1desde File2 ; si es cierto, tengo que tomar …

9 text-processing  awk  gawk 

Tengo dos corpus paralelos (archivos de texto) alineados con oraciones con aproximadamente 50 mil palabras. (del corpus Europarl -> traducción paralela de documentos legales). Ahora me gustaría barajar las líneas de los dos archivos, pero ambos de la misma manera. Quería abordar eso usando gshuf (estoy en una Mac) usando …

9 text-processing  osx  random 

Tengo el siguiente marco de datos que continúa indefinidamente horizontal y verticalmente con números negativos solo en las columnas impares: -1 2 3 4 -5 9 2 3 -4 5 -6 11 Y quiero las columnas completas segunda, cuarta y sexta (o cada columna par) y los signos menos solo …

9 text-processing  sed  awk