Preguntas etiquetadas con tokenize


16
Analizar (dividir) una cadena en C ++ usando delimitador de cadena (C ++ estándar)
Estoy analizando una cadena en C ++ usando lo siguiente: using namespace std; string parsed,input="text to be parsed"; stringstream input_stringstream(input); if (getline(input_stringstream,parsed,' ')) { // do some processing. } Analizar con un solo delimitador de caracteres está bien. Pero, ¿y si quiero usar una cadena como delimitador? Ejemplo: quiero dividir: …
364 c++  parsing  split  token  tokenize 



10
Scanner vs. StringTokenizer vs. String.Split
Acabo de enterarme de la clase Scanner de Java y ahora me pregunto cómo se compara / compite con StringTokenizer y String.Split. Sé que StringTokenizer y String.Split solo funcionan en Strings, entonces, ¿por qué querría usar el escáner para una cadena? ¿Scanner está destinado a ser una ventanilla única para …




11
¿Cómo deshacerse de la puntuación usando el tokenizer NLTK?
Estoy empezando a usar NLTK y no entiendo cómo obtener una lista de palabras del texto. Si lo uso nltk.word_tokenize(), obtengo una lista de palabras y puntuación. Solo necesito las palabras en su lugar. ¿Cómo puedo deshacerme de la puntuación? Tampoco word_tokenizefunciona con varias oraciones: se agregan puntos a la …
125 python  nlp  tokenize  nltk 

13
División de cadena en varias filas en Oracle
Sé que esto ha sido respondido hasta cierto punto con PHP y MYSQL, pero me preguntaba si alguien podría enseñarme el enfoque más simple para dividir una cadena (delimitada por comas) en varias filas en Oracle 10g (preferiblemente) y 11g. La tabla es la siguiente: Name | Project | Error …
104 sql  string  oracle  plsql  tokenize 
Al usar nuestro sitio, usted reconoce que ha leído y comprende nuestra Política de Cookies y Política de Privacidad.
Licensed under cc by-sa 3.0 with attribution required.