¿Cómo funcionan las capas de incrustación en TensorFlow?

La respuesta es que las capas de incrustación en TensorFlow difieren completamente de los algoritmos de incrustación de palabras, como word2vec y GloVe. ¡Solo comparten un nombre similar!

La incrustación se refiere al mapeo de un vector de características dispersas de alta dimensión a un vector denso con una dimensión mucho más baja. La capa de incrustación en TensorFlow es como una tabla de consulta. Por ejemplo, suponga que hay un tensor 2D en el que la primera dimensión representa la ID de una palabra y la segunda dimensión representa el vector denso que se aprenderá durante la fase de entrenamiento de la red neuronal. Es notable que también puede usar incrustaciones de palabras previamente capacitadas (por ejemplo, usando word2vec) y usarlas como una entrada de la red. Puede establecer el argumento “Entrenable” en “Falso”, si desea utilizar incrustaciones previamente formadas y no desea actualizarlas durante el proceso de aprendizaje de su red.

Espero eso ayude.

More Interesting

¿Cuáles son los prerrequisitos matemáticos para estudiar el aprendizaje automático?

Para un problema de clasificación supervisada, primero busque grupos a través de un algoritmo de aprendizaje no supervisado, y para los miembros en el mismo grupo, asigne la misma etiqueta según un voto mayoritario. ¿Funciona bien?

¿Cuánto costaría desarrollar la capacidad de reconocimiento de escritura a mano?

¿En qué medida se puede utilizar el aprendizaje automático y la IA en la detección y el tratamiento del cáncer?

¿Cuál es la mejor biblioteca de aprendizaje profundo en la etapa actual para trabajar en grandes datos? ¿Cuáles son algunas alternativas para las bibliotecas a gran escala?

¿Cuál es la forma completa de AUC en el estado de AUC de los resultados del examen AKTU?

¿Por qué la regresión logística es generalmente resistente al sobreajuste en el aprendizaje automático?

¿Cuáles son algunas buenas ideas para proyectos de aprendizaje automático? Yo uso Python

¿Cuál es el mejor enfoque para medir la "calidad de las características" en una red neuronal?

¿Qué significa el aprendizaje automático?

Como ingeniero de ASIC, ¿cómo debo prepararme para la era del aprendizaje automático?

Cómo seleccionar efectivamente un tamaño de lote óptimo para la actualización de parámetros de aprendizaje profundo, basado en las especificaciones de GPU

¿Qué debo hacer para pasar de la bioinvestigación al aprendizaje automático de manera muy eficiente?

Cómo comenzar a trabajar en conjuntos de datos de Kaggle

¿Qué aprendizaje automático usa Quora para extraer la entrada del usuario?