Word2vec: cuando descubrimos que rey menos hombre más mujer es reina

El paper de word2vec demostró que el significado puede vivir en la geometría: palabras como puntos en un espacio donde la aritmética hace analogías. Aquella demo de rey - hombre + mujer = reina fue mi momento de conversión al aprendizaje automático. Releerlo es ver el eslabón exacto entre la lingüística computacional clásica y los embeddings que hoy alimentan cualquier buscador semántico.

Abrir el original ↗pdf0 visitas · 0 lectores

Tomas Mikolov et al. · arXiv

MIMarco Ibáñez

Conexiones

Trazadas y explicadas por personas: la razón es lo que las hace valiosas.

«Al pasar de A a B combinas el testimonio personal del asombro por la analogía (rey−hombre+ mujer=reina) con una orientación técnica e histórica que te empuja a leer el paper original para comprender cómo esa aritmética vectorial fundamenta buscadores semánticos y sistemas RAG.»
MIMarco Ibáñez
Rey menos hombre más mujer igual a reina: las palabras se volvieron aritméticaPDF
«Word2vec mostró que el significado puede residir en vectores estáticos y permitir analogías lineales; BERT añade representaciones contextuales y aprendizaje bidireccional preentrenado que disambiguan sentidos, capturan sintaxis y se transfieren eficazmente a tareas mediante ajuste fino.»
MIMarco Ibáñez
BERT o cómo leer una frase en ambos sentidos cambió el procesamiento del lenguajePDF