Communitygithub.com

umap-learn

Usa UMAP-learn para reducción de dimensionalidad no lineal, embeddings 2D/3D, preprocesamiento para clustering, UMAP supervisado o semisupervisado, DensMAP, AlignedUMAP y flujos de trabajo de UMAP paramétrico.

¿Qué es umap-learn?

El skill de UMAP-learn proporciona una integración completa con la biblioteca UMAP (Uniform Manifold Approximation and Projection), una técnica de reducción de dimensionalidad no lineal que preserva tanto la estructura local como global de los datos. Es útil para visualización de datos de alta dimensionalidad en 2D o 3D, preprocesamiento para algoritmos de clustering como HDBSCAN, ingeniería de características para modelos de machine learning, y flujos de trabajo supervisados o semisupervisados donde se incorporan etiquetas para guiar el embedding. El skill soporta plataformas como Python 3.9+ con dependencias estándar de scikit-learn, Numba y TensorFlow (para UMAP paramétrico). Incluye guías detalladas de ajuste de parámetros (n_neighbors, min_dist, n_components, metric), ejemplos de uso supervisado y semisupervisado, transformación de nuevos datos, integración con pipelines de scikit-learn, y características avanzadas como UMAP paramétrico con redes neuronales, transformaciones inversas y AlignedUMAP para datos temporales. El skill está diseñado para ser usado por agentes de IA o desarrolladores que necesiten implementar reducción de dimensionalidad de manera eficiente y reproducible en sus flujos de trabajo.

Compatible con~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/K-Dense-AI/scientific-agent-skills/tree/main/skills/umap-learn

Preguntar en tu IA favorita

Abre un nuevo chat con esta habilidad de agente ya precargada.

Documentación

¿Qué hace umap-learn?

Descripción general

UMAP (Uniform Manifold Approximation and Projection) es una técnica de reducción de dimensionalidad para visualización y reducción de dimensionalidad no lineal en general. Aplica este skill para embeddings rápidos y escalables que preservan la estructura local y global, aprendizaje supervisado y preprocesamiento para clustering.

Inicio rápido

Instalación

Versión estable actual: umap-learn 0.5.12 (publicada en abril de 2026). Requiere Python 3.9+ y depende de scikit-learn>=1.6, numba, pynndescent, numpy y scipy. Fija una versión verificada:

uv pip install umap-learn==0.5.12

Uso básico

UMAP sigue las convenciones de scikit-learn y se puede usar como reemplazo directo de t-SNE o PCA.

import umap
from sklearn.preprocessing import StandardScaler

# Preparar datos (la estandarización es esencial)
scaled_data = StandardScaler().fit_transform(data)

# Método 1: Paso único (ajustar y transformar)
embedding = umap.UMAP().fit_transform(scaled_data)

# Método 2: Pasos separados (para reutilizar el modelo entrenado)
reducer = umap.UMAP(random_state=42)
reducer.fit(scaled_data)
embedding = reducer.embedding_  # Acceder al embedding entrenado

Requisito de preprocesamiento: Ajusta el preprocesamiento a la métrica. Para métricas numéricas de tipo euclidiano, escala las características antes de ajustar para que las columnas de alta varianza no dominen. Para flujos de trabajo con cosine, binarios, distancia precomputada o características mixtas, elige un preprocesamiento que coincida con la métrica en lugar de estandarizar ciegamente cada columna.

Flujo de trabajo típico

import umap
import matplotlib.pyplot as plt
from sklearn.preprocessing import StandardScaler

# 1. Preprocesar datos
scaler = StandardScaler()
scaled_data = scaler.fit_transform(raw_data)

# 2. Crear y ajustar UMAP
reducer = umap.UMAP(
    n_neighbors=15,
    min_dist=0.1,
    n_components=2,
    metric='euclidean',
    random_state=42
)
embedding = reducer.fit_transform(scaled_data)

# 3. Visualizar
plt.scatter(embedding[:, 0], embedding[:, 1], c=labels, cmap='Spectral', s=5)
plt.colorbar()
plt.title('Embedding UMAP')
plt.show()

Guía de ajuste de parámetros

UMAP tiene cuatro parámetros principales que controlan el comportamiento del embedding. Comprenderlos es crucial para un uso efectivo.

n_neighbors (valor predeterminado: 15)

Propósito: Equilibra la estructura local frente a la global en el embedding.

Cómo funciona: Controla el tamaño del vecindario local que UMAP examina al aprender la estructura de la variedad.

Efectos según el valor:

  • Valores bajos (2-5): Enfatizan el detalle local fino, pero pueden fragmentar los datos en componentes desconectados
  • Valores medios (15-20): Vista equilibrada de la estructura local y las relaciones globales (punto de partida recomendado)
  • Valores altos (50-200): Priorizan la estructura topológica amplia a expensas de los detalles finos

Recomendación: Comienza con 15 y ajusta según los resultados. Aumenta para obtener más estructura global, disminuye para obtener más detalle local.

min_dist (valor predeterminado: 0.1)

Propósito: Controla qué tan juntos se agrupan los puntos en el espacio de baja dimensionalidad.

Cómo funciona: Establece la distancia mínima que se permite que los puntos estén separados en la representación de salida.

Efectos según el valor:

  • Valores bajos (0.0-0.1): Crea embeddings agrupados útiles para clustering; revela detalles topológicos finos
  • Valores altos (0.5-0.99): Evita el empaquetamiento apretado; enfatiza la preservación topológica amplia sobre la estructura local

Recomendación: Usa 0.0 para aplicaciones de clustering, 0.1-0.3 para visualización, 0.5+ para estructura suelta.

n_components (valor predeterminado: 2)

Propósito: Determina la dimensionalidad del espacio de salida del embedding.

Característica clave: A diferencia de t-SNE, UMAP escala bien en la dimensión del embedding, lo que permite su uso más allá de la visualización.

Usos comunes:

  • 2-3 dimensiones: Visualización
  • 5-10 dimensiones: Preprocesamiento para clustering (preserva mejor la densidad que 2D)
  • 10-50 dimensiones: Ingeniería de características para modelos de ML posteriores

Recomendación: Usa 2 para visualización, 5-10 para clustering, valores más altos para pipelines de ML.

metric (valor predeterminado: 'euclidean')

Propósito: Especifica cómo se calcula la distancia entre los puntos de datos de entrada.

Métricas compatibles:

  • Variantes de Minkowski: euclidean, manhattan, chebyshev
  • Métricas espaciales: canberra, braycurtis, haversine
  • Métricas de correlación: cosine, correlation (buenas para embeddings de texto/documentos)
  • Métricas de datos binarios: hamming, jaccard, dice, russellrao, kulsinski, rogerstanimoto, sokalmichener, sokalsneath, yule
  • Métricas personalizadas: Funciones de distancia definidas por el usuario a través de Numba

Recomendación: Usa euclidean para datos numéricos, cosine para vectores de texto/documentos, hamming para datos binarios.

Ejemplo de ajuste de parámetros

# Para visualización con énfasis en la estructura local
umap.UMAP(n_neighbors=15, min_dist=0.1, n_components=2, metric='euclidean')

# Para preprocesamiento de clustering
umap.UMAP(n_neighbors=30, min_dist=0.0, n_components=10, metric='euclidean')

# Para embeddings de documentos
umap.UMAP(n_neighbors=15, min_dist=0.1, n_components=2, metric='cosine')

# Para preservar la estructura global
umap.UMAP(n_neighbors=100, min_dist=0.5, n_components=2, metric='euclidean')

Reducción de dimensionalidad supervisada y semisupervisada

UMAP admite la incorporación de información de etiquetas para guiar el proceso de embedding, lo que permite la separación de clases mientras se preserva la estructura interna.

UMAP supervisado

Pasa las etiquetas objetivo a través del parámetro y al ajustar:

# Reducción de dimensionalidad supervisada
embedding = umap.UMAP().fit_transform(data, y=labels)

Beneficios clave:

  • Logra clases claramente separadas
  • Preserva la estructura interna dentro de cada clase
  • Mantiene relaciones globales entre clases

UMAP semisupervisado

Para etiquetas parciales, marca los puntos no etiquetados con -1 siguiendo la convención de scikit-learn:

# Crear etiquetas semisupervisadas
semi_labels = labels.copy()
semi_labels[unlabeled_indices] = -1

# Ajustar con etiquetas parciales
embedding = umap.UMAP().fit_transform(data, y=semi_labels)

Cuándo usarlo: Cuando el etiquetado es costoso o tienes más datos que etiquetas disponibles.

UMAP para clustering

UMAP sirve como preprocesamiento efectivo para algoritmos de clustering basados en densidad como HDBSCAN, superando la maldición de la dimensionalidad.

Mejores prácticas para clustering

Principio clave: Configura UMAP de manera diferente para clustering que para visualización.

Parámetros recomendados:

  • n_neighbors: Aumenta a ~30 (el valor predeterminado de 15 es demasiado local y puede crear clusters artificiales de grano fino)
  • min_dist: Establece a 0.0 (empaqueta los puntos densamente dentro de los clusters para límites más claros)
  • n_components: Usa 5-10 dimensiones (mantiene el rendimiento mientras mejora la preservación de la densidad en comparación con 2D)

Flujo de trabajo de clustering

Instala HDBSCAN por separado para clustering basado en densidad:

uv pip install hdbscan
import umap
import hdbscan
from sklearn.preprocessing import StandardScaler

# 1. Preprocesar datos
scaled_data = StandardScaler().fit_transform(data)

# 2. UMAP con parámetros optimizados para clustering
reducer = umap.UMAP(
    n_neighbors=30,
    min_dist=0.0,
    n_components=10,  # Mayor que 2 para mejor preservación de la densidad
    metric='euclidean',
    random_state=42
)
embedding = reducer.fit_transform(scaled_data)

# 3. Aplicar clustering HDBSCAN
clusterer = hdbscan.HDBSCAN(
    min_cluster_size=15,
    min_samples=5,
    metric='euclidean'
)
labels = clusterer.fit_predict(embedding)

# 4. Evaluar
from sklearn.metrics import adjusted_rand_score
score = adjusted_rand_score(true_labels, labels)
print(f"Puntuación Rand ajustada: {score:.3f}")
print(f"Número de clusters: {len(set(labels)) - (1 if -1 in labels else 0)}")
print(f"Puntos de ruido: {sum(labels == -1)}")

Visualización después del clustering

# Crear embedding 2D para visualización (separado del clustering)
vis_reducer = umap.UMAP(n_neighbors=15, min_dist=0.1, n_components=2, random_state=42)
vis_embedding = vis_reducer.fit_transform(scaled_data)

# Graficar con etiquetas de cluster
import matplotlib.pyplot as plt
plt.scatter(vis_embedding[:, 0], vis_embedding[:, 1], c=labels, cmap='Spectral', s=5)
plt.colorbar()
plt.title('Visualización UMAP con clusters HDBSCAN')
plt.show()

Advertencia importante: UMAP no preserva completamente la densidad y puede crear divisiones artificiales de clusters. Siempre valida y explora los clusters resultantes.

Transformar nuevos datos

UMAP permite el preprocesamiento de nuevos datos a través de su método transform(), lo que permite que los modelos entrenados proyecten datos no vistos en el espacio de embedding aprendido.

Uso básico de transformación

# Entrenar con datos de entrenamiento
trans = umap.UMAP(n_neighbors=15, random_state=42).fit(X_train)

# Transformar datos de prueba
test_embedding = trans.transform(X_test)

Integración con pipelines de machine learning

from sklearn.svm import SVC
from sklearn.model_selection import train_test_split
from sklearn.preprocessing import StandardScaler
import umap

# Dividir datos
X_train, X_test, y_train, y_test = train_test_split(data, labels, test_size=0.2)

# Preprocesar
scaler = StandardScaler()
X_train_scaled = scaler.fit_transform(X_train)
X_test_scaled = scaler.transform(X_test)

# Entrenar UMAP
reducer = umap.UMAP(n_components=10, random_state=42)
X_train_embedded = reducer.fit_transform(X_train_scaled)
X_test_embedded = reducer.transform(X_test_scaled)

# Entrenar clasificador en embeddings
clf = SVC()
clf.fit(X_train_embedded, y_train)
accuracy = clf.score(X_test_embedded, y_test)
print(f"Precisión en prueba: {accuracy:.3f}")

Consideraciones importantes

Consistencia de datos: El método transform asume que la distribución general en el espacio de alta dimensionalidad es consistente entre los datos de entrenamiento y prueba. Cuando esta suposición falla, considera usar UMAP paramétrico en su lugar.

Rendimiento: Las operaciones de transformación son eficientes (típicamente <1 segundo), aunque las llamadas iniciales pueden ser más lentas debido a la compilación JIT de Numba.

Compatibilidad con scikit-learn: UMAP sigue las convenciones estándar de sklearn y funciona en pipelines. Las versiones recientes 0.5.x también mejoraron el soporte de nombres de características y la compatibilidad con las API de validación actuales de scikit-learn:

from sklearn.pipeline import Pipeline

pipeline = Pipeline([
    ('scaler', StandardScaler()),
    ('umap', umap.UMAP(n_components=10)),
    ('classifier', SVC())
])

pipeline.fit(X_train, y_train)
predictions = pipeline.predict(X_test)
feature_names = pipeline.named_steps['umap'].get_feature_names_out()

Características avanzadas

UMAP paramétrico

El UMAP paramétrico reemplaza la optimización directa del embedding con una función de mapeo de red neuronal aprendida.

Diferencias clave con UMAP estándar:

  • Usa TensorFlow/Keras para entrenar redes codificadoras
  • Permite la transformación eficiente de nuevos datos
  • Soporta reconstrucción a través de redes decodificadoras (transformación inversa)
  • Permite arquitecturas personalizadas (CNN para imágenes, RNN para secuencias)

Instalación:

uv pip install "umap-learn[parametric-umap]==0.5.12"
# Instala el extra de UMAP paramétrico basado en TensorFlow.

Uso básico:

from umap.parametric_umap import ParametricUMAP

# Arquitectura predeterminada (red totalmente conectada de 3 capas de 100 neuronas)
embedder = ParametricUMAP()
embedding = embedder.fit_transform(data)

# Transformar nuevos datos eficientemente
new_embedding = embedder.transform(new_data)

Arquitectura personalizada:

import tensorflow as tf

# Definir codificador personalizado
encoder = tf.keras.Sequential([
    tf.keras.layers.InputLayer(shape=(input_dim,)),
    tf.keras.layers.Dense(128, activation='relu'),
    tf.keras.layers.Dense(64, activation='relu'),
    tf.keras.layers.Dense(2)  # Dimensión de salida
])

embedder = ParametricUMAP(encoder=encoder, dims=(input_dim,))
embedding = embedder.fit_transform(data)

Persistencia: Guarda UMAP paramétrico con sus métodos integrados compatibles con Keras en lugar de pickle simple:

embedder.save("parametric_umap_model", exclude_raw_data=True)

from umap.parametric_umap import load_ParametricUMAP
loaded = load_ParametricUMAP("parametric_umap_model")
new_embedding = loaded.transform(new_data)

Las correcciones recientes de 0.5.12 incluyen mejoras de estabilidad en el reentrenamiento de UMAP paramétrico y correcciones de gradiente de métrica, por lo que es preferible fijar la versión actual para flujos de trabajo con redes neuronales.

Cuándo usar UMAP paramétrico:

  • Necesitas transformación eficiente de nuevos datos después del entrenamiento
  • Requieres capacidades de reconstrucción (transformaciones inversas)
  • Deseas combinar UMAP con autoencoders
  • Trabajas con tipos de datos complejos (imágenes, secuencias) que se benefician de arquitecturas especializadas

Transformaciones inversas

Las transformaciones inversas permiten la reconstrucción de datos de alta dimensionalidad a partir de embeddings de baja dimensionalidad.

Uso básico:

reducer = umap.UMAP()
embedding = reducer.fit_transform(data)

# Reconstruir datos de alta dimensionalidad a partir de coordenadas de embedding
reconstructed = reducer.inverse_transform(embedding)

Limitaciones importantes:

  • Operación computacionalmente costosa
  • Funciona mal fuera del casco convexo del embedding
  • La precisión disminuye en regiones con espacios entre clusters

Ejemplo: Explorar el espacio de embedding:

import numpy as np

# Crear cuadrícula de puntos en el espacio de embedding
x = np.linspace(embedding[:, 0].min(), embedding[:, 0].max(), 10)
y = np.linspace(embedding[:, 1].min(), embedding[:, 1].max(), 10)
xx, yy = np.meshgrid(x, y)
grid_points = np.c_[xx.ravel(), yy.ravel()]

# Reconstruir muestras de la cuadrícula
reconstructed_samples = reducer.inverse_transform(grid_points)

AlignedUMAP

Para conjuntos de datos temporales o relacionados que necesitan un sistema de coordenadas compartido (experimentos de series temporales, lotes), usa umap.AlignedUMAP().fit(datasets, relations=relations), donde relations mapea índices de muestra entre conjuntos de datos consecutivos y es necesario para una alineación significativa. Los parámetros, métodos y un ejemplo práctico están en references/api_reference.md bajo "Clase AlignedUMAP" y "Ejemplos de uso".

Reproducibilidad

Para garantizar resultados reproducibles, siempre establece el parámetro random_state:

reduc

... [truncado para traducción]

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

adaptyv

How to use the Adaptyv Bio Foundry API and Python SDK for protein experiment design, submission, and results retrieval. Use this skill whenever the user mentions Adaptyv, Foundry API, protein binding assays, protein screening experiments, BLI/SPR assays, thermostability assays, or wants to submit protein sequences for experimental characterization. Also trigger when code imports `adaptyv`, `adaptyv_sdk`, or `FoundryClient`, or references `foundry-api-public.adaptyvbio.com`.

aeon

This skill should be used for time series machine learning tasks including classification, regression, clustering, forecasting, anomaly detection, segmentation, and similarity search. Use when working with temporal data, sequential patterns, or time-indexed observations requiring specialized algorithms beyond standard ML approaches. Particularly suited for univariate and multivariate time series analysis with scikit-learn compatible APIs.

alphagenome

Look up precomputed AlphaGenome Atlas effects for any GRCh38 single-nucleotide variant (AVI score with Phred and 18 SHAP feature attributions, plus raw and quantile scores for RNA-seq, DNase, ATAC, ChIP-TF, ChIP-histone, CAGE, PRO-cap, splicing, polyadenylation and contact-map tracks), score variants or scan windows on demand with the AlphaGenome model for human and mouse (variant scoring, in silico mutagenesis, REF-versus-ALT track prediction), and build Atlas website deep links. Use when the user mentions AlphaGenome, AlphaGenome Atlas, AVI or AlphaGenome Variant Impact, DeepMind variant effect prediction, or wants to prioritise or mechanistically interpret non-coding, regulatory, splicing, enhancer, promoter, or chromatin-accessibility effects of SNVs from a VCF, credible set, or region. Research use only; not a clinical tool.

analytical-method-validation

Plan, execute, and document validation, verification, and transfer of analytical procedures under the governing framework - ICH Q2(R2) and Q14, USP <1220>/<1225>/<1226>, ICH M10 bioanalytical, CLSI EP, or ISO/IEC 17025. Use for HPLC, LC-MS/MS, GC, CE, ICP-MS, dissolution, qNMR, qPCR, NIR, and ligand binding or cell-based assays whenever the question is whether a procedure is fit for its intended purpose. Triggers include

anndata

Data structure for annotated matrices in single-cell analysis. Use when working with .h5ad files or integrating with the scverse ecosystem. This is the data format skill—for analysis workflows use scanpy; for probabilistic models use scvi-tools; for population-scale queries use cellxgene-census.

arbor

Autonomously improve a real artifact (code, training recipe, agent harness, data pipeline, prompt) against an objective and an evaluator, using Hypothesis Tree Refinement (HTR) from the Arbor paper. Use this whenever someone wants to iteratively optimize something over many experiments without overfitting — e.g.

arboreto

Infer gene regulatory networks (GRNs) from gene expression data using scalable algorithms (GRNBoost2, GENIE3). Use when analyzing transcriptomics data (bulk RNA-seq, single-cell RNA-seq) to identify transcription factor-target gene relationships and regulatory interactions. Supports distributed computation for large-scale datasets.

astropy

Core Python library for astronomy and astrophysics workflows that need Astropy APIs, including units/quantities, coordinates, FITS I/O, tables, time systems, WCS, and cosmology. Use when implementing or debugging astronomical data analysis code with Astropy.

autoskill

Observe the user

benchling-integration

Benchling Python SDK and REST API integration for registry entities, inventory, ELN entries, workflows, Benchling Apps, and Data Warehouse queries. Use when automating lab data with benchling-sdk or the v2 API.

bgpt-paper-search

Search scientific papers and retrieve structured experimental data extracted from full-text studies via the BGPT MCP server. Returns 25+ fields per paper including methods, results, sample sizes, quality scores, and conclusions. Use for literature reviews, evidence synthesis, and finding experimental details not available in abstracts alone.

bids

>

biopython

Comprehensive molecular biology toolkit. Use for sequence manipulation, file parsing (FASTA/GenBank/PDB), phylogenetics, and programmatic NCBI/PubMed access (Bio.Entrez). Best for batch processing, custom bioinformatics pipelines, BLAST automation. For quick lookups use gget; for multi-service integration use bioservices.

bioservices

Unified Python interface to 40+ bioinformatics services. Use when querying multiple databases (UniProt, KEGG, ChEMBL, Reactome) in a single workflow with consistent API. Best for cross-database analysis, ID mapping across services. For quick single-database lookups use gget; for sequence/file manipulation use biopython.

bulk-rnaseq

End-to-end bulk RNA-seq orchestrator — takes raw FASTQ reads through QC and trimming (FastQC, fastp/Trim Galore), alignment and quantification (STAR, Salmon, featureCounts), assembles a gene-level counts matrix, then hands off to differential expression (pydeseq2), pathway/GSEA enrichment (pathway-enrichment), and publication figures (scientific-visualization). Use whenever the user has bulk RNA-seq reads or quant output and wants a complete, reproducible differential-expression workflow — e.g.

cellxgene-census

Query the CZ CELLxGENE Census programmatically for versioned public single-cell and spatial transcriptomics data. Use when you need population-scale cell metadata, gene expression slices, Census summary counts, source H5AD URIs/downloads, embeddings, spatial Census data, or reference atlas comparisons across organisms, tissues, diseases, assays, and cell types. For analyzing your own local single-cell data use scanpy, anndata, or scvi-tools.

cirq

Google quantum computing framework. Use when targeting Google Quantum AI hardware, designing noise-aware circuits, or running quantum characterization experiments. Best for Google hardware, noise modeling, and low-level circuit design. For IBM hardware use qiskit; for quantum ML with autodiff use pennylane; for physics simulations use qutip.

citation-management

Comprehensive citation management for academic research. Search OpenAlex, PubMed, and Google Scholar for papers, extract accurate metadata, validate citations, and generate properly formatted BibTeX entries. This skill should be used when you need to find papers, verify citation information, convert DOIs to BibTeX, or ensure reference accuracy in scientific writing.

clinical-decision-support

Prepare and validate research-only clinical decision-support evaluation, evidence-profile, cohort, survival, biomarker/model, privacy, and governance artifacts. Use for aggregate or synthetic research documentation and traceability—not patient care or live clinical operation.

clinical-reports

Create safety-bounded draft structures and run local deterministic checks for clinical case, diagnostic, trial, safety, and aggregate research reports. Use only with synthetic, de-identified, or aggregate inputs and verified source-fact manifests; every output requires qualified review.

Skills relacionados