Skills Agentes

Benchmark Testing

Crea y lanza proyectos de prueba de benchmark para ejercitar la inyección de skills de vercel-plugin en escenarios realistas, usando directorios aislados y paneles de WezTerm con Claude Code.

Oficial
Estrellas
287

en todo el repo

Actividad
33

0–100, la ruta de este skill

Actualizado
hace 6 meses

último commit aquí

Commits
0

últimos 90 días

Contexto
947 tok

57 tok en reposo

Paquete
1 archivo

4 KB

Instalar

Funciona con cualquier agente que lea SKILL.md

npx -y skills add vercel/vercel-plugin --skill benchmark-testing --agent claude-code

Se instala solo en este repositorio.

Este skill makes network requests, reads environment config.

Qué hace

  • Crea directorios de prueba aislados e instala vercel-plugin en cada uno con npx add-plugin
  • Genera .claude/settings.json con enabledPlugins en cada carpeta de prueba
  • Lanza pestañas de WezTerm ejecutando Claude Code con prompts diseñados para disparar skills concretas

Úsalo cuando

  • Se quiere verificar que la inyección de skills de vercel-plugin funciona en escenarios realistas
  • Se necesita probar múltiples skills a la vez con prompts ambiciosos y multi-funcionales

No lo uses cuando

    Qué lo activa

    Di cualquiera de estas frases y el agente debería cargar este skill.

    • “Crea proyectos de prueba en WezTerm para verificar la inyección de skills de vercel-plugin”
    • “Lanza varios escenarios de benchmark para probar auth, payments y cron-jobs del plugin”

    SKILL.md

    En inglés

    Benchmark Testing

    Create isolated test projects that exercise vercel-plugin skill injection with realistic, technology-agnostic prompts.

    Workflow

    1. Create test directories

    BASE=~/dev/vercel-plugin-testing
    mkdir -p "$BASE"/{01-slug,02-slug,...}
    

    2. Install the plugin in each directory

    for dir in "$BASE"/*/; do
      echo "=== $(basename "$dir") ==="
      cd "$dir" && npx add-plugin https://github.com/vercel/vercel-plugin -s project -y 2>&1 | tail -1
    done
    

    This creates .claude/settings.json with enabledPlugins in each directory.

    3. Launch Claude Code in WezTerm panes

    Critical details that must all be followed:

    • Use --cwd <absolute-path> to set the working directory
    • Use unset CLAUDECODE before x to avoid nested-session errors
    • Use --settings .claude/settings.json (not --settings project) to load the plugin
    • Use double quotes on the outer -ic string, single quotes around the prompt
    • Wait 10 seconds between each launch to avoid overwhelming the system
    • Always use spawn (new tabs) — split-pane runs out of space after ~4 panes

    Working command template:

    wezterm cli spawn --cwd /absolute/path/to/test-dir -- /bin/zsh -ic "unset CLAUDECODE; x 'YOUR PROMPT HERE. Link the project to my vercel-labs team so we can deploy it later.' --settings .claude/settings.json; exec zsh"
    

    Prompt Guidelines

    • Never name specific technologies (no "Next.js", "Stripe", "Vercel KV", etc.)
    • Describe the product and features — let the plugin infer which skills to inject
    • Make prompts ambitious and multi-featured to exercise multiple skill triggers
    • Always append: "Link the project to my vercel-labs team so we can deploy it later."

    Example prompts

    Slug Prompt Expected skills
    recipe-platform "Build a recipe sharing platform where users sign up, upload photos of their dishes, write ingredients and steps, and browse a feed with infinite scroll..." auth, vercel-storage, nextjs
    trivia-game "Create a multiplayer trivia game where players join a room with a 6-letter code, answer questions in real-time with a 15-second countdown..." vercel-storage, nextjs
    code-review-bot "Build an AI-powered code review dashboard with webhook API routes, LLM streaming analysis, and stats over time..." ai-sdk, nextjs
    conference-tickets "Create a conference ticketing system with tiered checkout, QR code emails, admin panel, and payment webhook handling..." payments, email, auth
    content-aggregator "Build a content aggregator with hourly scheduled RSS fetching, LLM summaries, category filters, and bookmarks..." cron-jobs, ai-sdk
    finance-tracker "Build a personal finance tracker with bank connection, spending charts, and weekly email digest via scheduled job..." cron-jobs, email
    multi-tenant-blog "Create a multi-tenant blog where each user gets a subdomain, with request-level routing, headless content API, and role-based auth..." routing-middleware, cms, auth
    status-page "Build a SaaS status page with scheduled endpoint pinging, uptime charts, incident logging, and KV-stored history..." cron-jobs, vercel-storage, observability
    dog-walking-saas "Build a dog walking SaaS with user accounts, pet photos, booking, monthly invoicing, admin dashboard, and separate dev/prod env configs..." payments, auth, vercel-storage, env-vars

    Cleanup

    rm -rf ~/dev/vercel-plugin-testing
    

    Reproducido de vercel/vercel-plugin bajo licencia NOASSERTION. Leer esta página en markdown.

    Archivos

    1 archivo en el paquete. Solo se lee SKILL.md al activarse — las referencias se cargan si el skill decide que las necesita.

    Antes de instalar

    Requiere WezTerm, Claude Code CLI (comando x) y acceso a npx add-plugin desde GitHub.

    Necesita en el PATH:npx

    Variables de entorno:BASE

    Detalles

    Creador
    vercel
    Categoría
    Testing y QA
    Licencia
    NOASSERTION
    Recursos incluidos
    Solo SKILL.md
    Código fuente
    Ver SKILL.md

    Etiquetas

    Más de vercel/vercel-plugin

    Este repo incluye 43 skills. Si instalas uno, normalmente ya tienes los demás. Ver el pack vercel-plugin entero y su comando de instalación

    Corrige el conocimiento desactualizado del LLM sobre la plataforma Vercel e introduce sus productos nuevos. Se inyecta al inicio de la sesión.

    Costo de contexto al activarse
    1.8k tok
    Tamaño del paquete
    1 archivo
    Última actualización
    el mes pasado
    Oficialdevops infraestructura

    Guía experta de Vercel Connect: obtén tokens OAuth con permisos limitados para servicios de terceros (Slack, GitHub, servidores MCP, OAuth, Snowflake) en nombre de apps o usuarios vía Vercel OIDC.

    Costo de contexto al activarse
    4.8k tok
    Tamaño del paquete
    1 archivo
    Última actualización
    el mes pasado
    Oficialdesarrollo apis

    Depura el caching de la CDN de Vercel: tasa de aciertos, contenido obsoleto, revalidación, ISR + PPR, cacheReason, ppr_state y costos.

    Costo de contexto al activarse
    5.2k tok
    Tamaño del paquete
    1 archivo
    Última actualización
    hace 2 meses
    Oficialdevops infraestructura

    Guía experta sobre Vercel Functions: Serverless Functions, Edge Functions, Fluid Compute, streaming, Cron Jobs y configuración de runtime para código server-side en Vercel.

    Costo de contexto al activarse
    5.6k tok
    Tamaño del paquete
    1 archivo
    Última actualización
    el mes pasado
    Oficialdevops infraestructura

    Guía de arquitectura backend: úsala para planear, construir o migrar una API o backend, elegir entre Functions, Services, contenedores, Workflow, Queues y bases de datos de Marketplace, o seleccionar framework y runtime.

    Costo de contexto al activarse
    1.5k tok
    Tamaño del paquete
    2 archivos
    Última actualización
    el mes pasado
    Oficialdesarrollo apis

    Eve

    287

    Guía de eve, el framework para agentes de IA duraderos: runtime basado en filesystem, sesiones, tools, skills, canales, sandboxes, subagentes, schedules, evals y observabilidad con Agent Runs.

    Costo de contexto al activarse
    1.5k tok
    Tamaño del paquete
    3 archivos
    Última actualización
    el mes pasado
    Oficialherramientas desarrollo

    Skills relacionados

    Escenarios avanzados de benchmark para agentes de IA que ponen a prueba Workflow SDK, AI Gateway, MCP, Chat SDK, Queues, Flags, Sandbox y orquestación multi-agente de Vercel.

    Costo de contexto al activarse
    3.6k tok
    Tamaño del paquete
    2 archivos
    Última actualización
    el mes pasado
    Oficialtesting qa

    Suite de benchmark end-to-end para vercel-plugin: ejecuta proyectos reales con inyección de skills, verifica servidores dev, analiza logs y genera un reporte de mejora.

    Costo de contexto al activarse
    1.3k tok
    Tamaño del paquete
    1 archivo
    Última actualización
    hace 7 meses
    Oficialtesting qa

    Corre escenarios de eval de vercel-plugin en Vercel Sandboxes en vez de paneles locales de WezTerm: aprovisiona microVMs con Claude Code, ejecuta prompts y genera reportes de cobertura.

    Costo de contexto al activarse
    5.5k tok
    Tamaño del paquete
    9 archivos
    Última actualización
    hace 6 meses
    Oficialtesting qa