allenai/vla-evaluation-harness — GitHub trend

◂ BACK TO LEADERBOARD

FINDING #4642 · UNIT ID 1181245675

allenai/vla-evaluation-harness

One framework to evaluate any VLA model on any robot simulation benchmark.

[ PYTHON ][ ORG ][ GITHUB ↗ ]

SURPRISE SCORE

0.00

Score Breakdown

SURPRISE0.0000927

ENGAGEMENT0.20

FRESHNESS1.00

SCORE = SURPRISE × ENGAGEMENT^0.7 × FRESHNESS × VISIBILITY × CONFIDENCE

SURPRISE = WINDOW STARS / DAYS / (AUDIENCE + FLOOR)

2% OF STARS IN ARCHIVE

Growth Telemetry

VELOCITY /D

2.67

ACCEL

+0.50

RETENTION

40.0%

PEAK 2026-07-14 · FORK-RETENTION 0.0% · 8 STARS / WINDOW

Author Audience

AUDIENCE

28,731

FOLLOWERS

4,876

OWNER ★

94,894

Engagement Signals

FORKS

ISSUE AUTH

PR AUTH

UNIQUE STARGAZERS 8 / 8 (DIVERSITY 1.00)

Why This Is A Finding

allenai/vla-evaluation-harness собрал 8 звёзд за окно, тогда как у автора всего 4,876 подписчиков — эффективная аудитория ≈ 28,731. Это даёт surprise-индекс 0.0000927 (звёзды относительно охвата автора, а не в абсолюте). Удержание форков 0.0% и 0 внешних контрибьюторов отделяют реальный инструмент от разовой вспышки. Акселерация положительная — рост ещё не выдохся.

Related Findings

RANKS ABOVE 8% OF 5024 FINDINGS

#02Git-creat7/grokRegister-cpa[ PYTHON ]0.72 #09vinhhien112/Three.js-Object-Sculptor-Codex-Plugin[ PYTHON ]0.51 #10domanski-ai/headroom[ PYTHON ]0.50 #12William-Lu-stack/LuxyAI[ PYTHON ]0.46 #15fqscfqj/Y2A-Auto[ PYTHON ]0.37

METRICS IN CONTEXT

MEDIAN ACROSS ALL 5024 FINDINGS · Δ vs MEDIAN · PERCENTILE = SHARE RANKED BELOW

METRICVALUEMEDIANΔ MEDPERCENTILE

SCORE0.000.00-0.00ABOVE 8%

VELOCITY2.676.67-4.00ABOVE 0%

RETENTION40.0%46.5%-6.5 PPABOVE 44%

FORKS37116-79ABOVE 23%

SURPRISE0.000.01-0.01ABOVE 3%