allenai/vla-evaluation-harness — GitHub trend

◂ BACK TO LEADERBOARD

FINDING #8539 · UNIT ID 1181245675

allenai/vla-evaluation-harness

One framework to evaluate any VLA model on any robot simulation benchmark.

[ PYTHON ][ ORG ][ GITHUB ↗ ]

SURPRISE SCORE

0.00

Score Breakdown

SURPRISE0.0000831

ENGAGEMENT0.48

FRESHNESS1.00

SCORE = SURPRISE × ENGAGEMENT^0.7 × FRESHNESS × VISIBILITY × CONFIDENCE

SURPRISE = WINDOW STARS / DAYS / (AUDIENCE + FLOOR)

3% OF STARS IN ARCHIVE

Growth Telemetry

VELOCITY /D

2.43

ACCEL

-0.11

RETENTION

33.3%

PEAK 2026-08-24 · FORK-RETENTION 0.0% · 17 STARS / WINDOW

Author Audience

AUDIENCE

29,172

FOLLOWERS

4,985

OWNER ★

96,041

Engagement Signals

FORKS

ISSUE AUTH

PR AUTH

UNIQUE STARGAZERS 17 / 17 (DIVERSITY 1.00)

Why This Is A Finding

allenai/vla-evaluation-harness собрал 17 звёзд за окно, тогда как у автора всего 4,985 подписчиков — эффективная аудитория ≈ 29,172. Это даёт surprise-индекс 0.0000831 (звёзды относительно охвата автора, а не в абсолюте). Удержание форков 0.0% и 0 внешних контрибьюторов отделяют реальный инструмент от разовой вспышки. Акселерация отрицательная — внимание остывает после пика.

Related Findings

RANKS ABOVE 13% OF 9760 FINDINGS

#08MddIdd/mdd-sim-gateway[ PYTHON ]0.41 #17litaolemo/xtquant_big_convert[ PYTHON ]0.36 #20LBH-123-AI/Comfyui_Minimax_h3_latent_Upscaler[ PYTHON ]0.34 #24zeenie-ai/OpenCompany[ PYTHON ]0.30 #25917Dhj/DeepPaperNote[ PYTHON ]0.29

METRICS IN CONTEXT

MEDIAN ACROSS ALL 9760 FINDINGS · Δ vs MEDIAN · PERCENTILE = SHARE RANKED BELOW

METRICVALUEMEDIANΔ MEDPERCENTILE

SCORE0.000.00-0.00ABOVE 13%

VELOCITY2.433.71-1.29ABOVE 32%

RETENTION33.3%38.0%-4.7 PPABOVE 42%

FORKS4786-39ABOVE 35%

SURPRISE0.000.01-0.01ABOVE 4%