Github Trends®
1069 findingsmedian surprise 0.0527window 3 days
UNIT / TREND-MONITOR · REV 2.6
[ 3 days window ]
SOURCE: gharchive
FINDING #484 · UNIT ID 1223428226
noonghunna/club-3090
Community recipes for serving LLMs on RTX 3090/4090/5090 CUDA gpus. Multi-engine (vLLM, llama.cpp, ik_llama) and model-agnostic. Currently shipping Qwen3.6-27B Qwen3.6 35B Gemma 4 26B Gemma 4 31B configs for 1× and 2× cards.
[ PYTHON ]ЗАРАБОТОК C · 48/100[ GITHUB ↗ ]
SURPRISE SCORE
0.00

Score Breakdown

SURPRISE0.0293
ENGAGEMENT0.20
FRESHNESS1.00
SCORE = SURPRISE × ENGAGEMENT^0.7 × FRESHNESS × VISIBILITY × CONFIDENCE
SURPRISE = WINDOW STARS / DAYS / (AUDIENCE + FLOOR)
1% OF STARS IN ARCHIVE

Growth Telemetry

VELOCITY /D
8.00
ACCEL
-5.00
RETENTION
0.0%
PEAK 2026-07-13 · FORK-RETENTION 0.0% · 24 STARS / WINDOW

Author Audience

AUDIENCE
233
FOLLOWERS
44
OWNER ★
1,889

Engagement Signals

FORKS
96
ISSUE AUTH
0
PR AUTH
0
UNIQUE STARGAZERS 24 / 24 (DIVERSITY 1.00)

Потенциал заработка

C48/100
СПРОС78
Деньги в теме есть: GPUaaS и AI inference рынки растут, а локальный inference продаётся через privacy, cost control, latency и offline use.
ЗАХВАТ34
Главное слабое место: recipes, YAML, shell scripts и benchmark tables легко копируются, а distribution сильнее у Ollama/Open WebUI/LM Studio/LocalAI и cloud-платформ.
ДОСТУП72
Apache-2.0 разрешает коммерческое использование, repo активный и с 17 контрибьюторами; мешают молодость проекта, bus-factor, отсутствие packaging и зависимость от upstream engines/model licenses.
«Заработать можно, но upside топит слабый capture: ценность легко скопировать и встроить в более крупные платформы.»

Рыночный анализ · Обзор

club-3090 — набор проверенных рецептов и инструментов для запуска современных LLM локально на RTX 3090/4090/5090.
local LLM serving / consumer-GPU inference ops / self-hosted AI infrastructureЗРЕЛОСТЬ · РАСТЁТ
ЯЗЫК
Python
ЛИЦЕНЗИЯ
Apache-2.0
РЕЕСТР
none
РЕЛИЗ
v0.10.2
КОНТРИБЬЮТОРЫ
17
Что делает

Проект даёт Docker Compose-конфиги, патчи, launch-скрипты, TUI и бенчмарки для vLLM, llama.cpp и ik_llama. Пользователь выбирает модель и GPU, а repo поднимает OpenAI-compatible API на localhost. Дополнительно есть проверки запуска, benchmark flow и подсказки, влезет ли модель в 1×/2× RTX 3090.

Какую боль решает

Локальный LLM-serving на consumer GPU часто ломается на VRAM, CUDA, quantization, KV-cache, engine-specific флагах и несовместимых моделях; club-3090 превращает это в воспроизводимый путь “выбери модель → выбери GPU → запусти API”.

Сценарии использования
  • Homelab: поднять Qwen/Gemma локально на 1–2 RTX 3090.
  • Dev backend: заменить OpenAI API локальным `localhost:8020/v1/chat/completions`.
  • Privacy-sensitive inference: держать prompts и документы на своей машине.
  • Cost optimization: понять, когда локальная 3090 дешевле облачного GPU/API.
  • Benchmark lab: сравнить vLLM vs llama.cpp vs ik_llama на конкретной карте.
Целевой пользователь

ML/AI-инженер, local-LLM power user, indie developer, small team с 3090/4090/5090, homelab-энтузиаст.

Open-source аналоги

ollama/ollamaСИЛЬНЕЕ176,000
Готовый local runner с model registry и desktop/cloud-направлением; меньше про глубокую ручную оптимизацию RTX 3090.
ggml-org/llama.cppСИЛЬНЕЕ120,000
Базовый inference engine; club-3090 использует его как один из backend routes.
open-webui/open-webuiСМЕЖНЫЙ146,000
Self-hosted AI UI/RAG платформа поверх Ollama/OpenAI-compatible APIs; не решает 3090 fit/config математику так узко.
vllm-project/vllmСИЛЬНЕЕ86,400
Production inference engine с PagedAttention, batching и OpenAI API; club-3090 — curated configs вокруг него.
mudler/LocalAIСИЛЬНЕЕ47,500
OpenAI-compatible локальный AI server для LLM/vision/audio/image; шире, но менее recipe-first под RTX 3090.
oobabooga/text-generation-webuiСИЛЬНЕЕ47,400
Desktop/Web UI для local LLM, private/offline; больше UX, меньше validated serving recipes.
sgl-project/sglangСМЕЖНЫЙ30,300
High-performance serving framework для production/RL; club-3090 упоминает его как evaluated/blocked route.
Позиционирование

club-3090 не лидер в local LLM serving как категории. Это нишевый underdog-лидер в узкой поднише проверенных 24GB consumer GPU recipes, бенчмарков и fit decisions; ценность в curated hardware knowledge, а не в новом engine.

Коммерческие аналоги

RunPodB2B / B2CПО ПОТРЕБЛЕНИЮ
GPU cloud: Pods, Serverless, Clusters для inference/training.
Pricing page указывает thousands of GPUs и 30+ regions.
RTX 4090from $0.34/hr
H100 PCIe$2.89/hr
H100 SXM$2.99/hr
A100 PCIe 80GB$1.39/hr
L40S$0.99/hr
RTX 5090$0.99/hr
Lambda CloudB2BПО ПОТРЕБЛЕНИЮ
Dedicated GPU instances для training/inference.
1–8 GPU instances; clusters 16–2,000+ GPUs.
1× H100 PCIe$3.29/GPU/hr
1× H100 SXM$4.29/GPU/hr
1× A6000$1.09/GPU/hr
1× Quadro RTX 6000$0.69/GPU/hr
ModalB2BПО ПОТРЕБЛЕНИЮ
Serverless GPU/CPU platform для ML apps и inference.
Scale публично не подтверждён; pricing показывает Starter/Team/Enterprise.
H100$0.001097/sec ≈ $3.95/hr
L40S$0.000542/sec ≈ $1.95/hr
A10$0.000306/sec ≈ $1.10/hr
Starter$0 + compute
Team$250/mo + compute
ReplicateB2B / B2CПО ПОТРЕБЛЕНИЮ
Hosted public/private ML models, billing by hardware time or tokens.
Scale публично не подтверждён на pricing page.
H100$0.001525/sec = $5.49/hr
L40S$0.000975/sec = $3.51/hr
A100 80GB$0.001400/sec = $5.04/hr
T4$0.000225/sec = $0.81/hr
Together AIB2BПО ПОТРЕБЛЕНИЮ
Serverless/dedicated inference, fine-tuning, GPU clusters.
Scale публично не подтверждён на pricing page.
Qwen3.6-Plus$0.50/M input, $3.00/M output
Gemma 4 31B$0.39/M input, $0.97/M output
Qwen3 235B A22B$0.20/M input, $0.60/M output
Fireworks AIB2BПО ПОТРЕБЛЕНИЮ
Serverless inference, on-demand deployments, fine-tuning.
Scale публично не подтверждён на pricing page.
On-demand H100 80GB$7/hr
H200$7/hr
B200$10/hr
B300$12/hr
Fine-tune 16.1B–80B LoRA SFT$3/M training tokens
Fine-tune 16.1B–80B LoRA DPO$6/M training tokens
Hugging Face Inference EndpointsB2BПО ПОТРЕБЛЕНИЮ
Managed model endpoints on AWS/GCP GPUs.
Marketplace/platform scale не указан в pricing page.
AWS L40S x1$1.8/hr
AWS A100 x1$2.5/hr
AWS H200 x1$5/hr
GCP H100 x1$10/hr
BasetenB2BПО ПОТРЕБЛЕНИЮ
Managed inference platform, model APIs, dedicated deployments.
Scale публично не подтверждён на pricing page.
Basic$0/mo PAYG
Dedicated H100$0.10833/min ≈ $6.50/hr
A100$0.06667/min ≈ $4.00/hr
B200$0.16633/min ≈ $9.98/hr
Ollama CloudB2B / B2CFREEMIUM
Local Ollama + hosted cloud models when local GPU is insufficient.
8.9M monthly developers, 85% Fortune 500, $88M raised — по TechCrunch, не audited.
Free$0
Pro$20/mo or $200/yr
Max$100/mo
Текущая монетизация проекта

Подтверждённой монетизации самого проекта не найдено в собранных данных. Homepage нет, registry install нет, owner — User, verified=False; нет данных о cloud, sponsors, paid support или company page. Текущий статус — community/hobby OSS, не open-core business.

Коммерческий потенциал

ПОТЕНЦИАЛ · СРЕДНИЙ

Заработать можно не на библиотеке как таковой, а на productized local inference appliance для 24–32GB consumer GPU и paid support для small teams.

Спрос и рынок

Спрос высокий: GPUaaS и inference рынки крупные и растущие, а локальный inference выигрывает там, где важны privacy, fixed cost, latency и offline режим. При этом платёжеспособный спрос сильнее у SMB/dev teams, чем у homelab-аудитории.

Ров / защищённость

Сейчас ров слабый: код, YAML и docs легко копируются. Потенциальный ров — verified benchmark corpus, community hardware matrix и trusted known-good recipes для consumer GPUs; это data/community moat, не code moat.

Модели монетизации
  • Paid support / setup package: $199–$999 one-time или $99–$499/mo за помощь с 1–2 GPU rigs, CUDA, WSL2, models, exposed API и monitoring.
  • Club-3090 Pro / local appliance: signed installer, auto-detect GPU/driver/VRAM, model fit planner, rollback, config marketplace, GUI/TUI polish.
  • SMB privacy AI stack: локальный OpenAI-compatible backend на существующих GPU для юристов, врачей, dev agencies и finance analysts.
  • Benchmark/certification database: paid access к verified TPS/VRAM/context results by GPU/model/engine/driver.
  • Hardware bundle / image: prebuilt OS image + recommended 3090/4090/5090 rigs + support.
  • Cloud-fallback affiliate / hybrid routing: local-first route, cloud fallback через RunPod/Modal/Replicate/Together.
Что нужно, чтобы сделать продукт
  • Стабильный installer без ручного clone/bash dance.
  • Package/release channel, rollback и semantic config compatibility.
  • Аппаратная CI matrix или verified community hardware lab.
  • Security hardening: secrets, HF token storage, localhost binding, firewall hints.
  • Enterprise docs: model license matrix, data retention, auditability.
  • SLA/support channel.
  • Reproducible benchmark registry.
  • Windows-native story или polished WSL2 automation.
  • Clear pricing and paid offer.
⚖ ЛИЦЕНЗИЯ · МОЖНО ЛИ КОММЕРЦИАЛИЗИРОВАТЬ
Apache-2.0 — коммерчески дружелюбная лицензия: можно использовать, модифицировать, продавать продукт и закрытые деривативы при соблюдении notice/license условий. Copyleft-риска уровня GPL/AGPL нет. Но нужен отдельный аудит upstream images, vendored patches, engine licenses и лицензий model weights; кодовая лицензия не даёт права коммерчески использовать любые модели.
Риски и подводные камни
ВЫСОКИЙСЛАБЫЙ РОВ
YAML/scripts/docs легко форкнуть или встроить в Ollama/Open WebUI/LocalAI; удержание ценности слабое.
ВЫСОКИЙПРОЧЕЕ
vLLM, llama.cpp, ik_llama, CUDA, drivers и model architectures меняются быстро; support burden высокий.
СРЕДНИЙМАЛЫЙ РЫНОК
3090/4090/5090 users растут, но enterprise buying чаще уходит в managed GPU/API.
СРЕДНИЙКОНКУРЕНЦИЯ
Homelab users price-sensitive и любят free OSS; платить будут в основном SMB/dev teams с реальной болью.
СРЕДНИЙЮР. СЕРАЯ ЗОНА
Код Apache-2.0, но веса Qwen/Gemma/других моделей имеют отдельные лицензии и usage terms.
СРЕДНИЙПРОЧЕЕ
One-command scripts, Docker, HF tokens и локальный OpenAI API требуют hardening перед B2B.
СРЕДНИЙЗАВИСИМОСТЬ ОТ АВТОРА
Owner — individual user, проект моложе 3 месяцев; 17 contributors помогают, но governance ещё не зрелый.
СРЕДНИЙПРОЧЕЕ
Consumer rigs отличаются BIOS, PCIe, NVLink, PSU, cooling, WSL2 и driver versions.

Достоверность разбора

УВЕРЕННОСТЬ · СРЕДНЯЯgpt-5.5 · 2026-07-15 · ОКНО 90D
Оговорки / что не проверено
  • Коммерческие цены и масштабы не перепроверялись заново; структурированы только из предоставленного разбора.
  • Не все коммерческие цифры подтверждены двумя независимыми источниками; часть взята с pricing pages самих провайдеров.
  • Масштаб Ollama Cloud взят из TechCrunch и не является audited метрикой.
  • Вывод об отсутствии монетизации club-3090 основан на предоставленных фактах и собранном разборе; отдельные private support/sponsors могли не попасть в данные.
  • Оценки demand/capture/access являются аналитическим суждением, а не измеренной метрикой.
  • Утверждения про moat, GTM, price sensitivity и SMB willingness-to-pay основаны на общих рыночных выводах из разбора.
  • Лицензионный вердикт касается Apache-2.0 кода; upstream images, vendored patches, engine licenses и model weights не аудитились детально.
  • Звёзды OSS-аналогов взяты из предоставленного разбора и могли измениться.
  • Данные README, GitHub enrichment и funnel facts приняты как данность и не перепроверялись.
ИСТОЧНИКИ (21)

Why This Is A Finding

noonghunna/club-3090 собрал 24 звёзд за окно, тогда как у автора всего 44 подписчиков — эффективная аудитория ≈ 233. Это даёт surprise-индекс 0.0293 (звёзды относительно охвата автора, а не в абсолюте). Удержание форков 0.0% и 0 внешних контрибьюторов отделяют реальный инструмент от разовой вспышки. Акселерация отрицательная — внимание остывает после пика.

METRICS IN CONTEXT

MEDIAN ACROSS ALL 1069 FINDINGS · Δ vs MEDIAN · PERCENTILE = SHARE RANKED BELOW
METRICVALUEMEDIANΔ MEDPERCENTILE
SCORE0.010.01+0.00ABOVE 55%
VELOCITY8.0015.33-7.33ABOVE 28%
RETENTION0.0%33.3%-33.3 PPABOVE 0%
FORKS9645+51ABOVE 63%
SURPRISE0.030.05-0.02ABOVE 39%