ОТКРЫТЫЕ МОДЕЛИ / Языковые модели (LLM)
Запустите omniget на облачном GPU
omniget — модель от tonhowtf для задачи «Языковые модели (LLM)». Узнайте, сколько видеопамяти ей нужно, на какие GPU она помещается сегодня и сколько стоит запустить её самому, с посекундной оплатой.
Из описания проекта: A local MCP server that gives your coding agent a desktop toolbox: downloads from YouTube, torrents and every site yt-dlp supports, media conversion, files, chats and system cleanup. One line connects Claude Code, Codex, Cursor or Gemini CLI, and sensitive actions wait for your click. Free and open
GPU, на которые она помещается сегодня
Типичный объём видеопамяти для такого приложения: около 16 ГБ. Более крупные модели и высокое разрешение потребуют больше.
| GPU | Память | В час | 10 часов | |
|---|---|---|---|---|
| RTX A4000 | 16 GB | $0.19 | $1.90 | Арендовать |
| RTX 2080 Ti | 22 GB | $0.20 | $2.00 | Арендовать |
| RTX 5060 Ti | 16 GB | $0.20 | $2.00 | Арендовать |
| Tesla V100 | 16 GB | $0.22 | $2.20 | Арендовать |
| Q RTX 5000 | 16 GB | $0.24 | $2.40 | Арендовать |
Актуальные начальные цены из нашего каталога. Вы платите посекундно, пока машина работает.
Как запустить omniget
- 01
Арендуйте GPU
Выберите один из GPU выше. Оплата посекундная: остановили машину — оплата прекратилась.
- 02
Откройте терминал или Jupyter
Подключитесь по SSH или откройте Jupyter в браузере. PyTorch и CUDA уже готовы.
- 03
Клонируйте приложение и следуйте README
Выполните команды ниже, затем следуйте README проекта. Большинство приложений запускают веб-интерфейс, который можно открыть через порты машины.
git clone https://github.com/tonhowtf/omniget.git
cd omnigetЗачем запускать самому?
У собственного LLM-сервера нет оплаты за токены и лимитов запросов, а данные остаются приватными. Выберите GPU по памяти и разверните модель через vLLM.
Вопросы
- Сколько видеопамяти нужно omniget?
- По нашей оценке, около 16 ГБ для инференса (? параметров). Более высокое разрешение, длинный контекст или большие батчи потребуют больше.
- Сколько стоит запуск omniget?
- От $0.19 в час на RTX A4000, с посекундной оплатой. Десять часов обойдутся примерно в $1.90.
- Нужна ли подписка?
- Нет. Вы платите только за время работы машины из своего баланса в USD. Остановите её, когда закончите.
Попробуйте на своём GPU за несколько минут
Выберите GPU, откройте Jupyter или SSH и запустите любую открытую модель. Вы платите посекундно и можете остановить машину в любой момент; без подписки и платы за подключение.
- Посекундная оплата в USD
- PyTorch и CUDA готовы за минуты
- Арендуйте и через ChatGPT или Claude