Czym jest CGC
Comtegra GPU Cloud (CGC) to platforma chmurowa GPU firmy Comtegra S.A. do zadań AI i uczenia maszynowego, zarządzana przez CGC CLI i CGC SDK.
CGC CLI to interfejs wiersza poleceń dla Comtegra GPU Cloud. CGC CLI umożliwia zarządzanie zasobami Comtegra GPU Cloud. Obecna wersja aplikacji obsługuje tworzenie, wyświetlanie i usuwanie zasobów obliczeniowych, storage i sieci. Każdy zasób obliczeniowy jest udostępniany jako URL, który jest dostępny z otwartego Internetu.
Aby umożliwić lepszy dostęp do zasobów storage, każde konto ma możliwość uruchomienia bezpłatnej przeglądarki plików filebrowser, która jest lokalną implementacją Dropboxa. Pamiętaj, aby zamontować do niej nowo utworzone woluminy.
Obecnie oferujemy możliwość uruchamiania zasobów obliczeniowych takich jak:
- Jupyter notebook z zainstalowanym domyślnie tensorflow lub pytorch
- Triton inferencing server do dużej skali inferencing'u
- Label studio do łatwego zarządzania zadaniami adnotacji danych z różnymi trybami
- Rapids zestaw przyspieszonych bibliotek do przetwarzania danych
- LLM API - API do używania i kontrolowania dużych modeli językowych
- DeepStream - biblioteki NVIDIA do przetwarzania video
- Vision API - API do przetwarzania obrazów i wideo
- llama.cpp - serwowanie modeli GGUF przez API zgodne z OpenAI
- vLLM - serwowanie modeli z Hugging Face przez API zgodne z OpenAI
- OpenWebUI - własny interfejs czatu
- n8n - automatyzacja workflow w podejściu low-code
- AimStack - śledzenie eksperymentów
- Label Studio ML backend - automatyczna wstępna anotacja z YOLO
- Unsloth - dostrajanie dużych modeli językowych
- nginx - serwowanie treści statycznych
- Własne obrazy - uruchamianie dowolnej aplikacji z własnego obrazu kontenera
Jupyter Notebooks są wyposażone we wszystkie biblioteki CUDA i sterowniki GPU, co umożliwia wykorzystanie GPU do przyspieszonych obliczeń. Oprócz zasobów obliczeniowych, udostępniamy te silniki bazodanowe dostępne z Twojego namespace'a:
- PostgreSQL
- Weaviate
- PG-Vector
- Apache AGE
- MinIO
- MongoDB (własny obraz)
- Redis (własny obraz)
Więcej jest w drodze! Prosimy postępować zgodnie z instrukcjami, aby rozpocząć.