Caz de utilizare cloud

Găzduire pipeline RAG și baze de date vectoriale

Găzduiți pipeline-uri de retrieval-augmented generation cu pgvector, Weaviate, Qdrant sau ChromaDB pe servere cloud dedicate. Pregătit pentru LangChain și LlamaIndex.

$4/mo
Preț de pornire
24
Centre de date globale
99.9%
SLA de uptime
24/7
Suport uman

De ce să găzduiți RAG pe OMC Cloud

RAG (Retrieval-Augmented Generation) combină datele voastre proprietare cu inteligența LLM. Necesită o bază de date vectorială pentru embedding-uri, putere de calcul pentru pipeline-ul de retrieval și, opțional, un GPU pentru stratul de inferență LLM. Serviciile RAG gestionate vă leagă de ele și taxează per interogare.

Găzduiți local întreaga stivă RAG pe OMC Cloud: PostgreSQL + pgvector pentru embedding-uri, LangChain sau LlamaIndex pentru orchestrare și, opțional, o instanță GPU pentru inferență LLM locală. Control complet asupra datelor, pipeline-ului și costurilor voastre.

Beneficii cheie

01
Control complet asupra stivei
Dețineți întregul pipeline RAG - embedding-uri, retrieval, generare.
02
pgvector și Weaviate
Rulați orice bază de date vectorială: pgvector, Weaviate, Qdrant, ChromaDB, Milvus.
03
Pregătit pentru LangChain
Instalați LangChain, LlamaIndex, Haystack sau orchestrare personalizată.
04
Confidențialitatea datelor
Documentele și embedding-urile voastre rămân pe serverul vostru. Fără acces din partea terților.
05
Performanță NVMe
Căutare rapidă de similaritate vectorială pe stocare bazată pe NVMe.
06
GPU opțional
Adăugați un GPU pentru inferență LLM locală alături de pipeline-ul RAG.
07
Backup-uri automate
14 puncte de restaurare zilnice pentru baza de date de embedding-uri.
08
Scalare la cerere
Începeți la scară mică, adăugați resurse pe măsură ce baza voastră de cunoștințe crește.

Cum funcționează

1

Alegeți

Selectați centrul de date, GPU/CPU, RAM, stocarea și sistemul de operare.

2

Implementați

Server gata în mai puțin de 60 de secunde prin consolă sau API.

3

Treceți live

Instalați-vă stiva, configurați, lansați cu suport 24/7.

Cloud vs. On-Premise vs. Partajat

CaracteristicăOMC CloudOn-PremisePartajat
Cost inițialNiciunul - de la $4/mo$5,000-50,000+$5-20/mo
PerformanțăNVMe dedicatDedicat, dar fixPartajat
ScalareInstantSăptămâniLimitat
ControlAcces root completCompletFoarte limitat
Uptime99.9% SLADepinde de tine95-99%
Backup-uriAutomatizat, 14 punctePe cont propriuDe bază
Acoperire globală24 de centre de dateO singură locațiePartajat

Configurații recomandate

Niveluri reale din lista de prețuri. Scalați în sus sau în jos oricând.

Starter
/mo
2A.4GB · pe lună
  • • 2 vCPU (Intel Xeon)
  • • 4 GB RAM
  • • 40 GB NVMe
  • • 5,000 GB transfer
Implementați acum
Standard
/mo
4A.8GB · pe lună
  • • 4 vCPU (Intel Xeon)
  • • 8 GB RAM
  • • 80 GB NVMe
  • • 5,000 GB transfer
Implementați acum
Performanță
/mo
8A.16GB · pe lună
  • • 8 vCPU (Intel Xeon)
  • • 16 GB RAM
  • • 150 GB NVMe
  • • 5,000 GB transfer
Implementați acum

Specificații tehnice

Baze de date vectoriale: pgvector, Weaviate, Qdrant, ChromaDB, Milvus
Orchestrare: LangChain, LlamaIndex, Haystack
Embedding-uri: OpenAI, Cohere sau găzduit local (e5, BGE)
LLM: GPU opțional pentru Llama/Mistral local
Stocare: NVMe pentru căutare vectorială rapidă
CPU: Până la 104 vCPU
RAM: Până la 512 GB (important pentru indici mari)
Backup: 14 puncte de restaurare zilnice

Întrebări frecvente

Ce baze de date vectoriale pot rula?+

Oricare: pgvector (extensie PostgreSQL), Weaviate, Qdrant, ChromaDB, Milvus, alternativă la Pinecone. Acces root complet.

Am nevoie de un GPU pentru RAG?+

Nu neapărat. Pipeline-ul de retrieval rulează pe CPU. Aveți nevoie de GPU doar dacă doriți inferență LLM locală în locul unui API extern.

Câte date pot indexa?+

Depinde de RAM și de stocare. 4 GB RAM gestionează ~1M de vectori. 32 GB gestionează ~10M+. Stocarea NVMe se scalează până la terabytes.

Pot folosi LangChain?+

Da. Instalați LangChain, LlamaIndex, Haystack sau orice framework Python. Acces root complet.

Datele mele sunt private?+

Complet. RAG găzduit local înseamnă că documentele și embedding-urile voastre nu părăsesc niciodată serverul.

Cum se compară acest lucru cu serviciile RAG gestionate?+

Fără taxe per interogare, fără dependență de furnizor, confidențialitate completă a datelor. Controlați întreaga stivă.

Cazuri de utilizare conexe

Inferență LLM
LLM local pentru pipeline-ul RAG
Găzduire baze de date
PostgreSQL + pgvector
Agenți AI
Agenți AI alimentați de RAG

Începeți perioada de probă gratuită de 30 de zile

Implementați în mai puțin de 60 de secunde. Nu este necesar card de credit.