Portkey – AI Gateway at LLMOps Control Plane para sa mga App na Gumagamit ng Maraming Modelo | Quasa.io
#Quasa #QUA #Portkey
Ang Portkey ay isang AI gateway at LLMOps control plane na nasa pagitan ng iyong app at ng mga modelong tinatawag mo. Isang API na tugma sa OpenAI ang nagruruta ng trapiko sa 1,600+ modelo at 40+ provider, na may mga fallback, pagbabalanse ng load, muling pagsubok, caching, mga log, trace, pagsubaybay sa gastos, mga pananggalang, pamamahala ng prompt, at isang MCP gateway. Open source sa ilalim ng MIT ang pangunahing gateway; nagdaragdag ang naka-host na produkto ng kakayahang subaybayan ang operasyon at pamamahala. Nakatali na ngayon sa Palo Alto Networks / Prisma AIRS ang komersiyal na direksiyon nito. Mga pangunahing kasangkapan: Universal API, pagruruta & awtomatikong paglipat kapag may pagkabigo, simpleng cache + semantic cache, pagsubaybay sa operasyon (mga log/trace/gastos), mga pananggalang & pagtatakip ng PII, studio para sa mga prompt, mga virtual key/badyet, MCP gateway. Presyo: Libre ang Developer (10k logs/mo, 3 araw na pagpapanatili). Production $49/mo (100k log, +$9 bawat karagdagang 100k). Pasadya ang presyo ng Enterprise (VPC, SSO, SOC2/HIPAA). Libre ang software para sa sariling pagho-host ng OSS, at sagot mo ang imprastraktura.
MGA PANGUNAHING KALAKASAN
• Iisang API para sa napakalawak na katalogo ng mga modelo
• Mga kontrol para sa production: mga fallback, cache, badyet, pananggalang
• Detalyadong pagsubaybay sa mga request
• Libreng antas + open-source gateway sa ilalim ng MIT
• Opsiyon para sa mga enterprise sa pamamagitan ng Prisma AIRS
ANGKOP PARA SA
Mga pangkat na nagpapatakbo ng mga LLM app o agent na gumagamit ng maraming modelo at nangangailangan ng maaasahang operasyon, kontrol sa gastos, at pamamahala nang hindi kailangang ikonekta nang hiwalay ang bawat provider.
MGA TAMPOK
• Integrasyong tugma sa OpenAI na magagamit agad bilang kapalit
• Maaaring mabawasan ng semantic caching ang gastos sa token
• Pamamahala ng mga bersiyon ng prompt + lugar para sa pagsubok
• Ayon sa pahayag, ginagamit ng 3,000+ pangkat ng GenAI
MGA POSIBLENG DAPAT ISAALANG-ALANG
• Ang halaga ng bayad na serbisyo ay pangunahing nasa mga log/pagpapanatili at pamamahala, hindi sa mismong dami ng napoproseso
• Humihinto sa 10k ang mga libreng log (patuloy pa ring dumadaan ang mga request)
• Binabago ng pagbili sa kumpanya ang pangmatagalang plano nito
• Hindi ito pamilihan ng mga modelo tulad ng OpenRouter
PANGKALAHATANG HATOL
4.4/5 bituin. Mahusay na gateway para sa production kung mayroon ka nang sariling mga key at kailangan mo ng pagruruta at pagsubaybay sa operasyon. Magsimula sa libreng antas, saka lumipat sa $49 kapag kailangan mo na ng mas matagal na pagpapanatili ng mga log, semantic cache, at RBAC. Makakuha rin ng gantimpalang 1 QUA sa pamamagitan ng pagsulat ng pagsusuri sa Quasa.io!
MAGSIMULA: https://quasa.io/projects/portkey























