跳到正文
Hugging Face Blog·· 2024-02-08精选AI 评分72

Hugging Face 发布 Messages API,支持 TGI 与 Inference Endpoints 兼容 OpenAI 客户端

From OpenAI to Open LLMs with Messages API on Hugging Face

AI 导读

Hugging Face 为 Text Generation Inference 推出 Messages API,使 TGI 1.4.0 起兼容 OpenAI Chat Completion API。

推荐理由

提供 TGI 对齐 OpenAI 的接入细节与示例,读者可据此把现有客户端代码迁移到自托管开源 LLM。

来源:Hugging Face Blog · huggingface.co