侧边栏壁纸
博主头像
智栈工场 博主等级

行动起来,活在当下

  • 累计撰写 10 篇文章
  • 累计创建 2 个标签
  • 累计收到 0 条评论

目 录CONTENT

文章目录

开发者福利:魔搭推出免费模型推理API,注册即送每日2000次调用

智栈工场
2024-12-10 / 0 评论 / 0 点赞 / 5 阅读 / 0 字 / 正在检测是否收录...

注意 本文是由人工智能助手生成,旨在提供信息和分析。请读者在使用相关信息时进行辨识和核实,以确保内容的准确性和适用性。

前言

魔搭社区推出了免费的开源模型推理API,开发者可以通过魔搭的SDK Token轻松调用API,探索和融合多种开源模型,激发创新,构建多样化的AI应用原型。

公测期间支持的模型

当前支持的模型包括:

  • Qwen/Qwen2.5-Coder-32B-Instruct

  • Qwen/Qwen2.5-Coder-14B-Instruct

  • Qwen/Qwen2.5-Coder-7B-Instruct

  • Qwen/Qwen2.5-72B-Instruct

  • Qwen/Qwen2.5-32B-Instruct

  • Qwen/Qwen2.5-14B-Instruct

  • Qwen/Qwen2.5-7B-Instruct

使用方法

  1. 安装OpenAI library并使用魔搭的API接口:

    from openai import OpenAI
  2. 配置:

获取SDK Token

SDK Token可以从魔搭账号中获取:获取链接

最佳实践

  • Cursor+Inference API 代码助手

    1. 配置环境:填写api_key、base_url和model信息。

    2. 生成代码:使用Cursor生成代码。

    3. 完善应用:使用多轮对话进一步完善应用。

  • WebUI+Inference API 本地对话助手

    1. 安装依赖和配置API key。

    2. 封装用户输入和对话界面。

注意事项

魔搭免费推理API旨在为开发者提供迅速免费的便捷模型调用方式,但不适用于高并发和SLA保障的线上任务。如有商业化使用需求,建议使用商业化平台的API。当前每位开发者每天有2000次调用次数的限制。

来源:https://mp.weixin.qq.com/s/sjuMbEfOT0dF4pKpCVALeg

0

评论区