这是一位开发者分享的工具清单,可以提供从开发到部署、从数据管理到应用监控的全方位支持,大幅度节约你的探索成本~

LLM 应用开发框架 (开源 )

  1. Langflow:无代码编排工具,用于拼接不同的模块。 https://github.com/logspace-ai/langflow

  2. Deepset Haystack:基于Hugging Face Transformers的开源框架,用于查询和理解文本数据。 https://haystack.deepset.ai

  3. LlamaIndex:数据框架,便于将大型语言模型连接到自定义数据源。 https://www.llamaindex.ai

  4. LangChain:对于LLM应用开发入门者来说的必选工具。 https://www.langchain.com

  5. Prompt flow:微软开源的一套开发工具,旨在简化基于LLM的应用开发。 https://microsoft.github.io/promptflow

LLM 驱动的知识库和聊天机器人平台

  1. FastGPT:基于LLM大语言模型的知识库问答系统,提供开箱即用的功能。 https://fastgpt.run

  2. Dify:集成第三方API插件能力的平台,提供数据准备、Prompt Engineering等功能。 https://dify.ai/zh

  3. 毕昇:基于大语言模型的应用开发运维一体化平台。 https://github.com/dataelement/bisheng

国外版商业化闭源产品

  1. Baseplate:为LLM应用优化的后端,简化数据管理和应用构建。 https://www.baseplate.ai

  2. Stack AI:无代码工具,允许设计、测试和部署AI工作流程。 https://www.stack-ai.com

  3. Relevance AI:服务企业级客户的平台,提供多模态交互的AI应用构建。 https://relevanceai.com/blog

LLMOps 平台

  1. 星环科技:国内的LLMOps平台,提供提示管理和评估等功能。 https://www.transwarp.cn/subproduct/sophon-llmops

  2. Humanloop:帮助开发者在大型语言模型上构建高性能应用程序。 https://humanloop.com

  3. HoneyHive:监控和评估工具,提供版本控制和日志记录。 https://honeyhive.ai

LLMOps 工具包

  1. traceloop:提高LLM应用可观察性的工具。 https://www.traceloop.com

  2. Helicone:开源的可观测性平台,记录请求到OpenAI的日志。 https://www.helicone.ai

  3. Portkey:提供模型管理和可观测性功能的工具。 https://portkey.ai

提示词交流社区和交易平台

  1. PromptBase https://promptbase.com

  2. FlowGPT https://flowgpt.com

  3. PromptHero https://prompthero.com