版权声明：原创作品，允许转载，转载时请务必以超链接形式标明文章原始出版、作者信息和本声明。否则将追究法律责任。 http://blog.csdn.net/topmvp - topmvp Todays embedded devices and sensor networks are becoming more and more sophisticated, requiring more ef

现在，您已经了解了如何调整和对齐大型语言模型以适应您的任务，让我们讨论一下将模型集成到应用程序中需要考虑的事项。 在这个阶段有许多重要的问题需要问。第一组问题与您的LLM在部署中的功能有关。您需要模型生成完成的速度有多快？您有多少计算预算可用？您是否愿意为改善推理速度或降低存储空间而牺牲模型性能？ 第二组问题与您的模型可能需要的额外资源有关。您是否打算让您的模型与外部数据或其他应用程序