dspy phi3

dspy-phi3

最近用phi3测试了DSPy，目的是利用COPRO来细化提示指令，取得最好的成绩。我故意不使用断言。

这是我喜欢的：

我使用了 CoLA 数据集，其中包括 23 个语言出版物中带有语法注释的句子，我想要带有“仅标签”的输出（没有解释或额外的单词）。 DSPy 生成的指令性能良好，确保语法正确性：

原指令：检查句子是否正确(1)或错误(0)

优化指令：通过输出“1”表示语法正确，“0”表示错误，确定给定句子是否符合标准英语语法规则。

BootstrapFewShot 和 Signature Optimizer 都是很好的起点。

可以改进的地方：

DSPy 表示，“训练完成后，您将获得更好的说明和前缀，可以在签名中手动编辑。”然而，我相信编译后，该工具应该准备好进行预测。指令优化器需要更大的灵活性以便于调整，例如与其他语言更好的兼容性。或者，为签名优化器创建一个程序来根据需要调整提示将是有益的。

这是一个很酷的概念，但我想作为一个框架，它仍然需要改进。如果您有有趣的项目/共同兴趣，请在 linkedin 上与我联系。 https://www.linkedin.com/in/mayankladdha31/