promptflow [功能请求]与MLOPS系统的集成

xhv8bpkk  于 3个月前  发布在  其他
关注(0)|答案(2)|浏览(38)

您的功能请求是否与问题相关?请描述。

有时我们需要在Promptflow中记录运行,以便稍后使用其他MLops系统(如MLFlow/ClearML)进行评估。但我发现集成相当困难。例如,在ClearML中,需要在整个实验过程中维护全局实验对象。因此,采用ClearML需要将实验对象传递给每个节点。

描述您希望的解决方案

实现Promptflow与其他MLops系统的集成,或者为Promptflow创建新的MLops?

描述您考虑过的替代方案

我最终将Promptflow集成到了ClearML,但需要应用许多技巧。

附加上下文

在此功能请求中添加任何其他上下文或屏幕截图。

cpjpxq1n

cpjpxq1n1#

你好,@sparkdemotivator。"看起来你现在的主要关注点是需要使用流输入和输出链接将实验对象逐个传递给每个节点,你认为这是一个繁琐的过程。似乎你更倾向于全局变量设置,允许下游节点在不手动跨节点传递的情况下访问此对象。这是正确的吗?

3b6akqbq

3b6akqbq2#

你好,@sparkdemotivator。"看起来你目前的主要关注点是需要将实验对象通过流程输入和输出链接分别传递给每个节点,你觉得这是一个繁琐的过程。似乎你更倾向于全局变量设置,这样下游节点就可以在不手动跨节点传递的情况下访问这个对象。这是正确的吗?
是的。这是整合到我的MLops系统(ClearML)的痛点。如果你有更好的建议,可以在不花费太多精力解决这些繁琐过程的情况下与其他开源MLops系统集成,也欢迎提出建议。

相关问题