首页
学习
活动
专区
圈层
工具
发布
首页标签dataflow

#dataflow

02 HybridFlow:把 RLHF 看成高层 Dataflow

anzhsoft

这篇文章只解决一个问题:verl 为什么能把复杂的 RLHF/PPO 训练写得像一段单进程程序,同时又让真正的计算跑在多 GPU worker 上?

900

C# Dataflow

郑子铭

随着多核处理器的普及,如何高效地进行并发与并行编程,已经成为 C# 开发者不可回避的话题。虽然 .NET 提供了诸如 Task、Parallel 等多种并发工具...

44100

C# Dataflow

JusterZhu

随着多核处理器的普及,如何高效地进行并发与并行编程,已经成为 C# 开发者不可回避的话题。虽然 .NET 提供了诸如 Task、Parallel 等多种并发工具...

52200

PaLM中使用的激活函数:SwiGLU

西西嘛呦

我们不难发现,激活函数就是对x乘以一些数,以对某些值进行约束。 GLU(Gated Linear Unit),其一般形式为:

5.3K00

一个HLS Stream应用案例

Lauren的FPGA

对于顶层函数,如果形参类型为hls::stream,HLS会将其综合为ap_fifo类型的接口。

1.9K10
领券