Ray采用Plasma跨节点传输一个大对象(4GB)时,如何实现的?有没有使用数据压缩以及并行传输技术呢?

Ray采用Plasma跨节点传输一个大对象(4GB)时,如何实现的?有没有使用数据压缩以及并行传输技术呢?

直接用 object store 就好了,你只需要保证你的 object store 有足够大的空间

主要是想了解下底层实现的机制,不确定Plasma如何实现机器之间的网络带宽的充分利用

底层就是 rpc,把 object 切片然后做 pull/push,你要想了解细节,你可以google ray 的白皮书,之后再去看代码

1 个赞

请教一下:object是按多大的size进行切片,切片之后是串行传输,还是并行传输的呢?