四维图新20241219

就是首先这个两段式它的好处是说我可以把一个非常复杂的这样的一个事情先做了一个局部的拆解 一个一个探针进去我们看到一个相关的结果能做一定的修改那在一些极端场景下我们是有很好的把控能力和和和这个管控能力的对然后这个是我们选择这个二段式的端到端的一个主要的一个原因那接下来就是说四维在做这个二段式端到端其实现在有哪些准备 我们叫做这个Click数据就是一个Click相当于一个视频段就是从不同的场面定义可能不太一样从20秒到一分钟不等那这个Click的规模在一些界来看通常都是百万规模甚至千万规模然后那这么大规模的数据首先带来的第一个问题就是你需要有一个存储系统把这些数据全部存下来然后存下来的同时你这些数据需要参与训练那就涉及到数据传输 那一进来看做这种专门专业训练的你的那个卡的数量高的就是前卡那么然后我们目前在跟火山合作也是创造了他这个这个集群的规模数量和他们一些基础设施吧就是在他们有一个有一个专属的这种训练集群也有一个专属的存储集群两个集群呢在物理距离上其实也是相对比较近的这带来一个好处就是说在这么多数据传输的时候他的时间 然后他这短点吧就是从这个存储从计算从稳定性上就是对这个断着断提的提出了一些一些要求明白啊刚刚唐 ...