[BUG]: 改变材质的颜色有时失效

[OriIIusion]

Bug描述

基于官网示例的第一个AddRemove，我又增加了一个改变颜色的UI，默认改变颜色以及add模型以后都可以正常改变，但是remove模型后，改变颜色就失效了，直到我又继续add模型。这时所有的模型颜色会突然改变成设置的颜色，改变颜色又生效了。

Bug复现流程

通过以下步骤产生bug:

1. 进入codepen示例 https://codepen.io/OriIIusion/pen/jOddBNe
2. 点击add按钮多添加几个box，然后改变下面的颜色，所有的box颜色会跟随修改
3. 点击remove按钮删除一个box，然后改变下面的颜色，所有的box颜色不会跟随修改
4. 再次点击add按钮，所有的box颜色会突变为刚才设置的颜色，并且修改颜色后，所有的box颜色会跟随修改

期待的结果

不管是add还是remove，我想要的是只要改变颜色，所有box的颜色都可以实时修改

其他信息

这个是bug还是我的逻辑有错误，还请帮忙看看

[JingwenBai]

感谢反馈！正在排查中~