Skip to content

Model Arithmetic的使用 #26

Description

@hiymf

非常感谢您分享好的作品,目前已经成功跑通Model Arithmetic,但在Model Arithmetic的使用上面还存在疑惑,想请教下。

1:是否Model Arithmetic可以在人形机器人上的使用,因为看到您使用的数据都是在桌面级的上的操作,不存在高度上的变化,并且使用的都是二指,对于灵巧手是否同适配呢

2:如果可以使用在人形机器人上的话,那目前我在两个任务上的组合存在一定的问题想请教下。场景描述,A和B是不同的物体,并且抓取手势不同。pick A在场景一高度1.5m下操作,pick B在场景一高度1m下操作,分别采集两个任务下训练,单独训练都取得了好的效果,当使用Model Arithmetic去合并两个模型权重的时候,训练出来的模型权重在推理过程中会出现pick A和pick B相似又不像的动作,比如操作高度类似跑到1.25m左右,并且灵巧手的手势状态也是间于A和B手势之间的,比如A操作为10度,B操作为30度,当推理后为20度Z左右(tip:A和B任务的操作方式不同)。

3:如果是我在Model Arithmetic过程中操作失误的话,我单独只使用一个pickA模型权重去Model Arithmetic,是不会影响到我原来的模型效果的

4:想请教下我这样操作是否合理,或者看看是否中间环节出现错误,还是说目前还不支持此类操作,如果可以我将不胜感激

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Fields

    No fields configured for issues without a type.

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions