intcomp

/

sub-jepa

like 2

Follow

Intelligent Computing Laboratory 4

• "torch.nn.modules.linear.Linear",
• "torch.nn.modules.normalization.LayerNorm",
• "torch.FloatStorage",
• "torch.LongStorage",
• "transformers.models.vit.modeling_vit.ViTOutput",
• "torch._C._nn.gelu",
• "module.MLP",
• "module.ConditionalBlock",
• "torch.nn.modules.conv.Conv1d",
• "torch.nn.modules.linear.Identity",
• "module.FeedForward",
• "transformers.models.vit.modeling_vit.ViTSelfOutput",
• "__builtin__.set",
• "transformers.models.vit.modeling_vit.ViTLayer",
• "torch.nn.modules.activation.SiLU",
• "collections.OrderedDict",
• "transformers.models.vit.modeling_vit.ViTAttention",
• "transformers.activations.GELUActivation",
• "torch.nn.modules.dropout.Dropout",
• "torch.nn.modules.conv.Conv2d",
• "transformers.models.vit.modeling_vit.ViTModel",
• "transformers.models.vit.modeling_vit.ViTPatchEmbeddings",
• "torch.nn.modules.batchnorm.BatchNorm1d",
• "transformers.models.vit.modeling_vit.ViTEncoder",
• "transformers.models.vit.modeling_vit.ViTEmbeddings",
• "transformers.models.vit.configuration_vit.ViTConfig",
• "transformers.models.vit.modeling_vit.ViTSelfAttention",
• "torch.nn.modules.activation.Softmax",
• "torch._utils._rebuild_parameter",
• "module.Attention",
• "torch.nn.modules.container.ModuleList",
• "torch._utils._rebuild_tensor_v2",
• "jepa.JEPA",
• "torch.nn.modules.activation.GELU",
• "module.Transformer",
• "torch.nn.modules.container.Sequential",
• "transformers.models.vit.modeling_vit.ViTIntermediate",
• "module.ARPredictor",
• "module.Embedder"

How to fix it?

• "transformers.models.vit.modeling_vit.ViTEmbeddings",
• "module.ARPredictor",
• "transformers.models.vit.modeling_vit.ViTPatchEmbeddings",
• "transformers.models.vit.modeling_vit.ViTEncoder",
• "collections.OrderedDict",
• "torch._utils._rebuild_parameter",
• "transformers.models.vit.modeling_vit.ViTOutput",
• "torch.nn.modules.batchnorm.BatchNorm1d",
• "transformers.models.vit.modeling_vit.ViTIntermediate",
• "torch.nn.modules.container.ModuleList",
• "torch.nn.modules.container.Sequential",
• "module.Embedder",
• "module.ConditionalBlock",
• "module.MLP",
• "transformers.models.vit.modeling_vit.ViTAttention",
• "__builtin__.set",
• "transformers.models.vit.modeling_vit.ViTLayer",
• "transformers.models.vit.modeling_vit.ViTSelfAttention",
• "transformers.models.vit.modeling_vit.ViTModel",
• "torch.nn.modules.activation.Softmax",
• "torch._utils._rebuild_tensor_v2",
• "torch.FloatStorage",
• "torch.nn.modules.activation.GELU",
• "transformers.activations.GELUActivation",
• "torch._C._nn.gelu",
• "torch.nn.modules.activation.SiLU",
• "module.Attention",
• "torch.nn.modules.conv.Conv1d",
• "torch.LongStorage",
• "module.Transformer",
• "module.FeedForward",
• "torch.nn.modules.linear.Linear",
• "jepa.JEPA",
• "torch.nn.modules.normalization.LayerNorm",
• "transformers.models.vit.configuration_vit.ViTConfig",
• "torch.nn.modules.dropout.Dropout",
• "transformers.models.vit.modeling_vit.ViTSelfOutput",
• "torch.nn.modules.conv.Conv2d"

How to fix it?

• "torch.nn.modules.normalization.LayerNorm",
• "torch.FloatStorage",
• "transformers.models.vit.modeling_vit.ViTOutput",
• "torch.nn.modules.linear.Linear",
• "torch.nn.modules.container.Sequential",
• "torch.nn.modules.activation.SiLU",
• "module.Attention",
• "torch.LongStorage",
• "torch.nn.modules.batchnorm.BatchNorm1d",
• "transformers.models.vit.modeling_vit.ViTSelfOutput",
• "torch._utils._rebuild_tensor_v2",
• "torch.nn.modules.activation.Softmax",
• "transformers.models.vit.modeling_vit.ViTIntermediate",
• "torch.nn.modules.activation.GELU",
• "collections.OrderedDict",
• "torch.nn.modules.conv.Conv1d",
• "torch.nn.modules.linear.Identity",
• "module.ARPredictor",
• "transformers.activations.GELUActivation",
• "module.MLP",
• "torch._utils._rebuild_parameter",
• "transformers.models.vit.configuration_vit.ViTConfig",
• "transformers.models.vit.modeling_vit.ViTEmbeddings",
• "transformers.models.vit.modeling_vit.ViTAttention",
• "transformers.models.vit.modeling_vit.ViTSelfAttention",
• "module.Embedder",
• "__builtin__.set",
• "jepa.JEPA",
• "module.ConditionalBlock",
• "torch.nn.modules.conv.Conv2d",
• "torch._C._nn.gelu",
• "module.Transformer",
• "transformers.models.vit.modeling_vit.ViTPatchEmbeddings",
• "torch.nn.modules.container.ModuleList",
• "torch.nn.modules.dropout.Dropout",
• "transformers.models.vit.modeling_vit.ViTLayer",
• "transformers.models.vit.modeling_vit.ViTEncoder",
• "module.FeedForward",
• "transformers.models.vit.modeling_vit.ViTModel"

How to fix it?

• "transformers.models.vit.modeling_vit.ViTOutput",
• "torch.nn.modules.dropout.Dropout",
• "transformers.models.vit.modeling_vit.ViTSelfAttention",
• "torch.nn.modules.linear.Linear",
• "transformers.models.vit.modeling_vit.ViTEmbeddings",
• "transformers.models.vit.modeling_vit.ViTModel",
• "transformers.models.vit.modeling_vit.ViTAttention",
• "torch.nn.modules.activation.Softmax",
• "torch.nn.modules.normalization.LayerNorm",
• "module.ARPredictor",
• "transformers.models.vit.configuration_vit.ViTConfig",
• "module.ConditionalBlock",
• "module.Attention",
• "module.FeedForward",
• "collections.OrderedDict",
• "torch.FloatStorage",
• "transformers.models.vit.modeling_vit.ViTPatchEmbeddings",
• "transformers.models.vit.modeling_vit.ViTEncoder",
• "torch._utils._rebuild_parameter",
• "module.Transformer",
• "torch.nn.modules.batchnorm.BatchNorm1d",
• "transformers.models.vit.modeling_vit.ViTIntermediate",
• "torch.nn.modules.linear.Identity",
• "transformers.models.vit.modeling_vit.ViTSelfOutput",
• "module.Embedder",
• "torch.nn.modules.activation.GELU",
• "torch.nn.modules.container.ModuleList",
• "torch.nn.modules.activation.SiLU",
• "torch.nn.modules.conv.Conv2d",
• "transformers.models.vit.modeling_vit.ViTLayer",
• "torch._C._nn.gelu",
• "torch._utils._rebuild_tensor_v2",
• "__builtin__.set",
• "transformers.activations.GELUActivation",
• "torch.LongStorage",
• "torch.nn.modules.container.Sequential",
• "torch.nn.modules.conv.Conv1d",
• "jepa.JEPA",
• "module.MLP"

How to fix it?