PrunaAI

/

microsoft-git-base-textvqa-QUANTO-int8bit-smashed

like 0

• "transformers.activations.QuickGELUActivation",
• "quanto.nn.qconv2d.QConv2d",
• "torch.float32",
• "torch.device",
• "torch._utils._rebuild_tensor_v2",
• "transformers.models.git.configuration_git.GitVisionConfig",
• "torch.nn.modules.container.Sequential",
• "transformers.models.git.configuration_git.GitConfig",
• "transformers.models.git.modeling_git.GitVisionMLP",
• "transformers.models.git.modeling_git.GitVisionTransformer",
• "torch.nn.modules.sparse.Embedding",
• "transformers.models.git.modeling_git.GitForCausalLM",
• "transformers.models.git.modeling_git.GitVisionEncoderLayer",
• "transformers.models.git.modeling_git.GitVisionAttention",
• "transformers.models.git.modeling_git.GitAttention",
• "transformers.models.git.modeling_git.GitVisionEmbeddings",
• "transformers.models.git.modeling_git.GitProjection",
• "torch.int8",
• "torch._utils._rebuild_parameter",
• "transformers.models.git.modeling_git.GitModel",
• "torch.nn.modules.dropout.Dropout",
• "transformers.models.git.modeling_git.GitSelfAttention",
• "transformers.models.git.modeling_git.GitEncoder",
• "transformers.models.git.modeling_git.GitSelfOutput",
• "transformers.models.git.modeling_git.GitOutput",
• "torch.nn.modules.normalization.LayerNorm",
• "torch.nn.modules.container.ModuleList",
• "torch._C._nn.gelu",
• "torch.LongStorage",
• "quanto.tensor.qtype.qtype",
• "__builtin__.set",
• "quanto.nn.qlinear.QLinear",
• "transformers.generation.configuration_utils.GenerationConfig",
• "torch.FloatStorage",
• "transformers.models.git.modeling_git.GitVisionEncoder",
• "transformers.models.git.modeling_git.GitLayer",
• "transformers.activations.GELUActivation",
• "transformers.models.git.modeling_git.GitVisionModel",
• "transformers.models.git.modeling_git.GitEmbeddings",
• "transformers.models.git.modeling_git.GitIntermediate",
• "collections.OrderedDict"

How to fix it?