eval_latam_mmlu.sh

lm_eval --model hf \
--model_args "pretrained=meta-llama/Llama-3.1-70B-Instruct,parallelize=True"  \
--tasks latam_mmlu \
--device cuda:0 \
--batch_size 32 \
--num_fewshot 5 \
--output_path outputs \
--log_samples