Junzhe Li commited on
Commit
14acaec
·
1 Parent(s): b298259

important files

Browse files
medgemma_script.sh → medgemma.sh RENAMED
@@ -1,6 +1,6 @@
1
  #!/bin/bash
2
 
3
- #SBATCH --job-name=medgemma3
4
  #SBATCH -c 4
5
  #SBATCH --gres=gpu:l40s:1
6
  #SBATCH --time=16:00:00
 
1
  #!/bin/bash
2
 
3
+ #SBATCH --job-name=medgemma2
4
  #SBATCH -c 4
5
  #SBATCH --gres=gpu:l40s:1
6
  #SBATCH --time=16:00:00
rexvqa_script.sh → rexvqa_medrax.sh RENAMED
@@ -1,10 +1,10 @@
1
  #!/bin/bash
2
 
3
- #SBATCH --job-name=medgemma_run2
4
  #SBATCH -c 4
5
  #SBATCH --gres=gpu:l40s:1
6
- #SBATCH --time=16:00:00
7
- #SBATCH --mem=50G
8
  #SBATCH --output=rexvqa-%j.out
9
  #SBATCH --error=rexvqa-%j.err
10
 
@@ -12,4 +12,4 @@ module load arrow clang/18.1.8 scipy-stack
12
 
13
  source venv/bin/activate
14
 
15
- /scratch/lijunzh3/MedRAX2/venv/bin/python -m benchmarking.cli run --benchmark rexvqa --provider medgemma --model medgemma-4b --system-prompt MEDGEMMA_PROMPT --data-dir benchmarking/data/rexvqa --output-dir temp --max-questions 200 --temperature 0.7 --top-p 0.95 --max-tokens 10000 --concurrency 4 --random-seed 100
 
1
  #!/bin/bash
2
 
3
+ #SBATCH --job-name=medrax
4
  #SBATCH -c 4
5
  #SBATCH --gres=gpu:l40s:1
6
+ #SBATCH --time=08:00:00
7
+ #SBATCH --mem=64G
8
  #SBATCH --output=rexvqa-%j.out
9
  #SBATCH --error=rexvqa-%j.err
10
 
 
12
 
13
  source venv/bin/activate
14
 
15
+ /scratch/lijunzh3/MedRAX2/venv/bin/python -m benchmarking.cli run --benchmark rexvqa --provider medrax --model gemini-3-pro-preview --system-prompt CHESTAGENTBENCH_PROMPT --data-dir benchmarking/data/rexvqa --output-dir temp --max-questions 250 --temperature 0.7 --top-p 0.95 --max-tokens 10000 --concurrency 4 --random-seed 42