<commit_before>Setup:

  $ . $TESTDIR/setup.sh

Language types are output:

  $ ag --list-file-types
  The following file types are supported:
    --actionscript
        .as  .mxml
  
    --ada
        .ada  .adb  .ads
  
    --asciidoc
        .adoc  .ad  .asc  .asciidoc
  
    --apl
        .apl
  
    --asm
        .asm  .s
  
    --asp
        .asp  .asa  .aspx  .asax  .ashx  .ascx  .asmx
  
    --aspx
        .asp  .asa  .aspx  .asax  .ashx  .ascx  .asmx
  
    --batch
        .bat  .cmd

    --bazel
        .bazel
  
    --bitbake
        .bb  .bbappend  .bbclass  .inc
  
    --bro
        .bro  .bif
  
    --cc
        .c  .h  .xs
  <commit_msg>Add missing whitespace to test<commit_after>Setup:

  $ . $TESTDIR/setup.sh

Language types are output:

  $ ag --list-file-types
  The following file types are supported:
    --actionscript
        .as  .mxml
  
    --ada
        .ada  .adb  .ads
  
    --asciidoc
        .adoc  .ad  .asc  .asciidoc
  
    --apl
        .apl
  
    --asm
        .asm  .s
  
    --asp
        .asp  .asa  .aspx  .asax  .ashx  .ascx  .asmx
  
    --aspx
        .asp  .asa  .aspx  .asax  .ashx  .ascx  .asmx
  
    --batch
        .bat  .cmd
  
    --bazel
        .bazel
  
    --bitbake
        .bb  .bbappend  .bbclass  .inc
  
    --bro
        .bro  .bif
  
    --cc
        .c  .h  .xs
  
{'fraction_non_alphanumeric': 0.11650485436893204, 'fraction_numerical': 0.0, 'mean_word_length': 0.9061166429587483, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 2}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '3272737', 'n_tokens_mistral': 559, 'n_tokens_neox': 545, 'n_words': 132}