<commit_before>extern crate lrs;

#[cfg(test)]
mod tests {
    use lrs::atom::*;
    use lrs::token::*;
    use lrs::token::Operator::*;

    // #[test]
    fn test_operator() {
        let result = parse_Op("+");
        assert_eq!(result, Ok(Atom::from(Add)));

        let result = parse_Op("-");
        assert_eq!(result, Ok(Atom::from(Sub)));

        let result = parse_Op("*");
        assert_eq!(result, Ok(Atom::from(Mul)));

        let result = parse_Op("/");
        assert_eq!(result, Ok(Atom::from(Div)));
    }

    // #[test]
    // fn test_numeric() {
    //     let result = parser(numeric).parse("1000");
    //     assert_eq!(result, Ok((Expr::from(1000), "")));
    // }
    //
    // #[test]
    // fn test_symbol() {
    //     let result = parser(symbol).parse("+1");
    //     assert_eq!(result, Ok((Expr::Atom(Atom::Sym(Add)), "1")));
    // }
    //
    // #[test]
    // fn test_expr() {
    //     let result = parser(expr).parse("( 1 2 3 )");
    //     let expr = Expr::from(vec![1, 2, 3]);
    //     assert_eq!(result, Ok((expr, "")));
    // }
}<commit_msg>Comment out all tests<commit_after>// extern crate lrs;
//
// #[cfg(test)]
// mod tests {
//     use lrs::atom::*;
//     use lrs::token::*;
//     use lrs::token::Operator::*;
//
//     // #[test]
//     fn test_operator() {
//         let result = parse_Op("+");
//         assert_eq!(result, Ok(Atom::from(Add)));
//
//         let result = parse_Op("-");
//         assert_eq!(result, Ok(Atom::from(Sub)));
//
//         let result = parse_Op("*");
//         assert_eq!(result, Ok(Atom::from(Mul)));
//
//         let result = parse_Op("/");
//         assert_eq!(result, Ok(Atom::from(Div)));
//     }
//
//     // #[test]
//     // fn test_numeric() {
//     //     let result = parser(numeric).parse("1000");
//     //     assert_eq!(result, Ok((Expr::from(1000), "")));
//     // }
//     //
//     // #[test]
//     // fn test_symbol() {
//     //     let result = parser(symbol).parse("+1");
//     //     assert_eq!(result, Ok((Expr::Atom(Atom::Sym(Add)), "1")));
//     // }
//     //
//     // #[test]
//     // fn test_expr() {
//     //     let result = parser(expr).parse("( 1 2 3 )");
//     //     let expr = Expr::from(vec![1, 2, 3]);
//     //     assert_eq!(result, Ok((expr, "")));
//     // }
// }
{'fraction_non_alphanumeric': 0.25929127052722556, 'fraction_numerical': 0.013828867761452032, 'mean_word_length': 1.8509852216748768, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '2918691', 'n_tokens_mistral': 837, 'n_tokens_neox': 821, 'n_words': 140}