style: Add missing trailing newlines

Branch: HFTokenizers

Signed-off-by: Gabe Goodhart <[email protected]>

include/detail/bpe_tokenizer_base.h

@@ -65,4 +65,4 @@ class BPETokenizerBase : public Tokenizer {
 };
 
 } // namespace detail
-} // namespace tokenizers
+} // namespace tokenizers

include/hf_tokenizer.h

@@ -51,4 +51,4 @@ class HFTokenizer : public detail::BPETokenizerBase {
   TokenDecoder::Ptr _decoder;
 };
 
-} // namespace tokenizers
+} // namespace tokenizers

include/token_decoder.h

@@ -91,4 +91,4 @@ class ByteLevelTokenDecoder : public TokenDecoder {
 
 }; // end class ByteLevelTokenDecoder
 
-} // namespace tokenizers
+} // namespace tokenizers

src/bpe_tokenizer_base.cpp

@@ -266,4 +266,4 @@ Result<std::string> BPETokenizerBase::decode(uint64_t prev,
 // ---- public end -------------------------------------------------------------
 
 } // namespace detail
-} // namespace tokenizers
+} // namespace tokenizers

src/hf_tokenizer.cpp

@@ -259,4 +259,4 @@ void HFTokenizer::_decode(re2::StringPiece input, std::string &ret) const {
   }
 }
 
-} // namespace tokenizers
+} // namespace tokenizers

src/pre_tokenizer.cpp

@@ -174,4 +174,4 @@ SequencePreTokenizer::pre_tokenize(re2::StringPiece input) const {
   return pieces;
 }
 
-} // namespace tokenizers
+} // namespace tokenizers

src/token_decoder.cpp

@@ -91,4 +91,4 @@ std::string ByteLevelTokenDecoder::decode(re2::StringPiece token) const {
   return decoded_text;
 }
 
-} // end  namespace tokenizers
+} // end  namespace tokenizers

tools/tokenize_tool/main.cpp

@@ -103,4 +103,4 @@ int main(int argc, char *argv[]) {
   std::cout << std::endl;
 
   return 0;
-}
+}