Create setup.py

setup.py

@@ -0,0 +1,18 @@
+from setuptools import setup, find_packages
+
+setup(
+    name="baoule_tokenizer",  # Nom du package (important !)
+    version="0.1.0",        # Version de votre tokenizer
+    author="Adjoumani",     # Votre nom
+    description="Tokenizer personnalisé pour la langue baoulé",
+    packages=find_packages(),
+    install_requires=[
+        "regex",       # Liste des dépendances
+        "datasets",    # ...
+    ],
+    include_package_data=True,  # Inclure les fichiers de données comme baoule_tokenizer.model
+    package_data={
+        "": ["*.model", "*.vocab"], # Spécifiez les extensions de fichiers à inclure.
+    },
+
+)