Plot2Eq / scripts /generate_data.py

Commit History

Поправил импорты в generate_data
95b75aa

YauheniShe commited on

Изменил структуру проекта
23650ad

YauheniShe commited on

Теперь мы канонизируем выражение перед токенизацией. Также хеш теперь зависит от последовательности токенов, а не то строки
febbac5

YauheniShe commited on

Исправил количество потоков и даты
706f20f

YauheniShe commited on

добавил докер + мелкие улучшения качества фильтра графиков. Полностью готовый пайплайн
0707f4a

YauheniShe commited on

Добавил таймаут, исправил баг с зависанием скрипта из-за слишком сложных формул, добавил анализ полученного датасета в ноутбук, добавил поддержку продолжения генерации при наличии какого-то числа файлов
09dcd08

YauheniShe commited on

Исправлена ошибка при которой все потоки генерировали одинаковые функции. Добавлен красивый вывод прогресса в консоль
85b7185

YauheniShe commited on

Улучшил работу генератора выражений, написал токенизатор выражений, написал мультипроцессинг генерацию даты, написал класс для датасета. Полностью завершен пайплайн генерации даты. Добавил ноутбук для теста даты
0c26e65

YauheniShe commited on