может что почитать на тему токенизации кода на python. Задача написать модель (или взять уже предобученную и ее попробовать дообучить на нужных примерах (данные имеются)) которая будет распознавать код на python и присваивать ему определенный класс. Просто я так до конца и не понял, это какая-то специфичная задачка или же можно вот взять любую языковую модель вроде ламы или не знаю и дообучить ее все должно заработать?
Анализ кода на Python? Может вы имеете ввиду работу с AST?
Обсуждают сегодня