Можно еще уточнить пару моментов?) Если у меня модель требует некий

Question

Можно еще уточнить пару моментов?) Если у меня модель требует некий

шаблон промпта как в функции ниже, мне нужно все данные оработать с учетом этого шаблона или же это ток для инференса?

def generate_prompt(data_point):
return f"""
Below is an instruction that describes a task. Write a response that appropriately completes the request
### Instruction: {data_point["request"]}
### Response: {data_point["responce"]}
""".strip()

def process_observation(data_point):
complete_prompt = generate_prompt(data_point)
return tokenizer(complete_prompt, padding=True, truncation=True)

data = Dataset.from_pandas(pd.read_excel(DATA_DIR))
data = data.map(process_observation)

#nlp #programming #russian

0

05.08.2023

2 ответов

30 просмотров

Ilya Gusev

Как хочется в инференсе, так и должно быть в обучении

0

05.08.2023

datascience xc · Accepted Answer

datascience xc

Конечно с форматом

0

05.08.2023

170 похожих чатов

Можно еще уточнить пару моментов?) Если у меня модель требует некий

2 ответов

Похожие вопросы