关于数据集的格式问题

[Luucky13]

1.为什么开源的数据集格式似乎和dataflow文档中text2sql处理的结果不太一样？
2.请问dataflow中有提供将开源的sqlfow数据集转换为直接sft可用格式的功能集成么？

[TechNomad-ds]

您好，我们已更新脚本和代码。具体的执行方式请参考 https://github.com/TechNomad-ds/Text2SQL-Flow/tree/main/data_augmentation。
目前构建的数据可以直接用于 SFT训练，数据格式中：

• input 对应字段为 prompt
• output 对应字段为 cot_reasoning