问基于树的算法需要什么特征工程？

EN

我认为对于基于树的算法来说，特性工程是必不可少的：

• 模块算术计算:例如将时间戳转换为一周中的一天，或一天中的时间。如果你的模型需要知道每个月的第三个星期一发生了什么事情，那就几乎不可能用时间戳来确定这一点。
• 同样，根据现有数据创建新功能可以极大地提高您的预测能力。这是领域知识非常重要的地方--如果你知道，或者认为你知道一种关系，那么你可以包括描述这种关系的变量。这是因为基于树的方法只能创建水平或垂直的分割(即与数据正交)。
• 维数约简通常通过特征选择或特征转换来执行。通过特征选择降低维数可能对您提到的模型没有多大帮助，但是一个算法可能受益于或不可能受益于特征转换(例如，主成分分析)，这取决于过程中丢失了多少信息。唯一确定的方法是探索功能转换是否提供了更好的性能。