【缩尾处理】如何对数据进行“缩尾处理”

缩尾处理

一、含义

1、经常听到的“去掉一个最低分去掉一个最高分”操作类似，缩尾处理相当于对数据进行掐头（尾）去尾，然后再按照一定的方法填补被掐掉的数据。

2、需要注意的是，缩尾处理并不是掐掉指定个数的数据，而是按照比例，比方说删掉前10%和后20%的数据。

二、使用场景

1、在回归中，几个异常值往往可能导致结果不真实，例如回归线扭曲。在下图中，异常值导致回归曲线偏移真实趋势，从而扭曲变量之间的真实关系。如果把左图右上方的异常值去掉，曲线斜率会大幅下降。因此，在连续变量回归之前，有必要先检查异常值，多数实证文章在回归之前，会先将连续变量进行 缩尾或 截尾处理。

三、例子

1、将变量最小和最大的2.5% 的值进行缩尾处理。所谓缩尾，就是将小于 2.5% 的值统一替换成 2.5%的值，大于 97.5% 的值统一替换成 97.5%的值。例如，如果最低的 2.5%的工资是 5000，那么所有低于 5000 的工资都会被替换成 5000。默认情况如下：（缩尾和截尾的区别）