Python实现等深分箱与编码转换的实用工具

一颗松果
一颗松果
发布时间:2026-10-13 | 4人浏览过
原创

本文介绍一个Python实现的等深分箱工具,旨在解决最优分箱与等宽分箱之外的分箱需求。通过自定义类实现数值列表的排序、分割及编码替换,支持将原始数据转换为分箱后的编码形式。文章包含完整代码示例、GitHub源码链接及基于Pandas的实际应用案例,帮助开发者快速进行特征工程中的变量离散化处理。

背景与工具概述

背景

当前许多文章已探讨过最优分箱算法,Python中也提供了如cut等方法用于等宽分箱。为了便于后续输出结果并满足特定的分箱要求,这里提供一个简单的工具函数供日后使用。该实现并未追求过度复杂的封装,而是力求在空间复杂度上做到力所能及的优化,确保代码简洁高效。

方法展示

等深分箱核心代码实现

直接查看代码实现。

以下展示了等深分箱逻辑以及对应的编码(encoding)转换方法。


# -*- coding: utf-8 -*-
"""
Created on Tue Jan 29 17:26:38 2019
@author: DamomWCG
"""
 
 
 
class Equal_depth_box:
  
 def equal_box(list, bin_num):
  '''
  param:
  list:you need bin box list
  bin_num: you want bin num
  '''
  bin_num = 10
  list.sort() #need sort can replace by others
  list_2 = list.copy()
  all_num = len(list_2)
  bin_sep = all_num/bin_num
  bin_sep = int(bin_sep)
  bin_list = []
  for i in range(1,bin_num):
   bin_dict = {}
   bin_dict = i*bin_sep
   bin_list.append(bin_dict)
  bin_real_list = []
  for i in bin_list:
   #print(i)
   bin_real_dict = {}
   bin_real_dict = list[i]
   bin_real_list.append(bin_real_dict)
  
  return bin_real_list
  
 def replace_box(list_1,replace_list):
  '''
  param:
  list_1:you need bin list
  replace_list: from equal box, replace the original list
  '''
  import pandas as pd
  list_max = max(list_1)
  list_min = min(list_1)
  replace_list.insert(0,list_min -1) #insert start
  replace_list.append(list_max + 1) #insert end
 
  list_2 = pd.cut(list_1, bins = replace_list,
      labels = range(len(replace_list) - 1)).tolist()
  return list_2
  
  
  
 
 
if __name__ == '__main__':
 
  import random
  
  list_1 = random.sample(range(1000), 134)
  
  print(list_1.sort())
  
  print('real_list: {}'.format(list_1[0:50]))
  
  replace_list = bin_class.equal_box(list_1, 10)
 
  list_2 = bin_class.replace_box(list_1, replace_list)
  
  print('encode_list: {}'.format(list_2[0:50]))

原始代码托管地址

https://github.com/DamonWCG/Equal_depth_box/blob/master/Equal_depth_box

实际应用案例与注意事项

使用案例

本案例使用的数据此前已进行过一步最优分箱处理,此处旨在通过等深分箱进行横向对比分析。

原始数据形式

具体案例


# -*- coding: utf-8 -*-
"""
Created on Wed Jan 30 16:17:19 2019
@author: DamonWCG
"""
 
from Equal_depth_box import *
 
import pandas as pd
 
df = pd.read_csv('test.csv', encoding = 'gbk')
 
df.columns
####需要分箱的列
list_1 = df['deal_city_encoding'].tolist() #本方法是针对于list,所以对于series需要进行变换
 
####需要分箱的个数
replace_list = Equal_depth_box.equal_box(list_1, 5) 
 
 
####替代的名称
 
##因为列表排序所以需要重新排序对齐,这里我有空再想想其他办法
df.sort_values(by="deal_city_encoding", inplace = True)
 
list_2 = Equal_depth_box.replace_box(list_1, replace_list)
 
df['deal_city_bin_encoding'] = list_2
 
 
 
df.to_csv('df.csv', encoding = 'gbk', index = False)

该方法目前的编码(encoding)形式仅支持数字类型。

分箱最终结果形式

需要注意,当需要将列表形式重新解码(decode)时,必须依据当前的排序数组重新进行编码。此问题计划在年后解决。

以上关于Python等深分箱的实例分享完毕,希望能为大家提供参考,也希望大家多多支持本站。

相关标签:

本站声明

本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。

Python 相关产品和应用

全部下载

专题列表