通信人家园

标题: 【原创】数据处理小工具V2.3，数据批量处理！ [查看完整版帖子] [打印本页]

时间: 2023-5-18 09:43

作者: lgz0701 标题: 【原创】数据处理小工具V2.3，数据批量处理！

数据处理小工具(lgz)

V2.3

备注：此工具需具备一定SQL脚本基础。

数据处理小工具V2.3本次更新如下：

1、提升XLSX文件入库速度，目前100M表格文件预计3分钟左右全部入库。

2、增加单文件入库，可选择excel文件及csv文件，均可设置表名及表头

3、增加小工具excel文件转换为CSV文件。

4、支持非查询SQL脚本执行，只导出查询脚本结果！

本工具主要为提升网优工作效率，简化例行数据整理。在数据处理有着显著的效率，方便广大网优工作的快速开展。本工具需一定SQL脚本基础！

本工具基于Sqllite及Python3.7打包完成。主要功能为将多个CSV及excel表格导入数据库，使用SQL脚本批量统计生成EXCEL表格。理论上支持140TB数据导入导出。

导入：一键导入该软件目录下data_dir下所有文件至数据库

勾选后将'/0'或'NIL'值剔除：勾选后导入的所有数据'/0'或'NIL'将会赋值为空值

导出：一键导出SQL目录下所有SQL脚本至out_xlsx目录，导出文件格式为EXCEL格式

复制代码

时间: 2023-5-18 14:03

作者: cnqq9999

感谢分享

时间: 2023-5-26 17:21

作者: ganvid2008

感谢分享

通信人家园 (https://www.txrjy.com/)