Python CSV去重教程:按列或整行去重保留第一条
用pandas drop_duplicates对CSV去重,支持按指定列去重、保留第一条或最后一条、导出干净文件,附完整代码和注意事项。
场景痛点
数据来源多了,同一个用户重复录入、同一笔订单
用pandas drop_duplicates对CSV去重,支持按指定列去重、保留第一条或最后一条、导出干净文件,附完整代码和注意事项。
场景痛点
数据来源多了,同一个用户重复录入、同一笔订单
用pandas和sklearn做Min-Max归一化、Z-score标准化,解决不同量纲字段(金额与数量)在模型、相似度计算中权重失衡的问题。
场景痛点
做客户分群、相似推荐、回归预测时,金额列动
把多个JSON文件或一组JSON数据批量导出成Excel,用openpyxl或pandas to_excel,支持多Sheet分文件、表头样式,附完整代码。
场景痛点
数据是JSON格式,但同事只收Excel;一份JSON里有
用pandas的dropna、drop_duplicates、fillna三步处理脏数据,覆盖整行空值、全列空值、重复行、关键字段重复等常见场景。
场景痛点
从业务系统导出的Excel,经常是一堆空行、重
用pandas的str.split分列、str.replace替换、str.extract提取、str.contains筛选,处理Excel里混在一格的电话、地址、商品名等脏字符串。
场景痛点
从系统导出的表格,姓名和电
把SQLite查询结果直接导出成xlsx,支持多级表头、自动列宽、数字格式,适合每周给业务方出报表,不用再手动复制粘贴。
场景痛点
数据库里查出来的数据,业务方要Excel版本,每次手动S
讲解用requests配合BeautifulSoup批量抓取多个网页的标题,线程池并发提速,把结果存成CSV清单,适合竞品监控、文章列表收集、网页索引整理。
场景痛点
手里有一堆URL,可能是从Exc
讲解用requests以二进制流式方式下载PDF文件,处理Content-Disposition自动取文件名,批量下载网页中的PDF附件,适合合同、报告、资料归档。
场景痛点
工作中经常要从OA系统、公
讲解requests用params字典发起带查询参数的GET请求,自动拼接URL并编码中文,避免手动拼接字符串出错,适合搜索、分页、筛选场景。
场景痛点
很多网页和接口不是一个固定URL,而是
用 Python Pillow 批量压缩图片,通过调整 quality 参数、optimize、转 WebP 把大图压小,支持遍历目录、对比压缩前后体积,附完整代码和注意事项。
场景痛点
单反拍的原图一张 5
用 Python Pillow 批量读取图片 EXIF 元数据,提取拍摄时间、相机型号、焦距、光圈、GPS 坐标,导出成 CSV 表格,附完整代码和字段说明。
场景痛点
整理旅行照片、归档素材时,想知
Python 用 pyzbar + Pillow 识别本地图片中的二维码内容,支持一张图多个码、批量识别文件夹,给出完整代码和 Windows 下 zbar 依赖安装说明。
场景痛点
手里有一堆二维码截图
Python 用 datetime 获取当前日期时间、时间戳、星期、昨天明天,strftime 格式化输出常用格式,附完整代码和速查表。
场景痛点
写脚本经常要在文件名后面拼时间戳,比如 报告_20
Python 用 pyautogui 读取屏幕指定坐标或鼠标位置的 RGB 颜色,做屏幕取色、颜色变化监控、UI 自动化判色,给出完整代码和多显示器注意事项。
场景痛点
做 UI 自动化要判断按钮
用Python matplotlib在一张图上叠加柱状图和折线图,双Y轴展示量级不同的两个指标,代码完整可运行,适合销售业绩和增长率组合分析。
场景痛点
做经营分析时,一张图上想同时看"月
用Python matplotlib画饼图,解决中文乱码、百分比标签显示、分离突出某一项、环形图等常见需求,附完整可运行代码。
场景痛点
分析预算构成、客户来源、产品销售占比时,饼图是
用Python pyecharts生成交互式折线图HTML,支持鼠标悬停、数据缩放、图例切换,输出单文件网页直接浏览器打开,适合做数据大屏和周报。
场景痛点
matplotlib画的折线图是死的静态
用 Pillow 批量在图片固定位置加中文文字,支持自定义字体、字号、颜色、描边、居左居右居上居下,适合给商品图、活动图、公告图批量打标题。
场景痛点
活动方图每张都要加标题
用 Pillow 打开本地图片,读取宽、高、分辨率、文件大小与颜色模式,支持 JPG/PNG/WebP 批量输出 CSV 清单,告别逐张右键属性查看。
场景痛点
设计稿、商品图、截图堆在一个文件
网站安全应急服务专注网站被黑、挂马、被篡改、恶意跳转等突发安全事件。全天候响应、快速处置,先恢复业务再系统加固,帮助客户把损失降到最低。 聚焦机构网站被黑恢复场景,兼
网站二次开发团队擅长在既有系统上增加功能、优化流程、对接接口。保留原数据无缝升级,让老网站焕发新能力,省去重做的时间与费用。 聚焦内容管理后台优化场景,兼顾质量与时效,
Shopify独立站服务面向外贸卖家提供建站、装修、产品上架、域名支付配置与性能优化一站式方案。快速搭建规范店铺,助力海外销售起步。 对多语言官网建设等需求,提供标准化流程
专业弱电施工团队提供墙内网线更换、光纤入户、综合布线、水晶头与面板安装等全套服务。师傅经验丰富、工具专业,先沟通方案再报价施工。 对家庭住宅网线升级等需求,提供标准
WordPress专项服务提供建站、主题定制、插件配置、性能优化与安全维护全套支持,覆盖全域WordPress用户。从模板选型到上线运营全程陪同,遇到问题远程即可解决。 其中个人博客
品牌百科服务专业代办百度百科、360百科词条创建与修改,帮助企业与个人建立权威线上名片。资料整理、审核跟进全程代劳。 对个人IP百科等需求,提供标准化流程与一对一服务,从沟
网线升级改造服务专注解决千兆宽带跑不满、网速卡顿、信号不稳定等问题,上门检测后提供换线方案。五类升六类、七类网线,一次施工多年受益。 聚焦机房工程综合布线场景,兼顾质
本服务深耕PbootCMS多年,提供从环境部署、模板搭建、标签开发到功能二开、数据迁移、安全加固的一站式解决方案。PbootCMS永久开源免费、支持多语言与静态页面生成,建站速度快
网络安全修复服务承接服务器被入侵、webshell后门清除、恶意代码清理、站点异常篡改等应急处置。极速响应、人工深度排查,修复后提供基础防护建议,帮助网站恢复稳定运行。 对
网络改造施工团队提供老房墙内网线更换、千兆宽带网线升级、光纤入户、弱电箱整理与全屋布线服务。针对装修遗留的五类网线、预埋劣质网线等问题提供专业更换方案,帮客户把网
网站托管服务包含内容更新、栏目管理、页面维护、安全防护与性能巡检等全套日常运营工作。专业分工、责任到人,让企业把精力放在业务本身,网站长期保持在线稳定、内容鲜活。