python数据处理中内存优化的一些tricks
1、读入数据时，pandas默认int类型为int64，未采用最省类型方式读取，可通过以下方式优化内存 1）数值型能用更低内存类型保存就转换为更低内存类型 2) 将object类型转换为category类型 category 类型在底层使用整型数值来表示该列的值,而不使 ...
原文：近期对FTP及Excel数据处理的一些摸索
一个多月没写随笔了，主要是发的东西，自己感觉也很垃圾，说又说回来，谁不是从垃圾变强的，所以不比比，还得努力。come on Python学习也有段时间了，近期为了解决同事的一个难题，所以我们决定联系Python的同时，帮他解决这个难题。他的难题简单概括来说，每次他需要登录某单位的FTP服务器，下载好几个项目一个月的数据，然后找到其中地源热泵数据，全部复制到本地，然后打开每个项目的文件，一行一行的复 ...
2017-12-24 12:31 2 914 推荐指数：
相关推荐
Pandas 数据处理 | Datetime 在 Pandas 中的一些用法！
Datatime 是 Python 中一种时间数据类型，对于不同时间格式之间的转换是比较方便的，而在 Pandas 中也同样支持 DataTime 数据机制，可以借助它实现许多有用的功能，例如 1，函数to_datetime() 将数据列表中的 Series 列转化为 datetime 类型 ...
封装的一些常见的JS DOM操作和数据处理的函数.
//用 class 获取元素 function getElementsByClass(className,context) { context = context || document ...
大数据处理的一些总结和应用（有关舆情监控）
说到大数据处理可能大家都不会陌生，这是近年来非常火热的话题，各行各业都想借助大数据为自己助力，有了这个工具，就好像在飞机上看农田一般清晰，一目了然，也也就是业内人士常说的大数据提供了一个------上帝视角 大数据的概念： 1、指的是所涉及的资料量规模巨大到无法通过目前主流 ...
Excel处理数据用到的一些公式和VBA脚本
最近工作中用到EXCEL统计处理一些数据，正好之前有自学了一段时间的EXCEL，这次正好用上。为了加深印象，以后方便翻阅，就记录下来。这篇会不断补充。 IF 多条件判断返回值 IF(logical_test, [value_if_true], [value_if_false ...
python实现excel数据处理
python xlrd读取excel(表格)详解 安装： pip install xlrd 官网地址: https://xlrd.readthedocs.io/ 介绍： 为开发人员提供一个库，用于从Microsoft Excel（tm）电子表格文件中提取数据。 快速使用xlrd ...
Python之Excel表格数据处理
准备工作 Python读取Excel数据之后的数据处理 经过处理后生成的文件，数据格式如下： 使用处理后的数据 ...
近期关于缓存设计的一些思考
我们先来看看我们常说的缓存有哪些 CPU 的 L1, L2, L3 缓存 操作系统内存（相对于CPU来说也是缓存） 操作系统 page cache 高速页缓存（缓存磁盘中的数据） Redis 用作 MySQL的缓存 MySQL buffer pool 的数据页缓存 ...