0 持久化(pipelines.py)使用步骤 1 爬虫中间件和下载中间件 1.1 爬虫中间件(一般不用) 1.2 下载中间件（代理，加请求头，加cookie） 1.2.1 加请求头(加到请求对象中) 1.2.2 加cookie 1.2.3 加代理 2 scrapy集成selenium 3 源码去重…

Android Support Library 从 19.1 版本开始引入了一个新的注解库，其中包含了很多的元注解，使用它们修饰我们的代码， 可以让我们提高程序的开发效率，让我们更早的发现问题。以及对代码施以规范，让代码更加有可读性。这篇…

动态内存分配 回想C语言中，动态内存是怎么分配的？通过C库里面的malloc free去进行动态内存分配。 C通过new关键字进行动态内存申请，动态内存申请是基于类型进行的。 delete 关键字用于内存释放。 //变量申请 type* pointer new type; dele…

1.根据业务需求构建总线矩阵--明确需求 构建总线矩阵的目的：总线矩阵也是BI核心之一，基本上只要详细了解企业业务战略线就能得出总线矩阵，它对应着企业每一个业务单元，提取业务单元中的一致性维度和事实量值组 组合成企业总线矩阵…

我们大多数人更喜欢以 PDF 格式共享和查看文件，因为它更专业、更便携。但是，通常情况下您被拒绝访问除查看之外的内容编辑、复制或评论。如果您希望更好地控制您的 PDF 或更灵活地编辑它，请弄清楚为什么您的 PDF 是只读的，然后使用…

灾备技术 灾备包含两个概念：容灾、备份 备份是为了保证数据的完整性，数据不丢失。全量备份、增量备份，备份数据还原。 容灾是为了保证业务的连续性，尽可能不断业务。 快照：保存的不是底层块数据，保存的是逻…

目前已有文章 11 篇 本专栏记录的是经常使用的CSS示例与技巧，主要包含CSS布局，CSS特效，CSS花边信息三部分内容。其中CSS布局主要是列出一些常用的CSS布局信息点，CSS特效主要是一些动画示例，CSS花边是描述了一些CSS相关…

BDD 与 pytest-bdd BDD 即 Behavior-driven development，行为驱动开发。BDD行为驱动是一种敏捷开发模式, 重点在于消除开发/测试对需求了解的歧义及用户场景的验证。 pytest-bdd 是一个BDD测试框架，类似于behave, cucumber。它可以统一单元测试和功能测…