大家想到函数式，估计第一时间想起的是数据，其实Python也有函数。
在数学中函数表示的未知量x通过一种运算f映射到f(x)的一种关系，即{x --->f--->f(x)}，但是在计算机编程语言中函数仅是为实现某一具体功能的代码模块的统称。
函数是Python内建支持的一种封装，我们通过把大段代码拆成函数，通过一层一层的函数调用，就可以把复杂任务分解成简单的任务，这种分解可以称之为面向过程的程序设计。函数就是面向过程的程序设计的基本单元。
1. 分组/group
数据处理中一个常见的操作，是将列表中的元素，依次每 k 个分作一组。
顺便如果某个 k 比较常用（比如 2），还可以用 partial 封装一下
2. 扁平版本的 map
稍微接触过函数式应该都知道 flat_map，可 Python 标准库却没有提供。下面是我在 stackoverflow 上找到的实现，其实很简单
它和 map 的差别在于是不是扁平(flat) 的（废话。。），举个例子
3. 上述函数的应用举例
在做爬虫工作时，有时会遇到这样的 table 元素：
对这种 html 元素，我一般会直接把它转换成 list，结果如下：
为了方便索引，现在我需要把上面的数据转换成下面这个样子的 dict
如果是平常，大概需要写循环了。不过如果用刚刚说到的几个函数的话，会变得异常简单
相关文章内容简介
1 用Python函数式编程设计爬虫
大家想到函数式，估计第一时间想起的是数据，其实Python也有函数。在数学中函数表示的未知量x通过一种运算f映射到f(x)的一种关系，即{x --->f--->f(x)}，但是在计算机编程语言中函数仅是为实现某一具体功能的代码模块的统称。函数是Python内建支持的一种封装，我们通过把大段代码拆成函数，通过一层一层的函数调用，就可以把复杂任务分解成简单的任务，这种分解可以称之为面向过程的程序设计。函数就是面向过程的程序设计的基本单元。1. 分组/group数据处理中一个常见的操作，是将列表中的元素，依次每 k 个分作一组。 顺便如果某个 k 比较常用（比如 2），还可以用 partial 封装一下 2. 扁平版本的 map稍微接触过函数式应该都知道 flat_map，可 Python 标准库却没有提供。下面是我在 stackoverflo [阅读全文]
推荐阅读
23
2019-02
用Python函数式编程设计爬虫
大家想到函数式，估计第一时间想起的是数据，其实Python也有函数。在数学中函数表示的未知量x通过一种运算f映射到f(x)的一种关系，即{x --->f--->f(x)}，但是在计算机编程语言中函数仅是为实现
12
2019-04
代理IP如何保护你的iP安全？
代理IP提供商将了解你是谁你何时获得一个IP.这是另一次的对话 - 虽然有付款程序，例如加密货币比特币不是像你可能想的那样匿名。但实际上，虽然他们可以理解你可能是谁，但IP代理公司在
21
2019-02
爬虫框架：使用Pyspider爬虫框架有什么作用
爬虫框架有很多种，不同的框架具体作用不同，比如Pyspider，这是一个python的爬虫框架，使用也简单，优势多。下面就跟小编去了解下关于Pyspider爬虫框架。
13
2018-09
使用代理服务器的四大好处你了解吗？
代理ip通俗讲就是改变你本机ip替换成另一个ip在你程序上使用，方便快捷而且还不用担心ip被网站封掉，因为一般的代理ip厂商都会针对爬虫做出策略。
20
2019-02
Python爬虫之GET请求
浏览器主要是为用户向服务器发起请求，并获取到信息。如果爬虫想要模仿浏览器获取信息的过程，应该怎么实现呢？需要利用哪些工具？
13
2018-09
代理服务器是什么意思？怎么设置？
代理有很多种解释，而我们常常提到的代理，从计算机专业角度来说就是指代理服务器相关，针对这些问题，下面就让黑洞代理小编来告诉你，代理服务器是什么意思？怎么 设置？
热门文章
在线客服
QQ咨询
黑洞售前：客户经理：讨论Q群：
上班时间
