大家想到函数式，估计第一时间想起的是数据，其实Python也有函数。
在数学中函数表示的未知量x通过一种运算f映射到f(x)的一种关系，即{x --->f--->f(x)}，但是在计算机编程语言中函数仅是为实现某一具体功能的代码模块的统称。
函数是Python内建支持的一种封装，我们通过把大段代码拆成函数，通过一层一层的函数调用，就可以把复杂任务分解成简单的任务，这种分解可以称之为面向过程的程序设计。函数就是面向过程的程序设计的基本单元。
1. 分组/group
数据处理中一个常见的操作，是将列表中的元素，依次每 k 个分作一组。
顺便如果某个 k 比较常用（比如 2），还可以用 partial 封装一下
2. 扁平版本的 map
稍微接触过函数式应该都知道 flat_map，可 Python 标准库却没有提供。下面是我在 stackoverflow 上找到的实现，其实很简单
它和 map 的差别在于是不是扁平(flat) 的（废话。。），举个例子
3. 上述函数的应用举例
在做爬虫工作时，有时会遇到这样的 table 元素：
对这种 html 元素，我一般会直接把它转换成 list，结果如下：
为了方便索引，现在我需要把上面的数据转换成下面这个样子的 dict
如果是平常，大概需要写循环了。不过如果用刚刚说到的几个函数的话，会变得异常简单
相关文章内容简介
1 用Python函数式编程设计爬虫
大家想到函数式，估计第一时间想起的是数据，其实Python也有函数。在数学中函数表示的未知量x通过一种运算f映射到f(x)的一种关系，即{x --->f--->f(x)}，但是在计算机编程语言中函数仅是为实现某一具体功能的代码模块的统称。函数是Python内建支持的一种封装，我们通过把大段代码拆成函数，通过一层一层的函数调用，就可以把复杂任务分解成简单的任务，这种分解可以称之为面向过程的程序设计。函数就是面向过程的程序设计的基本单元。1. 分组/group数据处理中一个常见的操作，是将列表中的元素，依次每 k 个分作一组。 顺便如果某个 k 比较常用（比如 2），还可以用 partial 封装一下 2. 扁平版本的 map稍微接触过函数式应该都知道 flat_map，可 Python 标准库却没有提供。下面是我在 stackoverflo [阅读全文]
推荐阅读
13
2018-09
使用代理服务器的四大好处你了解吗？
代理ip通俗讲就是改变你本机ip替换成另一个ip在你程序上使用，方便快捷而且还不用担心ip被网站封掉，因为一般的代理ip厂商都会针对爬虫做出策略。
28
2019-05
为什么你的代理IP软件质量不高
我们都知道ip代理的本质就是帮助人们与那些没有办法与某个网站直接取得联系的，因此会有人提出质疑，除了这个办法，也是可以用别的办法来取得联系的，为什么要选择ip代理呢
27
2019-05
爬虫IP代理知识
代理IP，作为现代网络兴起的一种上网方式，成了很多人的日常上网习惯。特别是一些爬虫们，这种代理方式更是必须的，那么什么是IP代理呢？简言之就是换一个身份上网，而这个身份就是IP。
10
2019-05
ip代理工具选最专业的软件
听说有ip代理工具，可以高速换IP，很多人都在用黑洞HTTP，这是一个很专业的转换IP的软件。在众多的IP代理中已经让自己脱颖而出。换IP速度是任何浏览器不可看到，这样就能够提高网页的运送
29
2018-12
代理IP有什么用？代理IP可以分哪几类？
代理iP的作用愈来愈大，有用于做网络爬虫的，有用于做大批量申请注册的，也有用于网络投票的等等，还有许多用于掩藏自个真实的iP，做某些不可描述的事情，也有许多朋友问，运用代理iP
13
2018-09
网络基础篇：IP地址和子网掩码的那些事儿
子网掩码是每个网络工程师必须要掌握的基础知识，只有掌握它，才能够真正理解TCP/IP协议的设置。下边我们一起来复习复习。网络基础篇：IP地址和子网掩码的那些事儿！
热门文章
在线客服
QQ咨询
黑洞售前：客户经理：讨论Q群：
上班时间
