K162.space

python urllib3 爬虫教程

Urllib3 是一个功能强大,条理清晰,用于HTTP客户端的Python库,许多Python的原生系统已经开始使用urllib3。
文档 https://urllib3.readthedocs.io/en/latest/
Urllib3 提供了很多python标准库里所没有的重要特性:

  • 线程安全
  • 连接池
  • 客户端SSL/TLS验证
  • 文件分部编码上传
  • 协助处理重复请求和HTTP重定位
  • 支持压缩编码
  • 支持HTTP和SOCKS代理
  • 100% 测试覆盖率

上面这段是抄的,说实话实际用来下我没感觉出和 urllib2、requests 有多大的区别,爬虫的招式都差不多,urllib3 给我的最大的感受是简洁易用,还有可能比 requests 稍微快一点。搜了一下目前也鲜有介绍 urllib3 的中文教程,索性连同爬虫知识一起分享一下吧。

0 views |

markdown 技巧分享

关于介绍 markdown 书写规范的文章太多,一搜一大把,就不赘述了。 这里分享一些不常见但可能非常有用的技巧。

渲染格式问题:全角空格与半角空格

很多 Markdown 编辑器其实会自定义一些自己的书写规范来实现一些特殊功能,如果你已经习惯了一种编辑器,再跨到另一个编辑器上的时候可能就会遇到原有格式不能正确渲染的的问题。

比如我习惯在为知笔记上用 editor.md 编辑器进行书写,书写的时候是不用考虑全角空格与半角空格的,当把文章复制到另一个编辑器(发布博客),就会遇到不能正确换行的问题,这其实就是空格键出了问题。

其实这个问题很好解决,用正则表达式对空格全部替换即可。
可以用 notepad++ 或其他支持正则表达式的编辑器。

0 views |

掉期与互换的区别

  • 英文都是 Swap,但意义不同

  • 掉期:外汇市场的一种交易手法
    指对不同期限但金额相等的同种外汇做两笔反向交易

  • 掉期交易是一种套期保值

    • 套期保值时间和金额不同;
    • 掉期则仅仅是时间,交易金额不变
  类型 合约 交易市场 交易机构
掉期 交易手法 无,在外汇市场交易 一家机构做两笔交易
互换 金融衍生工具 有专门的互换市场 两家机构之间的交易
0 views |

使用 jekyll 搭建博客

博客再度搬迁了一下,一直以为小博客搭在自己服务器上很是惬意,直至经历了各种折腾后,深深体会到了老前辈们的真知灼见:把博客托管到三方,自己做到有限度的控制,才是最省心的,既然 github 提供了这么好的平台,那就索性玩一把,顺道记录分享一下吧。

用 jekyll 搭建有什么优势?

github 的 pages 服务是免费的,网站内容相当于托管给 github;而 jekyll 的作用是生成美美哒的静态网页。
这样做的优势是:

  • 维护省心,不用担心服务器挂掉、502、备份数据库、ddos等问题
  • markdown 支持
  • git 的工作流程科学又方便
  • github pages 免费不限流量
  • 社区环境不错,学习成本也低

大致流程

  1. github 上建立托管项目(就是网站目录)
    • 建立完即可访问网站
    • 可以使用自己的域名
  2. 项目下载到本地,在本地进行编辑,写文章
    • jekyll 的作用是生成静态网页
    • 本地可以很方便的进行预览
    • 因此本地需要安装 jekyll 以及所依赖的环境
  3. 完成编辑后上传更新项目即可
    • 刷新网页即可看到更新
0 views |

读书笔记《新加坡公共政策背后的经济学》

  • 这是一本关于公共政策制定的经济学通俗读物。读这本书一边了解新加坡的公共政策,一边解读政策背后的经济学原理。

  • 读完这本书,我深刻的意识到公共政策的制定真的不容易,政策的试错代价太高,要考量各种因素,绝不仅仅是经济学原理本身。

  • 新加坡的发展现状或多或少能够透露到出苏州园区的未来方向,看完这本书,也让我对现在周围目所能及的公共政策有了更深层的思考,少点戾气,多点包容。

注:本读书笔记仅摘录自己觉得有兴趣的知识点,若想系统性了解,推荐阅读原著

第一章 政府支出和收入

  • 财政政策的三个目标
    1. 提高效率,致力于在市场失效的领域里提高效率
    2. 促进公平
    3. 提高经济增长率,尽可能对消费征税,而不是对收入征税
  • 政府支出一般包括
    1. 消费支出
    2. 投资支出
    3. 转移支付
  • 政府开支既要有效率,又不导致市场扭曲

  • 税的形式有直接税和间接税
    • 直接税,即对个人和企业的收入财富或者资本利得征税
    • 间接税,是对个人和企业的支出征税
  • 政府借债导致公共债务需要日后征收更高的税额来补上亏空
    新加坡是拥有最高储蓄率和外汇储备的国家之一
    因此能够不向外举债的情况下进行投资和资本积累

  • 政府优先满足两个领域的需要
    1. 安全与外交
    2. 社会发展
  • 边际有效税率
    需支付的税收额,占税前资本回报的百分比
    这是衡量税制竞争力的一个指标
0 views |