目前来说，我的解决办法很简单就是 ，不用 socks 代理 2333333333

因为需要 自动化下载一些国外资料，所以本地用了 shadowsocks 来代理终端的连接：

export ALL_PROXY=socks5://127.0.0.1:1086

然而 Python 当前的包没有支持 socks 代理的。于是我选择了最简单的办法，用 http 代理，而不是 socks 代理：

export ALL_PROXY=https://127.0.0.1:1087

参考资料

• Python’s requests “Missing dependencies for SOCKS support” when using SOCKS5 from Terminal

转载自：

• 下载量最高的 100 个 Laravel 扩展包推荐

• Laravel 完整开源项目大全

原型项目

• Laravel 5 Boilerplate —— 基于当前Laravel最新版本（Laravel 5.1.*）并集成Boilerplate的项目
• Laravel 5 Angular Material Starter —— 这是一个Laravel 5.1和AngularJS的原型项目
• Someline Starter —— 基于Laravel 5和Vue.js，用于快速构架RESTful API和Web应用的原型项目

CMS

• Bootstrap CMS —— Laravel 5.1驱动的功能强大的CMS
• October —— 基于Laravel 5，致力于让开发工作变得简单的CMS
• PyroCMS —— MVC架构的PHP内容管理系统，3.0以前基于CodeIgniter，目前基于Laravel 5.1
• LavaLite —— 基于Laravel 5.1 & Bootstrap 3的内容管理系统
• TypiCMS —— 基于 Laravel 5 构建的、支持多语言的内容管理系统
• Laravel and AngularJS CMS —— 基于Laravel 5.1和AngularJS的CMS
• Microweber —— 基于 Laravel 拖拽式生成 CMS 及在线商店利器
• AsgardCMS —— 基于 Laravel 构建的、支持模块化和多语言的CMS
• CoasterCMS —— 基于Laravel 5.3构建的下一代CMS
• laravelPCMS

CRM

• Flarepoint —— 基于Laravel构建的免费开源CRM平台

论坛

• Laravel.io —— Laravel开发者社区
• Flarum —— 免费的、开源的、专注于简约的论坛系统，esoTalk和FluexBB的联合继承者
• PHPHub —— 基于Laravel 4.2，积极向上的 PHP & Laravel 开发者社区

社交网站

• ThinkSNS+ —— 基于 Laravel + Vue.js 开发的全新社交系统
• Voten —— 基于 Laravel + Vue.js 实现的实时社交书签系统（Reddit）

电商

• Antvel —— 基于 Laravel 5.* 开发的开源电子商务项目

项目管理

• 92five app —— 基于 Laravel框架 & Backbone JS 构建，是一个自托管的、基于web的项目管理应用
• Scrumwala —— 基于Laravel5，项目管理应用
• Ribbbon —— 基于Laravel 5.1和Vue.js构建的开源项目管理系统

博客

• Canvas —— 基于Laravel 5.2 开发的轻量级博客系统
• Katana —— 静态博客/站点生成器（支持Markdown和GitHub Pages）
• Laravel 5 Blog —— 基于 Laravel 5 开发的博客系统
• Vuedo —— 基于 Laravel 和 Vue.js 构建的博客平台
• Wardrobe —— 专注于写作的最小化博客平台
• MyPersimmon —— 基于 Laravel 5.4 开发的博客系统

后台模板

• Laravel Angular Admin —— 基于 Laravel + Angularjs + Bootstrap + AdminLTE 实现的后台模板

其他

• Laravel.com —— Laravel官网源码
• Laravel Tricks —— Laravel小技巧&小贴士
• Invoice Ninja —— 基于Laravel构建的开源发票及时间跟踪应用
• Paperwork —— 基于Laravel 4.X的开源的笔记&归档工具
• Cachet —— 基于Laravel 5的开源的状态页系统
• StyleCI —— 由 PHP CS Fixer开发，提供PHP代码风格持续集成服务
• Podcastwala —— 基于Laravel 5，构建属于你自己的播客网站
• Deployer —— 基于Laravel 5.1的、免费的、开源的PHP应用部署工具
• RSS Monster —— 基于 Lumen 开发的 RSS 聚合器和阅读器
• Koel —— 基于 Laravel 5.1 & Vue.js 开发的酷炫音乐流媒体应用
• Attendize —— 基于 Laravel 框架开发的开源门票及活动管理应用
• Notadd —— 基于 Laravel 的下一代 PHP 开发框架（API+SPA 单页应用 ）
• Blockscloud —— 基于 Laravel + Vue 实现的 Web OS 系统
• Laravel Elixir简介及入门教程

安装教程

• 在 Windows 上快速安装 Flarum 指南
• 在Windows上快速安装配置PyroCMS

插件

微信小程序 for Laravel 5

中国电信

中国电信是世界上最大的固网运营商和宽带服务提供商，为一亿宽带用户和超过230万中国网站提供了中国互联网信息的接入服务。在中国拥有超过300骨干网节点和4000Gbps的网络带宽，70%的中文资源和和超过90万宽带用户。

中国电信在全球部署超过40个POP节点(关键的交换中心)，节点如图：

资料来源：中国电信集团公司

CN2

CN2全称为中国电信下一代承载网，英文Chinatelecom Next Carrier Network，缩写为CNCN，进一步缩写为CN2。

CN2采用全网MPLS、保证8个等级的QoS以及支持全网组播和IPv6硬件转发等代表当今IP尖端技术的网络。由600多台T级交换容量的高端路由器、194个节点组成，耗资13亿. 中国电信对它“职业生涯”的规划是“承载3G的话音和数据传输、NGN业务承载、VIP集团用户的联网以及流媒体业务”，老的ChinaNet———即163、169网络将主要被用作ADSL、拨号等INTERNET接入和浏览业务。

CN2网络特征——骨干网简洁化

参数

user_data_dir = "/Users/kelu/Library/Application Support/Google/Chrome"
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument(f"--user-data-dir={user_data_dir}")  # 加载用户数据
chrome_options.add_argument("--profile-directory=Profile 1")  # 替换为实际使用的配置文件夹名
chrome_options.add_argument("--disable-features=SameSiteByDefaultCookies,CookiesWithoutSameSiteMustBeSecure")
chrome_options.add_argument("--disable-blink-features=AutomationControlled")
chrome_options.add_experimental_option("excludeSwitches", ["enable-automation"])
chrome_options.add_experimental_option("useAutomationExtension", False)

chrome_options.add_argument("--no-sandbox")
chrome_options.add_argument("--disable-dev-shm-usage")

# 设置浏览器语言为日语
chrome_options.add_argument("--lang=ja")  # 强制 UI 语言为日语
chrome_options.add_experimental_option(
    "prefs", {"intl.accept_languages": "ja,ja-JP"}  # 设置 Accept-Language 请求头
)

# 启动浏览器
driver = webdriver.Chrome(options=chrome_options)

cookie

mport pickle
import selenium.webdriver 

driver = selenium.webdriver.Chrome()
driver.get("http://www.google.com")
pickle.dump( driver.get_cookies() , open("cookies.pkl","wb"))

import pickle
import selenium.webdriver 

driver = selenium.webdriver.Chrome()
driver.get("http://www.google.com")
cookies = pickle.load(open("cookies.pkl", "rb"))
for cookie in cookies:
    driver.add_cookie(cookie)

注意使用时要先访问目标的网址，再加载 cookie，否则可能会出现下面两个错误：

• failed to set the ‘cookie’ property on ‘document’ access is denied for this document
• Cookies are disabled inside ‘data:’ URLs

请求头

以下转载自selenium 怎样设置请求头？

目录

• 一：selenium设置phantomjs请求头：
• 二：selenium设置chrome请求头：
• 三：selenium设置chrome–cookie：
• 四：selenium设置phantomjs-图片不加载：

一：selenium设置phantomjs请求头：

# !/usr/bin/python
# -*- coding: utf-8 -*-

from selenium import webdriver
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities

dcap = dict(DesiredCapabilities.PHANTOMJS)
dcap["phantomjs.page.settings.userAgent"] = (
"Mozilla/5.0 (Linux; Android 5.1.1; Nexus 6 Build/LYZ28E) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/48.0.2564.23 Mobile Safari/537.36"
)
driver = webdriver.PhantomJS(desired_capabilities=dcap)
driver.get("https://httpbin.org/get?show_env=1")
driver.get_screenshot_as_file('01.png')
driver.quit()

二：selenium设置chrome请求头：

来源selenium设置Chrome - TTyb - 博客园 感恩原作者

如代码

# !/usr/bin/python
# -*- coding: utf-8 -*-

from selenium import webdriver
# 进入浏览器设置
options = webdriver.ChromeOptions()
# 设置中文
options.add_argument('lang=zh_CN.UTF-8')
# 更换头部
options.add_argument('user-agent="Mozilla/5.0 (iPod; U; CPU iPhone OS 2_1 like Mac OS X; ja-jp) AppleWebKit/525.18.1 (KHTML, like Gecko) Version/3.1.1 Mobile/5F137 Safari/525.20"')
browser = webdriver.Chrome(chrome_options=options)
url = "https://httpbin.org/get?show_env=1"
browser.get(url)
browser.quit()

三：selenium设置chrome–cookie：

cookie用于模拟登陆

# !/usr/bin/python
# -*- coding: utf-8 -*-

from selenium import webdriver
browser = webdriver.Chrome()

url = "https://www.baidu.com/"
browser.get(url)
# 通过js新打开一个窗口
newwindow='window.open("https://www.baidu.com");'
# 删除原来的cookie
browser.delete_all_cookies()
# 携带cookie打开
browser.add_cookie({'name':'ABC','value':'DEF'})
# 通过js新打开一个窗口
browser.execute_script(newwindow)
input("查看效果")
browser.quit()

四：selenium设置phantomjs-图片不加载：

from selenium import webdriver

options = webdriver.ChromeOptions()
prefs = {
    'profile.default_content_setting_values': {
        'images': 2
    }
}
options.add_experimental_option('prefs', prefs)
browser = webdriver.Chrome(chrome_options=options)

# browser = webdriver.Chrome()
url = "http://image.baidu.com/"
browser.get(url)
input("是否有图")
browser.quit()

参考资料

• How to save and load cookies using python selenium webdriver

• selenium 怎样设置请求头？

字典是一个非常常用的数据类型，这一篇记录一些常用用法。

遍历

dict={"a":"apple","b":"banana","o":"orange"} 

for i in dict: 
  print "dict[%s]=" % i,dict[i] 

for (k,v) in  dict.items(): 
  print "dict[%s]=" % k,v 

for k,v in dict.iteritems(): 
  print "dict[%s]=" % k,v 

for k,v in zip(dict.iterkeys(),dict.itervalues()): 
  print "dict[%s]=" % k,v

key 是否存在

dict.has_key()
key in dict.keys()

for 循环按顺序输出

字典的本质是hash表，一种散列表结构，数据输入后按特征已经被散列了，注定它就是无序的。

所以预先添加的内容输出的顺序是不可预期的。有两种解决方法

1. 不使用dict，使用元组，元组是记录输入顺序的、有序的，也能方便地转换成dict。
2. 另用一个列表记录下输入时的顺序。

参考资料

• Python selenium —— 父子、兄弟、相邻节点定位方式详解

• xpath选择当前结点的子节点

先介绍一下 XPath。XPath 是一门在 XML 文档中查找信息的语言。可用来在 XML 文档中对元素和属性进行遍历。

在 selenium 中定位元素，使用 XPath 能更好的抽象代码（比如讲 XPath 表达式提取成一个单独的配置）。所以我在日常使用中尽量使用 XPath。

HTML与XML

html 是标记语言，XML 是标记语言的元语言。

HTML和XML的最大区别在于：HTML是一个定型的标记语言，它用固有的标记来描述，显示网页内容。比如<H1>表示首行标题，有固定的尺寸。相对的，XML则没有固定的标记，XML不能描述网页具体的外观，内容，它只是描述内容的数据形式和结构。

Xpath定位方法

本小节节选自 Xpath定位方法深入探讨及元素定位失败常见情况

绝对定位

driver.findElement(By.xpath("/html/body/div/form/input"))。

特点：这个路径是从网页起始标签开始一直到要定位的元素的路径，如果要定位的元素在页面最下面，则这个Xpath路径会非常长。如果在要定位的元素与页面开始之间的元素有任何增减，元素定位就会失败。

相对定位

driver. findElement(By.xpath ("//input") )

返回查找到的第一个符合条件的元素。

特点：相对路径一般只会包含与被定位元素最近的几层元素有关，相对路径写的好的话，页面变动影响最小，而且定位准确。

索引定位

使用索引定位元素，索引的初始值为1。

driver. findElement(By.xpath ("//input[2]") )

返回查找到的第二个符合条件的元素。

属性值定位

driver. findElement(By.xpath ("//input[@id='username']"));
driver. findElement(By.xpath ("//img[@alt='flowr']"));

特点：属性定位也是比较常用的方法，如果元素中没有常见的id,name,class等直接有方法可调用的属性，也可以查找元素中是否有其他能唯一标识元素的属性，如果有，就可以用此方法定位。

逻辑运算符 and与or

driver.findElement(By.xpath("//input[@id='username' and @name='userID']"));

特点：多个属性值联合定位，更能准确定位到元素。并且如果多个相同标签的元素，如果其包含的属性值有不同的，也可以用这个方法区分开来。

属性名定位

driver. findElement(By.xpath ("//input[@button]"))

特点：此方法可以区分同一种标签，含有不同属性名的元素。定位相对简单一些儿，但也同样存在着无法区分同种标签含有同种属性名的多个元素，这个时候要配合索引定位才行。

属性值匹配

（a）starts-with()

driver. findElement(By.xpath ("//input[stars-with(@id,'user')]"))

（b）ends-with()

driver. findElement(By.xpath ("//input[ends-with(@id,'name')]"))

（c）contains()

driver. findElement(By.xpath ("//input[contains(@id,"ernam")]"))

特点：此方法更加灵活，可以定位属性值不太规律，或是部分变动，中间有空格的情况。注：如果属性值中间包含空格，Webdriver定位的时候容易出错，时而能定位到时而定位不到，所以应该避免用含用空格的属性值定位。可以采用此方法，进行部分属性值定位。

任意属性值匹配

driver. findElement(By.xpath ("//input[@*='username']"))

特点：此方法相当于模糊查询，只要欲定位的标签，如input中任何属性值等于‘username’,就能匹配成功。缺点，可能会匹配含有这个属性值的其他元素，所以我们在定位的时候要查看一下这个元素值在页面中是否唯一。

XPath 轴匹配

选自 Python selenium —— 父子、兄弟、相邻节点定位方式详解

普通方式

# -*- coding: utf-8 -*-
from selenium import webdriver

driver = webdriver.Chrome()
driver.get('http://www.baidu.com')

# 1.xpath 父子关系
print driver.find_element_by_xpath("//div[@id='B']/div").text

# 1.xpath 父子关系
# `.`代表当前节点; '..'代表父节点
print driver.find_element_by_xpath("//div[@id='C']/../..").text

# 1.xpath,通过父节点获取其哥哥节点
print driver.find_element_by_xpath("//div[@id='D']/../div[1]").text

# 1.xpath，通过父节点获取其弟弟节点
print driver.find_element_by_xpath("//div[@id='D']/../div[3]").text

XPath 轴

# 1.xpath轴 child 父子关系
print driver.find_element_by_xpath("//div[@id='B']/child::div").text # child是xpath默认的轴，可以忽略不写

# 1.xpath轴 parent 父子关系
print driver.find_element_by_xpath("//div[@id='C']/parent::*/parent::div").text

# 1.xpath轴 preceding-sibling 哥哥节点
print driver.find_element_by_xpath("//div[@id='D']/preceding-sibling::div[1]").text

# 1.xpath轴 following-sibling 弟弟节点
print driver.find_element_by_xpath("//div[@id='D']/following-sibling::div[1]").text

# 1.xpath轴 following 弟弟节点
print driver.find_element_by_xpath("//div[@id='D']/following::*").text

xpath常用函数

1. child 选取当前节点的所有子节点
2. parent 选取当前节点的父节点
3. descendant 选取当前节点的所有后代节点
4. ancestor 选取当前节点的所有先辈节点
5. descendant-or-self 选取当前节点的所有后代节点及当前节点本身
6. ancestor-or-self 选取当前节点所有先辈节点及当前节点本身
7. preceding-sibling 选取当前节点之前的所有同级节点
8. following-sibling 选取当前节点之后的所有同级节点
9. preceding 选取当前节点的开始标签之前的所有节点
10. following 选去当前节点的开始标签之后的所有节点
11. self 选取当前节点
12. attribute 选取当前节点的所有属性
13. namespace 选取当前节点的所有命名空间节点

路径表达式

谓语（Predicates）

谓语用来查找某个特定的节点或者包含某个指定的值的节点。

通配符

XPath 通配符可用来选取未知的 XML 元素。

例子：

多个表达式

通过在路径表达式中使用“|”运算符，您可以选取若干个路径 例子：

关键字

例子：

参考资料

• Python selenium —— 父子、兄弟、相邻节点定位方式详解
• xpath选择当前结点的子节点
• Xpath定位方法深入探讨及元素定位失败常见情况
• Python selenium —— 模拟鼠标键盘操作(ActionChains)
• Python selenium —— 一定要会用selenium的等待，三种等待方式解读
• 在Selenium Webdriver中使用XPath Contains、Sibling函数定位
• Xpath syntax for “and not contains”

结论

先说结论，Python中的一切都是对象，它们要么是类的实例，要么是元类的实例 .

在图中可以看出对象分两种:

1. classes(类)
2. instances(实例)

虚线表示一个对象的type(类型),实线表示一个对象的base(基类/父类).

首先我们要明确，类创造了实例,而不是继承关系。那么问题来了,是什么创造了类呢? Python 引进了metaclasses,<type 'type'>就是元类,它可以创建类.

使用

可以参考一下这些链接：

• Python 为什么要继承 object 类？

由于历史原因，2.x 里 object 是新基类，需要显示定义。在3.x里，object已经默认做为所有东西的基类了。

class A:  # 旧式类
    pass

class B(object):  # 新式类
    pass

两个方法：

• issubclass(A,B) (测试超类-子类关系) ：A 是 B 的子类，B 是 A 的超类

• isinstance(A,B) (测试类型-实例关系) ，A 是 B 的实例

  class Foo(object):
      pass
  	
  class Bar(Foo):
      pass
  	
  print issubclass(Foo,object)
  print issubclass(Bar,object)
  print isinstance(Bar(),Foo)
  

原因

那么问题来了，为什么要加入新式类呢?

新式类有很多优势:

• 基于内建类型构建新的用户类型
• 支持property和描述符特性等.

• 定义了一些特殊方法,子类可以对这些方法进行覆盖以满足自身的特殊需求.

    `__new__()`
    `__init__()`
    `__delattr__()`
    `__getattribute__()`
    `__setattr__()`
    `__hash__()`
    `__repr__()`
    `__str__()`
  

另外新式类和旧式类还有一个区别就是在多继承的时候，查找要调用的方法。新式类是广度优先的查找算法。旧式类的查找方法是深度优先的.

参考资料

• Python 类型和对象 - 啄木鸟社区
• 为什么要有type和object?
• Python 新式类介绍
• Python:类和对象object