python的网络变成比c语言简单许多, 封装许多底层的实现细节, 方便程序员使用的同时, 也使程序员比较难了解一些底层的东西, 我觉得学网络编程还是用c语言更好一点.

写这篇博文, 也希望回顾并整理一下以前学过的c语言和linux下一些东西, 会将一些Linux网络编程的函数和Python网络变成函数做一个简单的对照, 方便记忆

#1. Socket套接字的概念

Socket(翻译为套接字, 我觉得很挫),是操作系统内核中的一个数据结构，它是网络中的节点进行相互通信的门户。它是网络进程的ID。网络通信，归根到底还是进程间的通信（不同计算机上的进程间通信, 又称进程间通信, IP协议进行的主要是端到端通信）。在网络中，每一个节点（计算机或路由）都有一个网络地址，也就是IP地址。两个进程通信时，首先要确定各自所在的网络节点的网络地址。但是，网络地址只能确定进程所在的计算机，而一台计算机上很可能同时运行着多个进程，所以仅凭网络地址还不能确定到底是和网络中的哪一个进程进行通信，因此套接口中还需要包括其他的信息，也就是端口号（PORT）。在一台计算机中，一个端口号一次只能分配给一个进程，也就是说，在一台计算机中，端口号和进程之间是一一对应关系。
所以，使用端口号和网络地址的组合可以唯一的确定整个网络中的一个网络进程.

virtualenv is a tool to create isolated Python environments.

virtualenv通过创建独立Python开发环境的工具, 来解决依赖、版本以及间接权限
问题. 比如一个项目依赖Django1.3 而当前全局开发环境为Django1.7, 版本跨度过大, 导致不兼容使项目无法正在运行, 使用virtualenv可以解决这些问题.

virtualenv创建一个拥有自己安装目录的环境, 这个环境不与其他虚拟环境共享库, 能够方便的管理python版本和管理python库

copy: NSString/NSMutableArray
weak:代理/UI控件
strong: 其他OC对象

#1. Segue

storyboard上每根界面跳转的线, 都是UIStoryboardSegue对象

每个Segue对象都有三个属性:

• 唯一标识(@property (nonatomic, readonly) NSString *identifier;),
• 来源控制器(@property (nonatomic, readonly) id sourceViewController;)
• 目标控制器(@property (nonatomic, readonly) id destinationViewController;)

##1.1. Segue的类型

• 自动型: 点击某控件后, 自动执行Segue,自动完成界面跳转(由控制拖出, 用于不需要做任何判断直接跳转界面的情景)
• 手动型: 需要手写代码才能完成界面的跳转(按住control, 由来源控制器(不是按钮)拖线到目标控制器, 需要设置标识)

#1. 豆瓣抓站流程

1. 分析url特征(菜鸟阶段)
2. 对需要抓取的数据设计正则表达式
3. 处理HTML中一些特征字符,换行符等

注意异常的处理和字符编码的处理

#2. 实现的功能

简单的实现了抓取豆瓣电影Top100的电影名称

#3. 后期工作展望

• 抓取更多的有用数据(如:准确抓取导演, 抓取一个电影评论)
• 使用多线程爬虫
• 学习第三方的爬虫框架(Scrapy)
• 深入理解HTML编码和文本处理

#1. 初探urllib2模块

• 浏览器相当于客户端, 向服务器发出资源请求(node.js充当的是服务器)
• http是基于请求和应答机制, 客户端发出请求, 服务器应答请求

1
2
3
4
5
6
7
8
9
10

import urllib2
response = urllib2.urlopen("http://www.baidu.com/") #使用urlopen进行url请求, 返回应答对象response
html = response.read()  #去读取应答对象的内容
print html
import urllib2
req = urllib2.Request("ftp://www.baidu.com/") #使用url创建一个Request对象
response = urllib2.urlopen(req)
html = response.read()
print html

#1. 创建控制器的方式

1. 控制器首先应该设置自身的class
2. 设置所监控的View(控制器的view是延迟加载的, 用到时加载)
3. 控制器的view加载完毕后会调用viewDidLoad方法

##1.1. 直接创建

直接通过alloc 和 init 创建控制器

1
2
3
4
5
6
7
8
9
10
11
12

- (BOOL)application:(UIApplication *)application didFinishLaunchingWithOptions:(NSDictionary *)launchOptions {
    self.window = [[UIWindow alloc] initWithFrame:[[UIScreen mainScreen] bounds]]; //创建一个窗口
    self.window.backgroundColor = [UIColor whiteColor]; //设置窗口的背景色
    
    ViewController *one = [[ViewController alloc] init];  //此处ViewController为自定义的集成UIViewControl的类, 创建控制器
    one.view.backgroundColor = [UIColor blueColor]; //设置view的背景色
    self.window.rootViewController = one; //设置窗口的根控制器
    
    [self.window makeKeyAndVisible]; //窗口设置为主窗口并显示
    return YES;
}

同步

分布式系统中, 有一个重要的问题: 如何取得时间上的一致

• 单CPU系统中, 所有进程使用同一个始终, 内部保持时钟不变
• 多CPu系统中, 每个CPU有自己的时钟,导致时钟偏移.

##1.1. 时钟同步算法

基础模型: 每台机器有一个每秒产生H次中断的计时器, 当计时器中断时, 终端处理程序将软件时钟加一, 每件时钟记录从过去某个约定时间开始的计数.

• Cristian算法

适用于只有一台机器有时间服务器(time server), 其他所有机器都要与这台机器同步.

主要问题:

1. 时间不可倒退(发送请求着时钟快于时间服务器, 接受时钟会导致严重错误)
2. 时间服务器英法到达发送者有不确定的延迟.

分布式系统:若干独立计算机的集合, 这些计算机对于用户来说就像单个系统

分布式系统构造带来的挑战:

• 异构性(如何处理不同操作系统, 不同硬件, 不能编程欲然带来的差异)
• 开放性(如果形成统一的接口)
• 安全性(如果处理隐私, 信息安全问题)
• 可扩展性(如果在用户激增情况下, 保持系统性能)
• 故障处理(如果大型网络中, 检测故障, 隐藏故障和处理故障)
• 并发(如果处理数据共享的一致性问题)
• 透明性(如果使系统的某些特性对用户不可见)

分布式系统特性:

• 计算机之间的差别和计算机之间的通信方式的差别对用户是透明的
• 用户和应用程序能够以统一和一致的方式与分布式系统通信

你站在桥上看风景，
看风景的人在楼上看你。 —<断章>

或许我眼中的Chrome的使用会让你眼前一亮呢? 会让你更优雅的使用Chrome呢? 尝试一下总会有一些意外的收获? 那么我们开始吧

文章主要分成三个部分:

• 常用的Chrome快捷键(主要针对Mac, 优雅的使用Mac不应该更多的使用键盘吗?)
• 一些我在用的搜索技巧(强大的Chrome的搜索能力不是简单的搜索技巧能涵盖的, 学会更多的使用技巧, 或许会让你事半功倍)
• 我眼中的优雅的Chrome插件(他们的优雅不仅仅的在于易用性, 对我来说已经产生了一种用户粘性, 简直欲罢不能)

Python,一门简洁,全能的胶水语言, 牺牲性能换来的多面手的特性, 最近写Python比较多, 通过这篇博文我试图形成自己的编码规范.为以后的代码重构和阅读埋下铺垫. 主要参考的是google编码规范, 毕竟大公司

大部分.py文件不必以#!作为文件的开始. 程序的main文件以 #!/usr/bin/python2或者 #!/usr/bin/python3开始.(#!先用于帮助内核找到Python解释器, 但是在导入模块时, 将会被忽略. 因此只有被直接执行的文件中才有必要加入#!.)

##1.1. 分号

不要在行尾加分号, 也不要用分号将两条命令放在同一行

可能之前用C/C++比较多, 刚开始写Python的时候, 总是会在行尾加上分号,而且不会报错, 不过最近python写的比较多,所以也改过来了