马楠的博客

读书笔记：《智能时代》和《硅谷之谜》

Sat, 05 Nov 2016 16:00:00 +0000

很长时间没买纸质书了，最近对人工智能的关注开始增多，就读了吴军博士的《智能时代》和《硅谷之谜》，简单记录下感受。

《智能时代》

《智能时代》从工业革命、产业变迁的高度描述了正在到来的大数据、机器智能时代。

印象深刻的几点：

数据的重要性
《万历十五年》中的一个重要观点是，明代的中国不能实现数目字管理，整个国家的治理混乱。而智能时代正好是这种情况的反面：科技、经济、社会治理的各项活动产生数据，从数据中抽象出信息和知识。
智能时代蕴含着机械思维向大数据思维的转变
随着系统变得复杂，因果性越来越难以寻找，而数据为发现相关性提供了途径。人从利用因果性变为利用相关性，尽管相关性有时难以解释，但对解决许多问题是有效的。
智能时代对社会和产业的变革性影响。
医疗、制药、法律、新闻等行业，都会被智能时代的先进技术改变。前一段时间特斯拉放出了最新的无人驾驶效果视频，令人惊叹：轿车自动行驶至目的地后，「驾驶员」下车离去，车辆自动寻找停车位并停放好自己。不需要太大胆的预测也能想到，5到10年内，人类驾驶员的作用将会逐渐淡化。
负面影响
科技是一把双刃剑。智能时代和人类历次工业变革一样，也会给社会带来阵痛。比如，人工智能带来的自动化水平提高将取代许多人的工作，这样就业问题如何解决呢？供给侧改革后能源行业的工人还可以改行开专车，而自动驾驶成熟后，他们连这样的去处也少了一个。

反应快、运气好的人还可以努力做下个时代前2%的人，但那些失落者是否会被时代抛弃？如果真的出现大量失业，或者造成社会鸿沟加剧，社会能否消化造成的影响？科技水平的提高，也应该伴随着人文水平、道德水平的提高。这些问题，需要未雨绸缪地做准备。
解决问题的小例子
吴军博士提到了在谷歌做搜索引擎自动回答问题的工程方法，看似复杂的智能问题，分步骤用数据的方式解决，有一些启发性。如果有些智能问题难以解决，先用不那么高大上的方法做一个方案出来，也可以解决一定比例的问题，不用憋在原地寻找完备性。

《硅谷之谜》

读过《浪潮之巅》的读者对这本书的话题不会陌生，相比前者，本书在理论上做了更多的升华总结，特别是从文化和思想层面解读了硅谷的独特之处。看不到硅谷的这一层先进之处，再造硅谷的尝试也许只能是『学我者病』。

全书的逻辑结构很清晰：

硅谷有多牛->
其他人是怎么分析硅谷牛的原因的->
硅谷历史回顾->
指出硅谷的独特之处->
升华到科学思想层面，对比机械和信息时代的不同。

务虚的思考表面上离实际工作有距离，其实不然。新的思想方式、企业制度正是生产关系对生产力的适应。参照书中的理论和现实经验，IT从业者至少可以试着判断什么样的公司（团队）是靠谱的，以及如何管理团队，如何合作。

一键登录 vpn

Sat, 22 Oct 2016 16:00:00 +0000

公司的 VPN 采用了固定密码加 Google Authenticator 随机密码的两步验证方式，每次在家办公时手动输入连接 VPN，非常麻烦。参考小方同学的文章写了个一键登录 VPN 的 Alfred workflow，本文记录了具体过程。

通过脚本获得 Authenticator Token

安装oath-toolkit，用于通过命令行获得 token。

brew update
brew install oath-toolkit

创建$HOME/.otpkeys 文件，输入Token生成码，格式：

「名称」=「生成码」
例：
google=UKPPIDEALLKPYTT9

新建脚本文件 ./oath.sh ：

#!/bin/bash
#fork from http://superuser.com/questions/462478/is-there-a-google-authenticator-desktop-client , by Peter Beckman

scriptname=`basename $0`
if [ -z $1 ]
then
echo "$scriptname: Service Name Req'd"
echo ""
echo "Usage:"
echo "   otp google"
echo ""
echo "Configuration: $HOME/.otpkeys"
echo "Format: name=key"
exit
fi
otpkey=` grep ^$1 $HOME/.otpkeys | cut -d"=" -f 2 | sed "s/ //g" `
if [ -z $otpkey ]
then
echo "$scriptname: Bad Service Name"
exit
fi
token=`/usr/local/bin/oathtool --totp -b $otpkey`
echo $token
echo $token | /usr/bin/pbcopy #自动拷贝至剪贴板

打开终端，执行 [脚本名] [名称] 试一试:

 ~  cat ~/.otpkeys
google=UKPPIDEALLKPYTT9
 ~  sh ./oath.sh google
123456

如果 oath.sh 脚本输出了6位数字，说明随机 token 生成成功。

脚本连接 VPN

下载安装 Cisco AnyConnect Secure Mobility Client。

编写脚本 ./vpn.sh 用于登录 VPN：

#!/bin/bash

if [ $# -eq 1 ]
then
    command=$1
else
    command='connect'
fi

if [ $command == 'stop' ]
then
    echo 'stop vpn'
    /opt/cisco/anyconnect/bin/vpn disconnect
    exit
fi

echo 'start vpn'
username='[your ldap username]'
passwd='[your ldap password]'`sh ./oath.sh [profile_name]`

/opt/cisco/anyconnect/bin/vpn -s << EOF
connect [vpn address]
$username
$passwd
EOF

然后修改 vpn.sh 中的各项信息：

[your vpn username]
[your vpn password]
[profile_name]
[vpn address]

连接 VPN

./vpn.sh start

断开 VPN

./vpn.sh stop

至此，已经可以通过脚本一键连接、断开 VPN，不需要再输入密码。

脚本下载：https://github.com/nanma/codesnip/tree/master/scripts/cisco-vpn 。

但是程序员的懒惰是无止境的，脚本还需要打开终端敲命令。作为 Alfred 的忠实爱好者，第一反应就是做个 workflow 出来。

编写 Alfred Workflow

因为有了前面的脚本，实现 workflow 是很简单的。只需要两个部件：「Keyword」和「Run script」，如下图所示：

其中，「Keyword」获得用户输入，将连接（start）或是断开（stop）的命令发给脚本，「Run script」调用前面写好的 ./vpn.sh 脚本完成连接、断开。

Workflow 的下载地址：https://github.com/nanma/awesome-alfred-workflows/tree/master/VPN-Toggle 。

参考链接：

Any connect 命令行用法： http://www.cisco.com/c/en/us/td/docs/security/vpn_client/anyconnect/anyconnect30/administration/guide/anyconnectadmin30/ac15userguidelines.html#32168
一键连接VPN，http://fangpeishi.com/happy_vpn.html
Any connect 命令行参数： http://stackoverflow.com/questions/21533471/cisco-anyconnect-command-line-parse-profile-or-command-line-arguments

Alfred workflow开发实例

Fri, 26 Dec 2014 16:00:00 +0000

每天写时间日志时需要输入日期，输入当天的日期比较简单，输入法一般都提供快捷键，输入 rq 后，候选词中就会出现当日日期的各种格式:

如果要输入昨天、明天、后天等相近日期，我没有找到便捷的方法。想到在Mac中可以用Alfred的扩展功能（workflow）实现这个功能，就尝试编写了一个扩展，本文记录了编写扩展的过程。

思路

Alfred是一款OS X下的启动器软件，通过它可以用键盘快捷键快速启动软件，或者执行其他更为复杂的操作，比如搜索文件、查询单词、搜索网页等。Alfred还提供了Workflows功能，用户通过它可以自己开发新的功能。

本文要实现的效果是激活Alfred后，输入代表日期的快捷键然后回车，相应的日期复制到剪贴板中。效果如下：

此时粘贴剪贴板的内容为：

2014年12月26日 星期五

实现过程

在Alfred的Workflows选项卡中点击 +-Blank workflow ，输入将要新建的workflow名称，点击 create 。

此时的workflow是空的，点击右上角的 + 号开始添加控件，如下图所示：

输入控件

图中最左侧一列是 input-keyword 控件，可以为它配置相应的关键词以激活后续的功能，具体配置如下：

上图中选择了 no-argument , 如果需要从Alfred输入框传入参数，可以选择其他两项参数。

动作控件

中间一列是 action-Run Script ，它将根据传入的参数运行指定的脚本，配置如下：

图中的命令 python date.py zt , date.py 是我编写的脚本，后面具体介绍。 zt 是传给脚本的参数。

输出控件

最后一列图标是 outputs-Copy to clipboard ，它的作用是将前一项的输出拷贝到系统剪贴板中，它的配置如图：

图中 {query} 代表前一项的输出。

上面的三种图标代表了一个Workflow的三个要素：输入，动作和输出，还有一个要素『触发』本文没有涉及。输入关键词后，脚本计算得到日期，然后拷贝到剪贴板中。脚本 date.py 的实现如下：

import datetime
import sys
reload(sys)
sys.setdefaultencoding('utf-8')

week = [u'一', u'二', u'三', u'四', u'五', u'六', u'日']

def delta(x):
    return {
        'zt': -1,
        'jt': 0,
        'mt': 1,
        'ht': 2,
    }[x]

if len(sys.argv) == 2:
    query = sys.argv[1]
    today = datetime.date.today( )
    target = today + datetime.timedelta(days=delta(query))
    ISOFORMAT = '%Y年%m月%d日 星期'
    result = target.strftime(ISOFORMAT) + str(week[target.weekday()])
    print result

完成上面三个控件后，用鼠标将它们连接起来，就完成了workflow的编写。

使用时，在Alfred的输入框中输入相应的关键字，如 mt 代表 明天 ，然后回车，相应日期就复制到了剪贴板中。

如果要发布自己开发的Workflow供别人使用，在左侧的插件名称上右键，点击 export 就可以将worflow打包。

本文实现的Alfred workflow 发布主页是：https://github.com/nanma/awesome-alfred-workflows/tree/master/Aquire-Date ，欢迎使用和反馈。

总结

本文以一个复制最近几日日期的扩展为例，演示了Alfred workflow的开发过程。

蔡学镛谈源码阅读

Fri, 19 Dec 2014 16:00:00 +0000

最近在读一些开源项目代码，突然想起来蔡学镛老师在微博上发表过一些代码阅读方法的心得，就做了一番搜索，整理如下，作为参考。

如何有效阅读源代码，我的经验：1) 先阅读架构文档 2) 根据架构，将源码文件以模块（或上下层级）分类 3) 从最独立（依赖性最小）的模块代码读起 4) 阅读该模块功能文档 5) 阅读该模块源代码 6) 一边阅读一边整理「调用关系表」（很久以前我的某条微博提过）7) goto 3

2012-12-2 10:13 来自微博 weibo.com

我傻傻地读了两星期别人的源代码，然后才发现居然有设计文档。虽然部分内容过时，和代码有差异，但还是有相当高的参考价值。我于是放下源代码，改读设计文档。… 下次我跳下去读源代码前，一定要仔细搜索有无设计文档呀！

2012-6-16 10:27 来自微博 weibo.com

开老师这条微博刚好符合我过去这几条微博的内容主题：阅读源代码（紧急＋长期），制作「调用关系表」（重要＋短暂＋可以提升阅读源代码的效率）。

@李开复【不要成为紧急的奴隶，重要的事为先】某人很吃力地在锯木头，旧的没锯完，新的又送来，越堆越多，不断加班。盆友提醒他：“你的锯子钝了，所以效率甚差，磨利再锯吧！” 他说：“工作都做不完，哪有时间磨锯子？” 好心人仍不死心，问：“那你何时磨锯子呢？” 他说：“等我锯完所有木头再说。”

阅读他人的源代码就像是探访亚马逊雨林，事前多做一些准备工作，虽然花时间，但是很值得。在代码丛林中，「调用关系表」就是我的地图与 GPS。

2012-6-14 09:04 来自微博 weibo.com

阅读源代码时，将代码顺手图像化，有助于我思考与记忆。位置、色彩、形状，这些都是我将源代码图像化时会采用的手段。

2012-6-13 17:36 来自微博 weibo.com

这两天正在读一份源代码，之前读过同一份源代码很多次，但每次都觉得好像没有收获。不过这次读，感觉就满有收获的。… 我想，之前多次虽然貌似读不懂，但应该有积累了一些什么，才能让这次有爆发的感觉。

2012-6-7 21:23 来自微博 weibo.com

通过 Debugger 或 Stack 的方式了解函数的调用关系，只能知道「某个」调用路径，并不全面，且比较容易失去方向感，不适合读源代码时使用。「函数调用图」通常相当杂乱，所以我个人不喜欢。我感觉用「函数调用表」会比较清晰一点，且我会持续修改这张表。

2011-10-19 17:43 来自微博 weibo.com

阅读他人的源代码时，我会先整理出「函数调用表」，调整次序，并标注颜色。通过这个表，可以知道调用依赖关系、递归函数、函数被调用次数、函数目的。阅读代码失去方向性时，就看一下这个表。

2011-10-19 14:04 来自微博 weibo.com

对我来说，阅读优良的源代码，通常不是为了要学习语言的用法（Syntax），更多是要学习该语言的惯用语（Idiom）。惯用语是经年累月累积出来的优良语法模式（Syntax Pattern）。每次学到新的惯用语，就很开心。20 年前的《Advanced C++ Programming Styles and Idioms》是早期我读过关于惯用语的书。

2011-9-27 22:43 来自微博 weibo.com

个人心得：面向过程代码（C）用函数调用表更好，面向对象代码（C++）用类图更好。

测试IFTTT to 微博

Mon, 10 Nov 2014 00:00:00 +0000

这篇文章用来测试IFTTT to weibo的功能，使用的IFTTT recipes是 https://ifttt.com/recipes/197674-publish-new-items-on-sina-weibo-from-any-feed。

每次我的博客更新时，将触发新浪微博发出一条微博。

《超体》——生命的超越

Sat, 08 Nov 2014 16:00:00 +0000

读了和菜头在公众号的影评，我去看了《超体》。我没有绝妙的文笔评价这部电影，但仍想写写喜欢它的原因。

我知道一些观众对《超体》有些失望，他们的评价是虎头蛇尾。因为整部电影铺陈了很长时间，似乎是在设置一个悬念：当人的大脑利用率达到100%时，将会发生什么？可是当100%到来的那一刻，电影戛然而止。

在我看来，故事到了这里，精彩的部分已经演完了，更精彩的留给观众去想象。

本片的精彩之处，不在于一个弱女子因为意外获得了超能力而产生逆袭，如果是这样，它和一般的超人电影有什么区别？相反，这部电影最打动我的地方，是它背后蕴含的思想：生存的意义、生命进化的过程、时间等等关于生存本质的宏大问题。

人性本身是自私而愚蠢的，摩根·弗里曼饰演的教授担心这样的人类掌握了更多的知识后，会发生不好的事情。他从技术上预测当大脑利用率达到20%时，人将开始能操纵物质乃至操纵他人，但是预测仅此为止，他也无法想象那时的人类会变成什么样。然而，他的担心是多余的，斯嘉丽·约翰逊所饰的Lucy没有变『坏』，当她明白自己身上发生的变化时，她打电话向母亲描述自己的感受：她能回忆起自己的每一处记忆，她已经没有了痛苦、恐惧和欲望，她感到万物是一体的。打电话这一段让我十分感动，这一刻的Lucy已经成了佛陀，或者，佛陀就是大脑利用率提高了的印度王子。她的感受并非不能理解，痛苦、恐惧和欲望本就是基因趋利避害的生理机制，当她能观照自己的每一个细胞时，基因的小把戏怎可能继续得逞呢？

Lucy证明了人类的希望：进化本身是残酷无情的，因为只有努力竞争才能生存下去，但是当进化达到一定高度时，人已经能有所察觉从而超越基因的控制，有意识的选择生命的方向。Lucy感到自己生命所剩不多时，向教授请教该做些什么。教授说，生命一代代的传承，使上一代的经验传给下一代，也许你应该把自己的知识传播出去。Lucy用生命最后的能量，把所有的知识变成了一台计算机，留给了人类。

警察最后问道，Lucy在哪里呢？Lucy说，我无所不在。为什么说无所不在？因为她的知识、她的经验已经留下来了，成为了人类的一部分，随着人类对世界的改造，也将成为世界的一部分。这就是人类生命意义的升华：生命不再以基因本身的留存为目的，而是为了促成生命整体对宇宙的探索。

这样说来，我们对生命和死亡是不是有了新的理解？我们的先人没有逝去，他们寄存的肉体消失了，但他们的探索和发现仍然在影响着世界，他们的经验是我们今日生活的基础，我们的经验将是未来人类的基础。从那只叫Lucy的猿人，到大草原上的印第安人，到工业革命时匆匆走过的路人，如此代代传承，生命离他们所探寻的未知之地将越来越近。

Lucy最后制造计算机时，屋外还在进行着激烈的厮杀。可是和屋里纯白的超然环境相比，这场厮杀已经没有了批判的必要，就像我们看动物世界中猎豹追杀羚羊一样，已经成了进化史中的自然现象，谁胜谁负又有什么关系。因为生命有了更高层级的视角，对这种厮杀也就有了一种悲悯。

电影放映时，我经常想到《三体》、佛教以及《自私的基因》，这样的思绪缠绕使我沉浸在电影引发的哲学思考中，科幻、打斗、剧情已经成了细枝末节，我想，导演已经成功了。

影片最后问道，现在，你想用你的时间做什么呢？这是留给每个人的问题。

rsync断点续传

Thu, 06 Nov 2014 16:00:00 +0000

项目需要从线上服务器拉大量的数据到办公网络的测试机中，由于传输过程中VPN经常断，导致数据传输失败。为了解决这个问题，写了一个脚本用来重连VPN，并重启传输任务：

 1: #!/bin/ bash
 2: 
 3: cp /etc/resolv.conf.bak /etc/resolv.conf
 4: /usr/sbin/vpnc-disconnect
 5: sleep 5
 6: /usr/sbin/vpnc
 7: binary="rsync"
 8: cnt=$(ps aux | grep "\<$binary\>" | grep -v "grep" | grep -v "\<vi\>" | wc -l)
 9:     if [ $cnt -eq 0 ]; then
10:       echo "Server not started yet"
11:     fi
12:     pid=$(ps aux | grep "\<$binary\>" | grep -v "grep" | grep -v "\<vi\>" | awk '{print $2}')
13:     echo $pid
14:     if [ "X$pid" = "X" ]; then
15:       echo "No server instance found"
16:     fi
17:     kill -9 $pid
18: nohup rsync -av -e 'ssh -i /home/user/prikey' search@10.10.65.160:/var/data /var > /home/user/data.log 2>&1 &

脚本会中断VPN并重连，杀掉已有的rsync进程，然后重启rsync任务。在crontab中添加这个脚本，每两个小时执行一次：

#crontab task
50 */2 * * * /bin/bash /home/user/restart_service.sh > /home/user/restart.log 2>&1

不过实际执行中发现，数据传输始终不能完成。原来在间隔的两小时内，有些大文件传不完，rsync进程重启再次从头开始传输中断的文件，传完之前又被杀掉，如此循环往复。经过查询，rsync支持断点续传，在原来命令上加入 -P 参数就可以了。把上面脚本中rsync命令改成：

nohow rsync -avP -e 'ssh -i /home/manan/prikey' ...

再次开始任务，数据传输很快完成。

更多关于rsync续传的内容，可以参考我的wiki：http://wiki.manan.org/os/linux/rsync.html。

从WordPress到Jekyll

Tue, 21 Oct 2014 00:00:00 +0000

在细致地考虑和冲动地行动之后，我把博客系统从WordPress换成了Jekyll。

从2010年起，WordPress已经陪伴了我4年。当时无意间发现了一个免费博客空间、免费的二级域名和终于找到的WordPress教程，使我搭起了第一个独立博客。第一次把自己定制的东西独立地发布到互联网上，我非常兴奋。

其实在此之前，我就在寻找这样一个建站的工具，但是由于不知道自己需要的工具是什么，我搜索时都不知道用什么关键字，加上09到10年时WordPress也没有如今这么大众，资料较少，第一次寻找无果后就放下了。大四时我们寝室想一起写一个博客，记录一些好玩的技术话题，选来选去只能把这个博客建在了百度空间上。用博客服务商的网站，缺点显而易见：缺乏可定制性、产品品味差、没有个性。所以当我有了自己的网络空间和域名，尽管它像一个孤岛一样悬在遥远的赛博空间中，仍然令我感到自由和兴奋。

第一个博客用了不久，这个免费的二级域名就被整体屏蔽到墙外了。从此，我走上了自己租空间、买域名的不归路。这四年来，换过几个服务器，买过几个域名，总算没有把这件事放弃掉。并且，在我的直接影响下，身边有超过5个人搭建了自己的网站。

WordPress用久了，它的特点也渐渐不能满足我的需求:

编辑不方便。格式稍微复杂，或者需要多次编辑才能完成的文章，一般是不会在浏览器的WordPress后台中进行写作的。采取的办法一般是在其他编辑器或笔记软件中完成写作，然后直接发布到WordPress中。这方面比较好的工具是Windows Live Writer，或是OneNote。但是这样发布后的文章被这些编辑软件的格式控制标签包裹，并不美观。网站上精心调试过的CSS样式就失去了意义。
性能问题。WordPress使用mysql数据库，在小内存的VPS上性能较差，经常无法连接数据库。
和wiki的分裂。我经常需要记录一些笔记，使用org-mode或者markdown记录导出的笔记是静态html格式的，而博客是动态生成的。这样两部分内容的形式彼此割裂，操作起来不方便。
维护不方便。每次博客搬家时，都要小心翼翼的导入导出mysql，配置WordPress，甚至修改链接，费事费力。

其实上面这些缺点并不是WordPress不好，只是它不适应我的新需要了。我选择了更酷的写作方式——Jekyll。用纯文本的markdown格式写作，git进行版本控制，远程推送到服务器后自动编译并发布为静态html。不能说这是最便捷的写博客流程，确是比较干净、透明、可控的写作方式。

坂井泉水

Sun, 05 Oct 2014 23:09:00 +0000

上次在优酷闲逛时，重听了《灌篮高手》的插曲《我的朋友》，第一次留意了歌曲的演唱者——坂井泉水。网络上的留言毫不掩饰对这位日本女歌手的喜爱，出于好奇，我继续浏览了她的演出视频和个人介绍。几乎没有任何迟疑，她独特的气质立刻吸引了我。

网上的歌迷称呼她姐姐，就像称呼张国荣哥哥一样自然。而她与张国荣一样的地方，除了无可取代的气质、自己作词的创作才华外，就是同样因为意外英年早逝的命运。天妒红颜，大概如此。听了几首她的歌，个人感觉，坂井泉水的歌曲风格是悲伤与希望交织的，看她的演唱会视频，我很容易想到邓丽君、陈晓旭以及其他一些名字。

小学毕业时我有一盘磁带里有那首《我的朋友》，当时应该正是坂井所在的乐队ZARD当红的时候，但那时我不知道这样一位女歌手。后来听得烂熟的柯南主题曲《转动命运的赌盘》也是坂井唱的。坂井的歌总是充满希望的力量，即使抒发悲伤也没有消沉的感觉。因为这种风格，她的早逝更让人感慨：悲剧总是把希望毁灭的过程。我最近在手机里下载了几首她的经典歌曲，下班路上听感到很快乐。

想到十几年前用磁带听过的女歌手这样美丽，我感到幸福；但在她离开7年后我才第一次知道她的名字，又有些遗憾——我本来也可以有一位偶像的。

平凡之路不简单

Sun, 05 Oct 2014 22:16:00 +0000

看《平凡之路》时，到处都在转关于朴树的文章，讲他年少成名后的经历。我当时想，平凡之路只属于朴树、韩寒们，因为他们曾经名动天下，已经不用再证明什么。

又想起来《挪威的森林》中有段话可以描述这种感觉，特意找了来：

喂！你知道当个有钱人最大的好处是什么吗？”

“不知道！”

“就是你可以说‘我没钱’三个字。比如说我邀同学一起去干嘛的，她可以说：“不行！我现在没钱。”换作是我的话，我可不能这么说了。因为如果我说：『我现在没钱。』那就是真的没钱，很惨吧？这道理就好比一个美人说：『我今天很难看，不想出门。』一样，如果你是个丑八怪，说这话一定会被嘲笑的。我当时过的就是这种日子。到去年为止，整整六年。”

又想起傅雷写过的：不经过战斗的舍弃是虚伪的，不经历磨练的超脱是轻佻的。平凡之路并不简单。