《都市之科技之门》第三章 全网爬虫 免费试读
PS:新书不易，请支持！不要吝啬鲜花、门票、收藏等。扔得到处都是。
但是现在陈宇没有心情写这些版本。他现在要做的只有一个目的，写一个程序，一个爬虫程序！
虽然比较好的爬虫是Python，陈宇目前只懂java！
但是，拥有神级java编程技术的陈宇，自然不会被这个难倒。Python是专门为爬虫开发的，但是因为java的强大，写爬虫没有问题！
来到网吧，开了个机，卡里还剩30块钱。现在上网费到晚上才四五块钱。晚上只在8元，晚上10点到早上7点！
陈宇找到一台看起来不错的电脑！
打开网吧系统综合平台，没有找到需要的工具。我没办法，只好在网上下载了一个！
虽然陈宇可以直接用文字来做，但是没有IDE方便快捷！
然后我找到最流行的IDE，下载安装，又是熟悉的场景。
但是，陈宇并没有直接写，而是开始写设计报告。不过这个报告很简单，只涉及一些技术方面和功能方面的内容。
好记性胜过烂文笔，可以保证陈宇不会忘记什么！
陈宇旁边的机器很多人都在玩游戏或者看电影，只有陈宇在写代码！
陈宇很快！
书写速度也很快。这次很多插件都是陈宇自己写的，然后用！
五个小时后，陈宇完成了前期插件编写，直接开启了夜保功能。
然后陈宇戴上耳机，打开节奏最好的音乐，开启疯狂编程模式！
陈宇的行为惊呆了周围玩游戏的人。纷纷侧目，道安牛逼了！
时间一分一秒过去，陈宇却沉浸在编写爬虫程序的海洋中。
简单的爬虫程序很好写，但是陈宇是一个面向全世界的网络爬虫。只要是有网络的地方，它都可以直接抓取，哪怕是有一点入侵的迹象，也就是只要你联网，你电脑里的内容就会被陈宇抓取走！
这个挺麻烦的！
现在是凌晨四点，已经是夜深人静了。除了那些还兴致勃勃的游戏玩家，其他人要么离开，要么睡觉！
“现在你可以把它放在星源服务器上了！希望你不要让我失望！”陈宇一声期待的喃喃自语。
“主人，你放心吧，星源服务器很牛逼，完全可以支持你写的程序？！而且，他的运营能力也是每秒10亿爬虫访问量！最重要的是这些访问和下载速度也超级快，除了物理限制以外的一切都是下载慢！”嫣嫣突然蹦跶出来，说道。
陈宇我一愣，很好奇，心里问，“闫妍，你能看懂我写的代码吗？!"
颜二的心情明显有点高兴，回应道:“这个无所谓。你也将你所获得的科技知识的副本给颜！”
陈宇稍微浏览了一下，想挑毛病，最后没挑出来！
“你能为我做什么？!"陈宇想了一下问道，既然科技之门给了闫妍一份这样的资料，那一定有他的道理！
“我可以帮你找虫子！”嫣语一句话让陈宇眼前一亮。这个功能太棒了！人会犯错，马也会绊倒。计算机编程容易因为粗心，某个代码写错了，调试的时候找不到，机器浪费时间。
嫣，这就是神器！
“那我有虫吗？!"陈宇想了一下，还是问了。虽然他跑的时候没事，但是谁也不敢保证不是！
“是的！而且最多100多！”颜二的话彻底打断了陈宇的美梦，简直太震撼了。自己没有发现的，被颜二发现了100多次。这就是人和智力的区别吗？！
然后在嫣儿的带领下！
陈宇很快调整了自己的错误。其实很多都不能说是bug，只能说是优化。在颜二看来，需要优化的是bug！
此时已经5: 30了陈宇直接连接卫星源服务器！
星源服务器上有兼容的万能服务器软件。陈宇很容易直接打包上传到这个星源服务器上。然后我想了一下，又开始变了。这次想增加一个功能，就是分布式存储管理。卫星源服务器提供的服务器软件有这个功能，很强大，但是需要配陈宇自己写，这是个大问题。
幸好嫣嫣是出轨这一块。
一切都是为了陈宇而设计的！
陈宇了解后直接开始编程！
早上七点！
程序写好后，陈宇测试无误，重新打包重新上传！
然后我输入了很多指令，启动了服务器。下一刻，陈宇看到了惊人的一幕。数据爬虫的信息出现在星源服务器给出的界面上。仅仅几秒钟，10GB的数据就被下载了。
“颜二，这是骗人的吧！”陈宇看着数据，我还是有罪恶感。这样的功能简直就是作弊。
网络上有多少数据？！
没人知道，但是陈宇可以肯定的是，绝对海量，PB单位都很小！
Petyte (Pb) = L024 TB，相当于美国学术研究图书馆信息量的50%。
以及更强大的存储单元exabyte(EB)= 1024 Pb；只需要一个简单的5EB就可以存储全世界人类说的话。
至于更高级的Zettabyte(ZB)=1024EB！
这个幅度是不正常的。这相当于全世界海滩上沙子数量的总和。
当然，没有人证实这个数据。毕竟，没有人知道全世界的海滩上有多少沙子！
陈宇我伸了个懒腰，在编程上纠结了十几个小时。我真的很累。
叹了一口气，感觉什么都没剩下，直接下了飞机！现在早自习已经开始了，迟到的话估计要被班主任批了！
陈宇路上买了个包子，边吃边跑，到教室的时候已经7点半了，而班主任已经在教室等着了！
看到班主任面无表情的脸，陈宇突然耸了耸肩！
快回到你的位置！
看到陈宇回来的班主任张凯丽，溜达到陈宇，这个时候陈宇不知道怎么滴，吓死了。他试着深呼吸，大声朗读！
“你为什么要走？!"果然，该来的已经来了。
“昨天上厕所吃坏了！”陈宇解释说脸不红心不跳。
