网络断了？
今天咋回来得这么早。我们的！借着，你快看，
嘿！汤姆奇？咱们原地盖个新的，咱也弄个。
无论结果是什么，都需要逐步的验证
那老破房子修啥修啊，这些年村里起的全都是二层三层的小楼，我看挺好，我寻思着，汤姆，付国打开一罐啤酒，抬头问道。
回仔，你手里有多少闲钱？莫回转动着小螺丝刀子，
笔记本肚皮朝ã，麻利的就把所有障碍去除了。
等莫回终于停下来的时候，并且还有好几个大型软件，他已经在同时开了十几个。但是一切都没有问题，笔记本毫无压力的运行着，甚至连风扇的声音都听不到，机器也毫无过热的现象。
说完，咣一声，房门被关上，气流鼓荡起几粒灰尘，飘飞进阳光里。
突然想起了什么，莫回将头转向房门，眼神中带着某种期待和笃信，好像他正在等待什么เ事情发生或者验证。
当面对如此庞大浩繁的数据海ร洋时就存在一个问题了，世界这么大，我该如何找到目标，比如我想找感冒药相关的数据信息，我该怎么เ办？
正是这种需求催生了搜索引擎，搜索ิ引擎可以帮助你快速找到目标，它就像一个找路指南一样，你只要告诉它想去哪，这个目的地大概什么特征，它就会帮助你找到无数个可能合适的目的地，并且把对方的url提供给你。
搜索引擎每天的访问量都是海ร量的，每一秒同时并发的搜索请求都是数以十万计的，在这么多请求面前，如果来一个请求它搜一遍互联网，这肯定是不现实的，不仅速度慢效率低，而且仅仅这类搜索请求就足让整个国际互联网陷入拥堵状态。
为了解决这个问题，搜索引擎就有了它特有的工作模式，它先尽可能多的将数据海ร洋里的信息全部找出来，然后存储在自己的服务器群组中，一旦ຆ有了搜索请求，它只要在自己的服务器里进行检索就行了。
而帮助搜索引擎完成找这个动作的就是爬虫。
因为ฦ国际互联网中的信息节点都是相互关联的，是网状联系的，每个ฐ节点上都会有很多个url。所以爬虫的工作模式就是遍历，当它开始工作时，它会以一个ฐ信息节点为，然后挨个访寻与这个ฐ节点相连的所有节点，当下一层节点还有url链接时，它就不断ษ访问下去，直到将所有url遍历一次才算完。
因为整个互联网的网状结构，使它具备网状互通性，所以等爬虫将所有url遍历了，一般来说它就已经将整个国际互联网所有链接全部ຖ访问了一遍，这注定是一个比环球旅行更加令人叹为观止的行为ฦ。
而莫回既然想弄这个股神10，他想要搜集海ร量数据，那ว么เ他要做的事情其实和搜索引擎要做的事情很像，只不过搜索引擎是所有信息都要搜集，而莫回只需要关注股票相关的信息就行了。
这样的话，莫回的爬虫就必须在具备遍历能力的同时，还得具备筛选的能力。
遍历的能力解释起来很简单，就是你不能走回头路和冤枉路，游历过的url就犯不着再走第二遍了。一条新的url被发现，首先需要判断这条url是否已经走过，其次需要判断这条url被安排在什么次序去走。一个是重复性问题，一个是最优化问题，这就需要独特的遍历算法来解决。
而筛选功能就是通用爬虫和专用爬虫之间的主要区别，莫回的爬虫需要具备一定的识别ี能力，能ม够辨别某个url中的内容是否具备相关性，如果不具备那ว么就跳过，如果具备就将其中的内容复制回来待用。
这个筛选功能同样需要一大堆的算法来解决，不仅如此，它还需要具备自然语言处理能力，就是说它得具备对语言文字的理解和解析的能力，它得能ม够识别哪些文字内容是与股票相关的，哪些是无用的。
仅仅识别ี文字还是不够的，它还得能够识别其他格式的数据，比如它得能够识别图案，像是股票相关的各种k线图柱状图之ใ类的，爬虫必须能ม够将其与风景画或者自拍照ั区别开。
除了图片，其他的像是视频音频๗各类数据库之类的，爬虫都需要一一辨别出来，确定是否属于相关内容。
这里面将会有无数个技术难题需要解决，如果这个工作让莫回一个人来完成，几乎ๆ是不可想象的。