第768章 爬虫 (第1/2页)

在国内做生意，限制比较多。如果是小打小闹的小公司，只要在合理合法的经营、竞争，怎样都没问题。如果是大公司，那就不行了。
　　
　　如果是国企间展开激烈竞争，当局一统计，发现这种竞争对两家企业的利润都有损害，就会出面协调了。可以把两家企业的老总互换，化干戈为玉帛。再不行，当局谈话，进行问诫。还不行，就有杀手锏了，两家企业直接合并。
　　
　　民企间的竞争相对自由，可大公司之间也有限制。
　　
　　每一家成功的民企，经营的都很不容易。
　　
　　当局在法律法规、政策等方面都有一定的保护。
　　
　　在美国，一个市值1000多亿美元的公司一旦报出财务造假，3个月内就破产倒闭了，处置得极其严苛。可国内不一样，民企做大，真是太不容易了，因为犯了点小错就直接杀头，太可惜了，罚款几十万引以为戒，意思意思得了。
　　
　　企业倒了，那么多员工怎么办？损失的GDP怎么办？
　　
　　这就导致有很多无耻可恶的商人，利用国家对民族经济的呵护和关爱，不好好做企业，天天想着操纵资本、收割韭菜，导致A股假账烂账一大堆。
　　
　　这里面的水太深，周不器从不参与，哪怕A股现在历史性的大涨，他也不去炒股，免得惹一身腥。
　　
　　炒股才能赚几个钱啊。
　　
　　他这种身份的人，只要牌坊正，根本不需要去股市里偷鸡摸狗，官府会敲锣打鼓的主动给他送钱。
　　
　　要想钱生钱，最好的办法就是把钱集中起来，交给最会赚钱又人品可靠值得信任的人，让他去带领大家共同致富。
　　
　　周不器现在基本就是这样的人。
　　
　　郭丹那边已经回馈了，市里针对紫微星总部的事，已经拿出了一个大致性的意见，会给出一个在首都地区对民企来说前所未有的扶持方案。
　　
　　回到紫微星和百度的竞争上，周不器肯定不能像石婧琳说的那样采取一些过激的行为。
　　
　　就算是竞争，也要在一定的范围之内。
　　
　　要是紫微星真的把百度搞死了，这不是牛逼，这是傻逼。同样的，百度要是把紫微星搞死了，李老板也就被请去喝茶了。
　　
　　3Q大战一度轰轰烈烈，也是当局出面化解纠纷。
　　
　　第二天，周不器叫上了郭鹏飞、韩乐水、聂才俊、宁雅娴等人，去搜索事业群那边考察工作。场面不小。
　　
　　紫微星的几大事业群负责人中，王小船的压力是最大的。
　　
　　前期工程已经做到了完美，可就是拿不到结果，市场份额一直维持在33间。所以他才申请了一个建议，要做一个类似百度贴吧的项目。
　　
　　好在周不器对王小船充满了信任。
　　
　　“不要急，我早就说过了，短期之内不看份额，只看产品。”
　　
　　“产品……”
　　
　　王小船暗暗叹气。
　　
　　单看产品，微点搜索也不如百度啊！唯一的优势，就是微点的配套设施更多，有浏览器，有导航网，有输入法，有音乐平台等等。
　　
　　周不器笑了笑，“这点信心都没有？还是说你承认技术不行？”
　　
　　王小船从小就是计算机天才，在技术方面从未服过谁，摇头道：“搜索引擎的架构高度复杂，有抓取器、渲染器、DNS解析、Redis内存数据库、URL队列、种子队列、响应队列、URL提取、URL过滤、重复URL检测等等，是一个技术性很强的庞大工程。我自认为微点的架构不比百度差，可一些技术细节，还需要时间。”
　　
　　周不器笑着说：“我知道搜索技术很高端，可随着时间的推移，搜索技术就会走下神坛，变为比较大众的技术。最根本的技术，还是大数据处理。”
　　
　　在大方向的理论上，周大老板比一些专业人士还强。
　　
　　王小船深以为然，“是啊，大数据的处理。百度和谷歌的差距，微点和百度的差距，最主要的就是体现在我们在数据处理时的效率问题。按理来说，通过爬虫技术，可以抓取到互联网上所有信息。可相关信息太多了，数据量太大了。怎么才能在短时间内把想要的信息抓取并展示出来，是搜索引擎最大的技术难题。”
　　
　　周不器打了个响指，笑道：“巧了，我这次过来，就是想问问你爬虫的事。”
　　
　　王小船有些费解。
　　
　　周大老板这个技术外行，怎么还关心起技术细节来了？
　　
　　就缓缓的解释道：“爬虫是搜索的基础工具，爬虫搜信息……嗯，就跟使用浏览器上网差不多，都是先向服务器发送请求，获得返回的页面，然后筛选出有价值的内容。如果时间足够长计算量足够大，使用爬虫工具，就可以把互联网上的所有信息都搜索一遍。”
　　
　　见周大老板似乎很感兴趣的样子。
　　
　　王小船就拿过纸笔，很快速的写下了一行代码，“假如说我们要爬取微知网的信息，用这行代码就可以实现了。”
　　
　　周不器拿过代码一看，嗯，是很简单。
　　
　　headers={‘Use-Agent’:‘ChaiknowsThebot’，}
　　
　　

（本章未完，请点击下一页继续阅读）