微推书小说网

手机浏览器扫描二维码访问

第17章 爬虫（第1页）

“接下来，就是试试获取小说的内容了。”

接下来，他开始编写程序以获取小说的详细信息和内容。

由于小说内容比较庞大，他决定把获取内容的频率放低。

毕竟是在奶茶店，店里面还有不少的人在使用着店里面提供的WIFI。

如果他瞬时间向服务器的请求量过大，其他人的网络，基本上就会陷入瘫痪的状态。

他现在只是手痒痒了，想试试手，真正要爬取到足够多的小说数据，至少需要好几天的时间。

“接下来，就是见证奇迹的时刻。”

他开始启动他的爬虫程序，程序开始在小说网站上爬取小说的内容。

无数本小说的内容文字一闪而过，便进入了数据库之中。

“哟，还有点意思。”

他发现，在爬取的过程中，点娘小说网站的反爬虫机制还算是不错，他的爬虫程序很快就被封禁了。

针对IP的。

不过，他快速升级了他的爬虫程序，加入了无数的IP池，以及强大的识别验证码能力，使其更难被网站检测到。

“咦，看来我这掌握的五级信息技术，比我想象之中的要强！”

经过一番小小的折腾，点娘都市小说分类下的数百万本小说，全部进入了他的数据库里面。

“最强的点娘的反爬虫机制也不过如此。看来获取数据集的过程，会比我想象的简单不少。“

”那现在就是时间的问题了，等我爬取到足够多的小说数据集，就可以开始训练我的写小说AI模型了！”他心中充满了自信。

现在，就让小说模型先跑着吧。

今天是周末，奶茶店的人比往常多上不少，等到了快要歇业的时间里，铺子里还有不少的人。

林小玲没办法，只好延长了奶茶店的营业时间。

连带的，王卿一遍看着AI模型的训练，一遍记着单词。

“喂，我要下班了，咱们一起走吧。”

王卿还沉迷于互联网世界的新奇时，林小玲的声音传了上来。

他抬头一看，“都已经十二点了啊。”

“等我一会儿。”

“好，我在门口等你。”

林小玲没有上楼去，今天太累了，她就在楼下等着王卿收拾东西。

“怎么还没出来呀。”

她在店门口等了两三分钟，王卿那边还没有动静，就想上楼去看看。

还没有走到门口，便看到他扛着一台巨大的电脑主机和一个显示器，不禁笑了起来。

王卿嘴里喘着粗气，额头上挂着一粒粒细密的汗珠，身上的衬衫湿漉漉的贴在了背上。

他双手抱着一台电脑主机和一个显示器，像只蚂蚁一样艰难地从二楼的楼梯上下了来。

电脑主机和显示器一字排开，整齐地被王卿抱在了怀里。

唐嫣然陈万里全文免费阅读  妙手龙医陈万里唐嫣然免费阅读  妖孽保镖在都市  渣男与人暗度陈仓我与王爷明修栈道主角夜时舒尉迟凌  纠缠十年，我死后前夫才放手  渣男与人暗度陈仓我与王爷明修栈道夜时舒尉迟凌免费阅读全文最新  陈万里唐嫣然最新免费阅读章节  渣男与人暗度陈仓我与王爷明修栈道夜时舒尉迟凌全集免费阅读  重生1991开局迎娶绝美班长  渣男与人暗度陈仓我与王爷明修栈道夜时舒尉迟凌百度云  叶青云  快穿：宿主是咸鱼还是炮灰  妙手大仙医陈万里免费阅读第一章  陈万里唐嫣然免费阅读列表  重生1991开局迎娶绝美班长余年周婉免费阅读  一碧榶榶的作品渣男与人暗度陈仓我与王爷明修栈道  夜时舒尉迟凌渣男与人暗度陈仓我与王爷明修栈道最新全文免费阅读无弹窗  万界帝尊  渣男与人暗度陈仓我与王爷明修栈道夜时舒尉迟凌全本免费阅读  夜时舒尉迟凌渣男与人暗度陈仓我与王爷明修栈道免费全文无删减阅读