鬼谷子叔叔
跟福哥学编程吧~~
介绍介绍福哥今天会带着大家完成网页蜘蛛的代码的最后一个部分，实现网页源代码内容写入MySQL数据库功能，实现网页信息写入ElasticSearch搜索引擎功能。这部分功能实现了之后，我们就可以转而去编写搜索引擎的前端UI功能的代码了。要...
阅读 35
2020-10-14
介绍介绍福哥更新了Spider对象，实现了爬取网页内容，分析网页数据，写入数据库这些功能。实现了这些功能之后网页蜘蛛的基本功能也就差不多完成了！后面就可以开始编写搜索引擎的前端UI功能了，相对网页蜘蛛来说，搜索引擎前端UI就比较简单了！...
阅读 47
2020-10-13
介绍介绍福哥今天给大家讲讲关于Python编程中的字符串编码转换的问题，这个问题在初学者编程时候会经常遇到，如果要弄清楚这里面的道道，还是需要好好学习一下的什么是编码所谓编码就是计算机标记一个汉字（或者是其他国家的文字）对应的数字，在不...
阅读 48
2020-10-13
介绍介绍上一堂课福哥给大家展示了一个半成品的蜘蛛对象Spider，今天我们继续。做事要有目标，并努力使之达成！今天我们的目标就是：实现网页的爬取分析并将内容保存到webpages数据表当中；将提取出来的子级页面的超链接保存到webpag...
阅读 68
2020-10-11
介绍介绍昨天我们明白了网页蜘蛛的工作原理，今天就可以开始根据这个原理进行代码的编写了。虽然python也可以编写面向过程的程序，但是使用面向对象的方式编写程序是一个好的习惯，它更加可以满足各种复杂的业务逻辑的需要，同时代码也更容易读懂。...
阅读 89
2020-10-11
介绍介绍前面几堂课我们已经掌握了通过Python编程操作MySQL数据库和ElasticSearch搜索引擎的技巧，今天开始就可以正式编写代码了。搜索引擎分为两个部分，一个是网页蜘蛛，负责爬取网站的网页内容并且存入MySQL数据库当中，...
阅读 39
2020-10-10
介绍介绍今天我们学习如何通过Python操作ElasticSearch搜索引擎。学会使用Python操作ElasticSearch数据库之后，我们就可以使用Python制作拥有强大搜索功能的应用程序了。ElasticSearch的搜索功...
阅读 64
2020-10-08
介绍介绍今天我们学习如何通过Python操作MySQL数据库。学会使用Python操作MySQL数据库之后，我们就可以使用Python制作更为强大的应用程序了。有了数据库操作能力的应用程序，就有了数据存档的能力，能够存档的程序可以达到的...
阅读 42
2020-10-08
介绍介绍我们已经设计好了搜索引擎的MySQL数据库，今天我们要开始设计ElasticSearch数据库了。ElasticSearch数据库在这个搜索引擎项目里的作用是全文检索，因为MySQL无法实现这个功能。而搜索引擎的特点是用户给出一...
阅读 49
2020-10-06
介绍介绍昨天我们已经设计好了搜索引擎的模型，搜索引擎包括两个基本模型即：网站和网页。那么接下来我们就要针对这两个模型进行数据库的设计了。设计数据库要考虑的问题很多，包括数据的大小、字段的数量、读取场景，写入场景等等。除此之外还要考虑使用...
阅读 51
2020-10-06
鬼谷子叔叔
日志
212
212
浏览
1626
1626
热门日志
- Python3学习笔记 阅读 106
- Python做个搜索引擎（5）网页蜘蛛代码编写（一）【20201010】 阅读 89
- Python做个搜索引擎（6）网页蜘蛛代码编写（二）【20201011】 阅读 68
- 在Windows上搭建Python2.7运行环境【20200920】 阅读 65
- Python通过pymysql操作MySQL数据库【20210331】 阅读 70
- Python操作ElasticSearch搜索引擎【20201008】 阅读 64
- 编程基础，结构（Struct）【20200919】 阅读 58
- 编程入门第二课，常量与变量【20200909】 阅读 56
- 编程入门第五课，循环语句（for，foreach，while）【20200915】 阅读 58
- 编程入门第七课，函数（function）【20200917】 阅读 54
最新日志
- Python基本语法V1.5【20210121】 阅读 39
- Python做个搜索引擎（9）搜索器【20201021】 阅读 39
- 在Windows设置Python的pip工具的软件包的源地址为国内源【20201019】 阅读 38
- Python对象编程之构造函数、析构函数、对象继承、方法重载技巧【20201017】 阅读 34
- Python处理日期和时间【20201016】 阅读 38
- Python的selenium实现等待某个元素加载完成后返回结果【20210414】 阅读 5
- Python的selenium实现切换框架frame的方法【20210413】 阅读 6
- Python操作JSON格式数据的技巧【20210411】 阅读 7
- Python的日期和时间的使用技巧【20210407】 阅读 20
- 在Linux上搭建Python2.7运行环境【20201015】 阅读 39