Python爬虫从入门到入魔(6)-百越白狼社区-弘客联盟新手区-弘客联盟

Python爬虫从入门到入魔(6)

存储数据

  • csv存储
  • 数据库存储

csv

  • csv 文件是大数据文件存储格式的文件 结构与excel不同。
  • CSV是一种通用的、相对简单的文件格式,被用户、商业和科学广泛应用。最广泛的应用是在程序之间转移表格数据,而这些程序本身是在不兼容的格式上进行操作的(往往是私有的和/或无规范的格式)。
  • 因为大量程序都支持某种CSV变体,至少是作为一种可选择的输入/输出格式。
  • 例如,一个用户可能需要交换信息,从一个以私有格式存储数据的数据库程序,到一个数据格式完全不同的电子表格。最可能的情况是,该数据库程序可以导出数据为“CSV”,然后被导出的CSV文件可以被电子表格程序导入。

存储

文件写入可分为两种方式:

  • 以元组的方式存储

20231217150804228-1

  • 以字典的方式存储

20231217150843381-2

读取

顾名思义,有存储就有读取

  • 这种方式读取到的每一条数据是一个列表

20231217150924823-3

  • 这种方式读取到的每一条数据是一个字典

20231217151053816-4

数据库存储

随着互联网和信息技术的发展,数据的存储和管理方式也不断发生了变化。数据库存储是一种常见的数据管理方式,它具有很多优点。例如数据的安全性、可扩展性、一致性、可用性。

总之使用存储过程有三个主要的好处:简单、安全、高性能

  • mysql存储
  • mongodb存储

mysql

基本命令

20231217151146200-5

mongodb

基本命令

20231217151220652-6

请登录后发表评论

    没有回复内容

随便看看