在对网站信息进去抓取时,难免遇到被封IP的情况。针对这一情况可采用代理IP的方法来处理,好了 现在我遇到的问题是什么呢? 就是我没有代理IP啊。 百度了下,发现网上有好多免费的代理IP,所以我决定把能找到的所…
分类:python
python提取文件中文件的名称,并导入到Excel中
程序代码: import pandas as pd import os print('图片名称提取中......') imgPath=os.getcwd() nameList=os.listdir() for i in …
python爬虫系列(2.1-requests库的基本的使用)
一、基本认识 1、发送一个get请求 import requests if __name__ == “__main__”: # 获取一个get请求 response = requests.get(…
MongoDB的简单入门
MongoDB的基本概念 MongoDB的数据单元是文档,可以看作JavaScript中的对象,类似于关系数据库中的行。 集合(Collection)类似于关系数据库中的表,区别在于没有模式。 每个MongoDB数据库都…
【Python爬虫作业】- 文件和函数
# 第九次,一 定义g到kg的转换函数,效果如图:1234g = 1.234kg def g2kg(gWeight): kgWeight=gWeight/1000 print(kgWeight,'kg') number=…
《python算法教程》开读
在阅读完《python数据分析基础后》,我计划读《python算法教程》。个人认为,虽然数据分析对于编程的能力的要求没有专职编程开发的人高,但数据处理和分析时所编写的高质量以及高执行效率的代码离不开扎实的算法基础。作为非…
高效率地保存多个 Python 对象!你学会了吗?
json文件因其简洁精炼,在网上特别流行,我们写爬虫时经常碰到网站使用json格式传输数据。但是如果要存储的数据有1G,那么读取一个json文件需要一次性读入,这需要占用很大的内存,对电脑压力过大。所以我们需要将数据存储…
python: lambda表达式
描述: lambda的一般形式是关键字lambda后面跟一个或多个参数,紧跟一个冒号,以后是一个表达式。lambda是一个表达式而不是一个语句。它能够出现在Python语法不允许def出现的地方。作为表达式,lambda…
Python读取二进制文件
实际项目中经常遇到读取二进制问题,Python下读取二进制文件一般用Python的文件打开读写相关函数和struct. 1。获取文件名filename,可用对话框,也可以直接手写 2。打开文件,这里中是打开,像看书一样,…
Python编码规范
Python编码规范 1 排版 1.1 Indentation缩进 在参数过多时适当缩进 foo = long_function_name(var_one, var_two, var_three, var_four) d…
货币转换 C
货币转换 C 描述 人民币和美元是世界上通用的两种货币之一,写一个程序进行货币间币值转换,其中: 人民币和美元间汇率固定为:1美元 = 6.78人民币。 程序可以接收人民币或美元输入,转换为美元或人民币输出。人民币采用¥…
python基础类型(二):字典与元组
一、字典 python中的字典是由键值对组成,每一个键在字典中都是唯一的,值可以是任意类型的对象,但是键必须是不可遍的对象类型(如:字符串、数字、元组等)。 一个字典由许多个键值对组成,我们可以通过键来访问字典中的对应键…