Python 从爬虫到数据分析

各人好，我是大鹏，都市数据连合合提倡人，致力于Python数据说明、数据可视化的应用与解说。

和许多同窗打仗进程中，我发明自学Python数据说明的一个难点是资料繁多，过于伟大。大部门网上的资料老是从Python语法教起，混合着大量Python开拓的常识点，花了许多时刻却始终云里雾里，不知道哪些常识才是真正有效的。原来觉得上手就能写爬虫出图，却在看基本的进程中耗损了一周又一周，以至于许多励志进修Python的小搭档捐躯在了入门的前一步。

于是，我总结了以下一篇干货，来辅佐各人理清思绪，进步进修服从。总共分为三大部门：做Python数据说明必知的语法，怎样实现爬虫，怎么做数据说明。

1.必需知道的两组Python基本术语

A.变量和赋值

Python可以直接界说变量名字并举办赋值的，譬喻我们写出a = 4时，Python表明器干了两件工作：

• 在内存中建设了一个值为4的整型数据
• 在内存中建设了一个名为a的变量，并把它指向4

用一张表示图暗示Python变量和赋值的重点：

譬喻下图代码，“=”的浸染就是赋值，同时Python会自动辨认数据范例:

a=4 #整型数据 
b=2 #整型数据 
c=“4” #字符串数据 
d=“2” #字符串数据 
 
print(“a+b功效为”，a+b)#两个整数相加，功效是6 
print(“c+d功效为”，c+d)#两个文本归并，功效是文本“42” 
 
#以下为运行功效 
>>>a+b功效为 6 
>>>c+d功效为 42 

B.数据范例

在低级的数据说明进程中，有三种数据范例是很常见的：

• 列表list(Python内置)
• 字典dic(Python内置)
• DataFrame(器材包pandas下的数据范例，必要import pandas才气挪用)

它们别离是这么写的：

列表(list)：

#列表 
liebiao=[1,2.223,-3,'刘强东','章泽天','周杰伦','昆凌',['微博','B站','抖音']] 

list是一种有序的荟萃，内里的元素可所以之条件到的任何一种数据名目和数据范例(整型、浮点、列表……)，并可以随时指定次序添加个中的元素，其情势是：

#ist是一个可变的有序表，以是，可以往list中追加元素到末端： 
liebiao.append('瘦') 
print(liebiao) 
#功效1 
>>>[1, 2.223, -3, '刘强东', '章泽天', '周杰伦', '昆凌', ['微博', 'B站', '抖音'], '瘦'] 
 
#也可以把元素插入到指定的位置，好比索引号为5的位置,插入“胖”这个元素： 
liebiao.insert(5, '胖') 
print(liebiao) 
#功效2 
>>>[1, 2.223, -3, '刘强东', '章泽天', '胖', '周杰伦', '昆凌', ['微博', 'B站', '抖音'], '瘦'] 

字典(dict)：

#字典 
zidian={'刘强东':'46','章泽天':'36','周杰伦':'40','昆凌':'26'} 

字典行使键-值(key-value)存储，无序，具有极快的查找速率。以上面的字典为例，想要快速知道周杰伦的年数，就可以这么写：

zidian['周杰伦'] 
>>>'40' 

dict内部存放的次序和key放入的次序是没有相关的,也就是说，"章泽天"并非是在"刘强东"的后头。

DataFrame：

DataFrame可以简朴领略为Excel里的表格名目。导入pandas包后，字典和列表都可以转化为DataFrame，以上面的字典为例，转化为DataFrame是这样的：

import pandas as pd 
 
df=pd.DataFrame.from_dict(zidian,orient='index',columns=['age'])#留意DataFrame的D和F是大写 
df=df.reset_index().rename(columns={'index':'name'})#给姓名加上字段名 

和excel一样，DataFrame的任何一列或任何一行都可以单独选出举办说明。

以上三种数据范例是python数据说明顶用的最多的范例，基本语法到此竣事，接下来就可以着手写一些函数计较数据了。

2.从Python爬虫学轮回函数

把握了以上根基语法观念，我们就足以开始进修一些风趣的函数。我们以爬虫中绕不开的遍历url为例，讲讲各人最难领略的轮回函数for的用法：

A.for函数

for函数是一个常见的轮回函数，先从简朴代码领略for函数的用途：

zidian={'刘强东':'46','章泽天':'36','周杰伦':'40','昆凌':'26'} 
for key in zidian: 
        print(key) 
>>> 
刘强东 
章泽天 
周杰伦 
昆凌 

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!