使用模块 json 来存储数据 JSON （JavaScript Object Notation ) 格式 1 ，使用 json.dump ( ) 和 json.load( ) 函数 json.dump( ) 接受两个实…

数据挖掘，是从大量数据中挖掘出隐含的，先前未知的。对决策有潜在价值的关系、模式和趋势，并用这些知识和规则建立用于决策支持的模型，提供预测性决策支持的方法、工具和过程。 1，数据挖掘的基本任务 利用分类与预测，聚类分析、关…

函数式编程， 是一种编程范式，它将计算机运算视为数学上的函数计算，并且避免使用程序状态以及易变对象。 1，高阶函数 map( ) 函数 和 reduce( ) 函数。 Python 内建了 map（ ） 和 reduce…

向量化计算 定义，向量化计算是一种特殊的并行计算的方式，它可以在同一时间执行多次操作，通常是对不同的数据执行同样的一个或一批指令，或者说把指令应用于一个数组/向量。 1，生成等差数列 numpy.arange(atart…

import 库名 import math as m 1, Numpy 提供数组支持，以及相应的高效的处理函数 快速高效的多维数组对象ndarray， 用于对数组执行元素级计算以及直接对数组执行数学运算的函数， 用于读写…

通过检验数据集的数据质量、绘制图表、计算某些特征量等手段，对样本数据集的结构和规律进行分析对的过程就是数据探索。 数据探索有助于选择合适的数据预处理和建模方法。 数据质量分析 数据特征分析 一，数据质量分析 数据质量分析…

机器学习是指，一门多领域交叉学科。专门研究计算机或其他软硬件设备怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。 机器学习实现一套工具、方法或程序，从现实世界的海量数据里…

数据挖掘的方向 数据库技术角度统计学角度机器学习角度 一，数据挖掘的发展动力 1，数据量的增长 自动数据收集工具和成熟的数据库技术使得大量的数据被收集，存储在数据库、数据仓库或其他信息库中以待分析。2，数据量繁多，缺乏寻…

一，体系结构 数据的来源 数据库服务器， 数据库 数据挖掘的引擎 数据挖掘的模式 数据可视化技术的展示 二，数据类型 关系数据库 使用最广泛 数据仓库 各个分立的数据库统一 事务数据库 高级数据库系统和信息库 空间数据库…

一 ，说明： 1，服务器上构建虚拟环境与系统环境分割。 2， 服务器系统是centOS 。 3，安装的是anaconda3 二，过程： 下载到服务器 wget https://repo.continuum.io/arch…

使用pymysql数据包连接 使用Python连接MySQL数据库，使用的是 pymysql包。安装好pymysql包以后，通过下面的方式连接到导数据库，通过执行原始SQL语句，调取所需要的数据。 通过pandas 将数…

通过MySQL驱动连接MySQL数据库 MySQL官方提供了mysql-connector-python驱动 pip install mysql-connector 操作数据库 import mysql.connecto…