1.定义接口类,方法中添加注解查询 package cn.et.mybatis.lesson02.selectKey; import java.util.List; import java.util.Map; im…
学习笔记TF061:分布式TensorFlow,分布式原理、最佳实践
分布式TensorFlow由高性能gRPC库底层技术支持。Martin Abadi、Ashish Agarwal、Paul Barham论文《TensorFlow:Large-Scale Machine Learning…
Pytorch学习--编程实战:猫和狗二分类
Pytorch学习系列(一)至(四)均摘自《深度学习框架PyTorch入门与实践》陈云 目录: 1.程序的主要功能 2.文件组织架构 3. 关于`__init__.py` 4.数据处理 5.模型定义 6.工具函数 7.配…
【spring指南系列】使用Spring缓存数据
本指南将指导您完成在Spring所托管bean上启用缓存的过程。 What you’ll build 您将构建一个应用程序,在一个简单的book repository中启用缓存。 What you’ll need 约15…
mysql如何使用临时表,内存表来加快速度?
1.我结合武侠这个游戏来说一说我的使用心得:武侠中所有玩家当前所在场景信息存在内存表中,比如A场景有a,b,c玩家, B场景中有e,f,g玩家,都存在一个叫做tbl_player_scene的内存表中。当时并不知道red…
机器学习基本概念
1. 机器学习的定义 [Mitchell, 1997]对机器学习给出了一个形式化的定义:假设用P来评估计算机程序在某任务类T上的性能,若一个程序通过利用经验E在T中任务上获得了性能改善,则我们就说关于T和P,该程序对E进…
MapReduce超时原因(Time out after 300 secs)
目前碰到过三种原因导致 Time out after 300 secs。 1. 死循环 这是最常见的原因。显式的死循环很容易定位,隐式的死循环就比较麻烦了,比如正则表达式。曾经用一个网上抄来的邮箱正则表达式匹配百…
spark应用以及RDD的运行原理
RDD是什么? RDD(Resilient Distributed Dataset)是一个弹性分布式数据集,简单的说就是弹性加分布式的数据集。 在rdd里的数据可以并行在分布式集群中进行计算; 弹性就是说RDD中的数据可…
pyspark系列--连接spark
连接spark 1. 连接spark 1.1. 简单连接spark 1.2. 连接spark集群 1.3. 集群python环境 1.4. config参数 2. 提交作业 1. 连接spark 1.1. 简单连接spa…
Kmeans(spark-mllib2.2.0最新源码解析)
前言:基础的机器学习算法,可能在神经网络,深度学习的浪潮所淹没,但是本文重点在于工程实践,重点在于分布式的实现理解,如何在在于通用架构中(spark\Hadoop生态系统)去实现有价值的系统或者算法。 K 均值算法:就是…
PyTorch 学习笔记(三):transforms的二十二个方法
本文截取自《PyTorch 模型训练实用教程》,获取全文pdf请点击:https://github.com/tensor-yu/PyTorch_Tutorial 本文对transforms.py中的各个预处理方法进行介…
Pytorch自由载入部分模型参数并冻结
Pytorch的load方法和load_state_dict方法只能较为固定的读入参数文件,他们要求读入的state_dict的key和Model.state_dict()的key对应相等。 而我们在进行迁移学习的过程中…