知乎登录逻辑 1.创建spider脚本: 使用命令以base为模版创建一个spider文件 >>>scrapy genspider zhihu www.zhihu.com 2.重写start_reque…
标签:start
Kafka入门系列—6. Kafka 常用命令及Java API使用
常用命令 启动Zookeeper ./zkServer.sh start-foreground 可选参数: ./zkServer.sh {start|start-foreground|stop|restart|statu…
MongoDB 3.6初步(创建管理员、常用命令、角色、权限)
创建管理员 Start MongoDB without access control. 先启动MongoDB服务: D:\MongoDB\bin>net start MongoDB 或 mongod –…
postgresql 9.6 常规场景操作
服务启动\关闭\重启 #/etc/init.d/postgresql-9.6 start\stop\restart ./pg_ctl -D /var/lib/pgsql/9.5/data start -l /var/li…
spark:SparkContext原理
1.创建SparkContext会 createTaskScheduler(),DAGScheduler,SparkUI. createTaskScheduler在里面会创建3个对象,TaskSchedulerImpl,…
解决There are 0 datanode(s) running and no node(s) are excluded in this operation.
出现上述问题可能是格式化两次hadoop,导致没有datanode 解决方法1:重启linux,再使用start-dfs.sh和start-yarn.sh 重启一下hadoop 解决办法2:找到hadoop安装目录下 h…
Hadoop第一次部署后启动的linux命令翻译
[hadoop@DataWorks hadoop]$ ./sbin/start-all.sh This script is deprecated. Instead Use start-dfs.sh and start-y…
spark streaming + kafka +python(编程)初探
一、环境部署 hadoop集群2.7.1 zookeerper集群 kafka集群:kafka_2.11-0.10.0.0 spark集群:spark-2.0.1-bin-hadoop2.7.tgz 环境搭建可参考我前面…
[spark] spark推测式执行
概述 推测任务是指对于一个Stage里面拖后腿的Task,会在其他节点的Executor上再次启动这个task,如果其中一个Task实例运行成功则将这个最先完成的Task的计算结果作为最终结果,同时会干掉其他Execut…
HIVE posexplode 时间区间拆分成单独行
select tf.*,t.*, date_add(start_date,pos) from ( select 'a' as a, '2018-11-01' as start_date, '2018-12-01' as …
Chronometer
简介 官方提供的简易版时间显示控件Google传送门 计时功能 开始计时 chronometer.start() 停止计时 chronometer.stop() 重置时间 chronometer.setBase(Syst…
安装Genymotion时出现了“Unable to start the virtual device”
很久之前写的一篇CSDN博文,为了同步CSDN以及简书,现在迁移过来 承接上一篇,上一篇我说了一个安装androidStudio的问题,在我安装Genymotion的时候又出现了一个问题:“Unable to start…