最新发布第66页
Spark三种部署方式比较-哒哒的马蹄

Spark三种部署方式比较

目前Apache Spark支持三种分布式部署方式,分别是standalone、spark on mesos和 spark on YARN,其中,第一种类似于MapReduce 1.0所采用的模式,内部实现了容错性和资源管理,后两种则是未来发...
ddmit的头像-哒哒的马蹄Ddmit6年前
019220
Oracle Flashback Drop:撤销表删除操作-哒哒的马蹄

Oracle Flashback Drop:撤销表删除操作

Oracle中的flashback drop可以挽回DROP TABLE操作的影响。它可以被用于意外删除表操作之后的恢复。Flashback Drop比其他可以在这种情形下使用的恢复机制要快的多,比如point-in-time,而且不会...
ddmit的头像-哒哒的马蹄Ddmit6年前
017530
Union和Union All的区别-哒哒的马蹄

Union和Union All的区别

在数据库中,union和union all关键字都是将两个结果集合并为一个,但这两者从使用和效率上来说都有所不同。 union在进行表链接后会筛选掉重复的记录,所以在表链接后会对所产生的结果集进行排序...
ddmit的头像-哒哒的马蹄Ddmit6年前
019760
Spark配置参数-哒哒的马蹄

Spark配置参数

以下是整理的Spark中的一些配置参数,官方文档请参考Spark Configuration。 Spark提供三个位置用来配置系统: Spark属性:控制大部分的应用程序参数,可以用SparkConf对象或者Java系统属性设置...
ddmit的头像-哒哒的马蹄Ddmit6年前
018710
将bat文件或应用程序注册为windows服务(亲测可用)-哒哒的马蹄

将bat文件或应用程序注册为windows服务(亲测可用)

为你的bat文件或应用程序注册为windows服务的步骤如下: 第一步: 下载微软系统小工具 instsrv.exe和srvany.exe复制到C:\Windows\System32目录(64位操作系统复制一份到C:\Windows\SysWOW64目录...
ddmit的头像-哒哒的马蹄Ddmit6年前
034390
Spark提交任务显示waiting状态解决办法-哒哒的马蹄

Spark提交任务显示waiting状态解决办法

在使用Spark执行任务时,如果是同时提交多个任务,然后通过端口18080查看任务的状态会发现有的任务的状态为waiting状态,控制台提示:Initial job has not accepted any resources; check your ...
ddmit的头像-哒哒的马蹄Ddmit6年前
048770
IntelliJ IDEA使用Git时Fetch失败-哒哒的马蹄

IntelliJ IDEA使用Git时Fetch失败

使用IntelliJ Idea时,想从远程仓库执行fetch,push,pull命令时提示Could not read from remote repository.具体如下 14:31:53 Push failed: Failed with error: fatal: Could not read from r...
ddmit的头像-哒哒的马蹄Ddmit6年前
041881
Oracle数据库忘记用户密码的解决办法-哒哒的马蹄

Oracle数据库忘记用户密码的解决办法

在自己电脑上安装完oracle数据库,由于不是经常用,所以时常忘记密码。在这里把重新设置oracle密码的方法记下来,备忘。 1.首先打开cmd命令窗口,执行以下命令进入sql命令模式 sqlplus /nolog 2...
ddmit的头像-哒哒的马蹄Ddmit6年前
016760
使用Idea在Windows上开发spark程序-哒哒的马蹄

使用Idea在Windows上开发spark程序

环境搭建 由于平时开发工作主要在windows平台进行,所以在Windows平台搭建spark开发环境很有必要,在开始进行程序开发之前你可能需要参考以下文章: 在Windows平台安装Hadoop(不借助cygwin); ...
ddmit的头像-哒哒的马蹄Ddmit6年前
022360
在Windows上运行Apache Spark-哒哒的马蹄

在Windows上运行Apache Spark

这篇文章介绍如何在Windows上运行Apache Spark 。 一、环境要求 运行spark需要以下条件的支持: Java6+ Scala 2.10.x Hadoop 2.7.x 二、安装步骤 安装Jdk 7 或更高版本,设置Java_Home和Path环...
ddmit的头像-哒哒的马蹄Ddmit6年前
023660