花费 258ms 找到34条记录
Hbase备份和还原
2018年07月02 - hbase表备份 /data/soft/hbase/bin/hbase org.apache.hadoop.hbase.mapreduce.Export itdaan:org file:///data
Spark Standalone Cluster模式安装和配置
2018年03月02 - ### 1、手动启动一个spark集群 启动standalone的master节点 ```shell ./sbin/start-master.sh ``` 一旦启动后,master会打印一个sp
Java,Python,Scala三种语言开发并部署Spark的WordCount程序
2018年02月24 - # Java,Python,Scala三种语言开发并部署Spark的WordCount程序 一、Java开发并部署Spark的wordcount Java实现WordCount程序: ```ja
网页爬虫富文本内容判重及余弦相似度判定
2018年03月12 - 我们知道很多文章爬取下来有可能是转载的,很多用户只是在文章开头和结尾加上原文的出处,这样的内容会存在很多重复的文章。 按理来说,文章与文章之间的相似度比较可以使用余弦定理来判断,但是爬虫,不可能
scala访问redis数据库代码实现
2018年05月15 - 首先添加jedis的jar: ```xml redis.clients jedis 2.7.3 ``` 接下来就是直接贴代码了,请看如下scala class,非常
hive查看表的分区信息
2018年06月01 - show partitions table_name ;//查看表的所有分区 desc table_name partition(log_date=20180212); desc extended
查询hbase映射到Hive表的诡异问题及总结
2018年02月24 - # 查询hbase映射到Hive表的诡异问题及总结 hive中dmp_device_info为映射到hbase中的dmp:device_info表,表结构如下: ```mysql CREATE E
Hive使用UDAF自定义聚合函数
2018年02月28 - 在使用Hive进行数据处理时,经常会用到group by语法,但对分组的合并操作,hive没有MySQL支持得好: group_concat([DISTINCT] 要连接的字段 Order BY AS
查询hbase映射到Hive表的诡异问题及总结
2018年11月21 - # 查询hbase映射到Hive表的诡异问题及总结 hive中hive_table表为映射到hbase中的hbase_table表,表结构如下: ```mysql CREATE EXTERNAL
centos安装squid简单步骤搭建代理服务器
2018年04月14 - 一、系统环境 操作系统:CentOS release 6.7 (Final) SELINUX=disabled HTTP Service: stoped 二、安装Squid服务 2.1 检查squid

赞助商链接
 
© 2014-2019 ITdaan.com 粤ICP备14056181号  

赞助商广告