• <sup id="mk476"></sup>
    <dl id="mk476"></dl>
  • <progress id="mk476"><tr id="mk476"></tr></progress>
    <div id="mk476"><tr id="mk476"></tr></div>
    <sup id="mk476"><ins id="mk476"></ins></sup>
  • <progress id="mk476"></progress>
    <div id="mk476"></div>
    <div id="mk476"><tr id="mk476"></tr></div>
  • <div id="mk476"></div>
    <dl id="mk476"><s id="mk476"></s></dl><dl id="mk476"></dl><div id="mk476"></div>
  • <div id="mk476"></div>
    <dl id="mk476"><ins id="mk476"></ins></dl>
    摘要: 1、准备安装包 2、Spark Standalone 即独立模式 2.1、解压安装包到你安装的目录。 2.2、拷贝 conf 目录下的 slaves 文件,将 slave 节点的 hostname 写在文件中,每行一个。 2.3、拷贝 conf 目录下的 spark-env.sh 文件,将 SPAR阅读全文
    posted @ 2019-04-22 12:15 黑泽君 阅读(12) 评论(0) 编辑
    摘要: 问题再现: 使用本机 Ecilpse (Windows环境) 去访问远程 hadoop 集群出现以下异常: 问题原因: 因为远程提交的情况下如果没有 hadoop 的系统环境变量,就会读取当前主机的用户名,所以 hadoop 集群的节点中没有该用户名的权限,所以出现的异常。 问题解决: a、如果是测阅读全文
    posted @ 2019-04-21 20:52 黑泽君 阅读(9) 评论(0) 编辑
    摘要: 第1章 Spark 概述1.1 什么是 Spark1.2 Spark 特点1.3 Spark 的用户和用途第2章 Spark 集群安装2.1 集?#33322;?#33394;2.2 机器准备2.3 下载 Spark 安装包2.4 配置 Spark Standalone 模式2.5 配置 Spark History Serv阅读全文
    posted @ 2019-04-21 15:58 黑泽君 阅读(129) 评论(0) 编辑
    摘要: 1、将项目软件工具包导入 2、项目思路: 2.1、读取 HDFS 数据进行 ETL 清洗操作,并将最终结果写入到 HBase ?#23567;?2.2、从 HBase 中读取数据,进行新增用户统计分析操作,并将结果写入到 Mysql。 3、细节实现 数据清洗: 3.1、LoggerUtil.java 3.1.1阅读全文
    posted @ 2019-04-20 15:45 黑泽君 阅读(15) 评论(0) 编辑
    摘要: 今天,我在修改Eclipse项目的 JRE 环境时,老是报这个错误,很纳闷,到底是由于什么原因,导致的这个问题: 后面发现了,是在这个项目里面的 .classpath 的这个文件有问题,所?#36828;?#24453;这个问题的解决的方法就是: 可以新建一个类似的项目,然后把那个项目中的 .classpath 的替换进来,阅读全文
    posted @ 2019-04-20 11:16 黑泽君 阅读(11) 评论(0) 编辑
    摘要: 1. 问题描述 在 Hive1.2.1 版本运行如下 HQL 时: 会抛出如下异常: 2. 问题分析 在 Hive1.2.0 版本开始增加了如下配置选项,默?#29616;?#20026; true。 该选项的目的是:是否启用对 SQL2011 保留关键字的支持。 启用后,将支持部分 SQL2011 保留关键字。 3. 解决阅读全文
    posted @ 2019-04-18 11:37 黑泽君 阅读(12) 评论(0) 编辑
    摘要: 二十、数据分析20.1、统计表20.2、目标20.3、代码实现20.3.1、Mapper20.3.2、Reducer20.3.3、Runner20.3.4、?#36828;?#20041; OutPutFormat20.3.5、测?#36828;?#21313;一、Hive 之 hourly 分析21.1、目标21.2、目标解析21.3、创建 Mys阅读全文
    posted @ 2019-04-17 23:02 黑泽君 阅读(17) 评论(0) 编辑
    摘要: 十六、数据处理16.1、ETL 操作16.2、HBase 设计16.2.1、每天1张表16.2.2、倒序或在前缀上加数字16.2.3、预分区16.3、MapReduce 分析过程16.4、Hive 分析过程16.5、Mysql 表结构设计16.5.1、常用关系型数据库表模型16.5.2、表结构十七、阅读全文
    posted @ 2019-04-16 20:53 黑泽君 阅读(45) 评论(0) 编辑
    摘要: 1、问题描述 最近在做有关大数据的项目中,解码客户端的请求参数时抛出异常: java.lang.IllegalArgumentException: URLDecoder: Incomplete trailing escape (%) pattern 详细错误如下: 截图如下: 我的主要代码如下:(代阅读全文
    posted @ 2019-04-16 19:55 黑泽君 阅读(14) 评论(0) 编辑
    摘要: 对于 Linux 虚拟机,您可以使用命令行工具手动安装或升级 VMware Tools。 本次演示的 Linux 虚拟机为 CentOS6.8。 先决条件 开启虚拟机。 确认客户机操作系统正在运?#23567;?由于 VMware Tools 安装程序是使用 Perl 编写的,因此,请确认在客户机操作系统中安装阅读全文
    posted @ 2019-04-15 21:30 黑泽君 阅读(9) 评论(0) 编辑
    摘要: 十一、Nginx11.1、介绍11.2、常见其他 Web 服务器11.3、版本11.4、Nginx 安装11.5、目录结构11.6、操作命令十二、Mysql12.1、介绍12.2、关系型数据库(SQL)种类12.3、特征12.4、术语12.4、与非关系型数据库比较(Not Only SQL)12.4阅读全文
    posted @ 2019-04-15 18:26 黑泽君 阅读(17) 评论(0) 编辑
    摘要: 一、准备工作二、安装过程三、配置环境变量四、Eclipse 开发环境配置 一、准备工作 安装环境:CentOS 6.8 桌面版(其他发行版本安装过程基本一样)所需软件:(下载时选择 Linux 版 tar.gz 格式) 1、Oracle jdk 各个版本下载地址: https://www.oracl阅读全文
    posted @ 2019-04-15 18:23 黑泽君 阅读(14) 评论(0) 编辑
    摘要: 一、项目开发流程1.1、项目调研1.2、项目需求分析1.3、方案设计1.3.1、概要设计1.3.2、详细设计1.4、编码实现1.4.1、单元测试1.4.2、集成测试1.4.3、压力测试1.4.4、用户测?#36828;?#22823;数据常用应用2.1、数据出售2.2、数据分析2.2.1、百度统计2.2.2、友盟2.2.3阅读全文
    posted @ 2019-04-14 23:49 黑泽君 阅读(29) 评论(0) 编辑
    摘要: 问题描述: 由于使用频?#24335;系停?#20197;及促进网页编码规范,Chrome 浏览器在 55 版本以后?#22659;?#20102;手动设置网站编码的功能。 但是对于部分没有设置编码或编码设置不正确的网站,新版 Chrome 浏览器可能会因为无法准确判断其使用的编码,导致网站显示乱码,本文说明如何解决这个问题。 解决办法: 可以通过 阅读全文
    posted @ 2019-04-14 20:08 黑泽君 阅读(21) 评论(0) 编辑
    摘要: 一 Storm 概述1.1 离线计算是什么?1.2 流式计算是什么?1.3 Storm 是什么?1.4 Storm 与 Hadoop 的区别1.5 Storm 应用场景及行业案例1.5.1 运用场景1.5.2 典型案列1.6 Storm 特点二 Storm 基础知识2.1 Storm 编程模型2.1阅读全文
    posted @ 2019-04-13 23:41 黑泽君 阅读(71) 评论(0) 编辑
    摘要: 第十九章 Scala语言的数据结构和算法19.1 数据结构(算法)的介绍19.2 看几个?#23548;?#32534;程中遇到的问题19.2.1 一个五子棋程序19.2.2 约瑟夫问题(丢手帕问题)19.2.3 其它常见算法问题19.3 稀疏数组 sparsearray19.3.1 基本介绍19.3.2 应用实例19.3.阅读全文
    posted @ 2019-04-12 13:24 黑泽君 阅读(112) 评论(0) 编辑
    摘要: IDEA 会?#36828;?#26174;示形式参数的变量名称,这在一开始使用?#22791;?#35273;很方便、友好。有时候也会显得排版很乱,下面是取消?#36828;?#26174;示形式参数名称的方法: File -> Settings -> Editor -> General -> Appearance 把 Show parameter name hints 选阅读全文
    posted @ 2019-04-07 23:11 黑泽君 阅读(14) 评论(0) 编辑
    摘要: 第十七章 设计模式17.1 学习设计模式的必要性17.2 掌握设计模式的层次17.3 设计模式的介绍17.4 设计模式的类型17.5 简单工厂模式(生产类)17.5.1 基本介绍17.5.2 看一个具体的需求17.5.3 使用传统的方式来完成17.5.4 使用简单工厂模式来完成17.6 工厂方法模式阅读全文
    posted @ 2019-04-07 21:03 黑泽君 阅读(57) 评论(0) 编辑
    摘要: 第十五章 客户信息管理系统15.1 项目的开发流程15.2 项目的需求分析15.3 项目的界面15.4 项目的设计-程序框架图15.5 项目的功能实现15.5.1 完成 Customer 类15.5.2 完?#19978;?#31034;主菜单和退出软件功能15.5.3 完?#19978;?#31034;客户列表的功能15.5.4 完成添加客户的功能阅读全文
    posted @ 2019-04-06 01:25 黑泽君 阅读(77) 评论(2) 编辑
    摘要: 第十四章 使用递归的方式去思考,去编程14.1 基本介绍14.2 Scala 提倡函数式编程(递归思想)14.3 应用案例1-求和14.4 应用案例2-求最大值14.5 应用案例3-翻转字符串14.6 应用案例4-求阶乘14.7 应用案例5-求x的n次方14.8 应用案例6-求斐波那契数14.9 作阅读全文
    posted @ 2019-04-03 17:45 黑泽君 阅读(27) 评论(0) 编辑
    摘要: 第十三章 函数式编程-高级13.1 偏函数(partial function)13.1.1 提出一个需求,引出思考13.1.2 解决方式-filter + map 返回新的集合13.1.3 解决方式-模式匹配13.1.4 偏函数的基本介绍13.1.5 偏函数的快速入门13.1.6 偏函数的小结13.阅读全文
    posted @ 2019-04-03 09:36 黑泽君 阅读(112) 评论(0) 编辑
    摘要: 第十一章 数据结构(下)-集合操作11.1 集合元素的?#25104;?map11.1.1 map ?#25104;?#20989;数的操作11.1.2 高?#32512;?#25968;基本使用案例1+案例211.1.3 使用 map ?#25104;?#20989;数来解决11.1.4 模拟实现 map ?#25104;?#20989;数的机制11.1.5 课堂练习11.2 集合元素的扁平-flatMap11阅读全文
    posted @ 2019-04-02 16:32 黑泽君 阅读(128) 评论(3) 编辑
    摘要: 第十章 数据结构(上)-集合10.1 数据结构特点10.1.1 Scala 集合基本介绍10.1.2 可变集合和不可变集合举例10.2 Scala 不可变集合继承层次一览图10.2.1 图10.2.2 小结10.3 Scala 可变集合继承层次一览图10.3.1 图10.3.2 小结10.4 数组-阅读全文
    posted @ 2019-03-31 18:00 黑泽君 阅读(147) 评论(0) 编辑
    摘要: 第八章 面向对象编程-高级8.1 静态属性和静态方法8.1.1 静态属性-提出问题8.1.2 基本介绍8.1.3 伴生对象的快速入门8.1.4 伴生对象的小结8.1.5 最佳?#23548;?使用伴生对象解决小孩游戏问题8.1.6 伴生对象-apply 方法8.2 单列对象8.3 接口8.3.1 回顾 Java阅读全文
    posted @ 2019-03-30 14:58 黑泽君 阅读(115) 评论(0) 编辑
    摘要: 第七章 面向对象编程-中级7.1 包7.1.1 Java 中的包7.1.2 Scala 中的包7.1.3 Scala 包的特点概述7.1.4 Scala 包的命名7.1.5 Scala 会?#36828;?#24341;入的常用包7.1.6 Scala 包注意事项和使用细节7.1.7 包对象7.1.8 包对象的底层实现机制分阅读全文
    posted @ 2019-03-28 19:06 黑泽君 阅读(213) 评论(1) 编辑
    摘要: 第五章 函数式编程-基础5.1 函数式编程内容说明5.1.1 函数式编程内容5.1.2 函数式编程授课顺序5.2 函数式编程介绍5.2.1 几个概念的说明5.2.2 方法、函数、函数式编程和面向对象编程关系分析图5.2.3 函数式编程小结5.3 为什么需要函数5.4 函数的定义5.4.1 函数的定义阅读全文
    posted @ 2019-03-26 23:58 黑泽君 阅读(127) 评论(0) 编辑
    摘要: 第三章 运算符3.1 运算符介绍3.2 算术运算符3.2.1 介绍3.2.2 算术运算符一览图3.2.3 案例演示3.2.4 细节说明3.3.5 课堂练习3.3 关系运算符(比较运算符)3.3.1 基本介绍3.3.2 关系运算符一览图3.3.3 案例演示3.3.4 细节说明3.4 逻辑运算符3.4.阅读全文
    posted @ 2019-03-24 18:45 黑泽君 阅读(46) 评论(0) 编辑
    摘要: 第二章 变量2.1 变量是程序的基本组成单位2.2 Scala 变量的介绍2.2.1 概念2.2.2 Scala 变量使用的基本步骤2.3 Scala 变量的基本使用2.4 Scala 变量使用说明2.4.1 变量声明基本语法2.4.2 注意事项2.5 Scala 程序中 +号 的使用2.6 Sca阅读全文
    posted @ 2019-03-23 17:39 黑泽君 阅读(163) 评论(0) 编辑
    摘要: 第一章 Scala 语言概述1.1 why is Scala 语言?1.2 Scala 语言诞生小故事1.3 Scala 和 Java 以及 jvm 的关系分析图1.4 Scala 语言的特点1.5 Windows 下搭建 Scala 开发环境1.6 Linux 下搭建 Scala 开发环境1.7 阅读全文
    posted @ 2019-03-23 09:29 黑泽君 阅读(189) 评论(0) 编辑
    摘要: 电信客服分析平台_学习总结阅读全文
    posted @ 2019-03-22 11:23 黑泽君 阅读(64) 评论(0) 编辑
    江苏11选5软件