0%
本地部署Zeppelin集成Kylin制作数据分析
通过Kylin
自带的简单图表展示来进行数据分析的你是否觉得还不够过瘾?想在酷炫的仪表盘上进行数据分析?今天就给大家带来一款上手较快,简单易用的数据驱动式Notebook工具——Apache Zeppelin
。将Zeppelin
与Kylin 集成后,你就可以通过它来定制你的数据可视化报告,更直观地体验Kylin
的分析“神”速啦~
与Kylin
一样, ApacheZeppelin
也是 Apache 软件基金会的顶级项目,是一款基于Web的Notebook(类似于IPython的Notebook),支持友好交互式的数据分析体验,原生就支持Spark、Scala、SQL、Shell、Markdown等编程或脚本语言,可以访问其官方网站
Apache Zeppelin
了解更多的信息。
本地搭建Kylin运行环境实践
Apache Kylin
是运行在Hadoop
集群之上的OLAP
数据分析应用服务,在Hadoop
生态中,大家对它的认可度和赞誉都很高,全球有超过1000+企业都在使用“麒麟”(Apache Kylin)这只神兽。而Hadoop
集群的部署又并非易事,那这是否就阻碍了我们探究Apache Kylin
的步伐呢?答案是否定的,通过借助强大的虚拟技术,在自己本地就能体验到“麒麟”的魅力,那么接下来就让我们一起进入“麒麟”的数据世界。
不能在HDFS Data节点上创建临时文件
在新创建的Hadoop
边缘节点上,尝试通过Hive CLI
模式进行数据插入操作,结果没有出现意想中的成功信息,反倒是捕获到如下的异常:
|
|
Win10常用的快捷操作方式
常言道“工欲善其事,必先利其器。”
不过从Mac
再过渡回来到Windows
确实是有诸多的不习惯,但仍是要学会克服,无它,工作是生存的根本技能。于是从网络上扒了下关于Win10
快捷键的分布,还是挺有趣的。记录也下部分常用快捷键,如下:
Axure教程:实现表格数据展示
通常在系统管理后台中,使用列表(表格)形式展示数据是最为常见的方式。而在使用Axure设计产品原型时想实现这个数据列表却不太容易,或许常见的做法就是使用矩形拼凑起来,还有就是直接使用表格控件来布局。但是这都不太方便,首先就是布局麻烦,其次就是数据修改比较麻烦。接下来给大家介绍下如何使用表格+中继器控件实现数据列表。
Axure教程:实现动态的遮罩层
今天在做产品原型设计时,遇到了个关于动态显现遮罩层的难点。“无奈"为追求高保真的效果,还是花了点心思做个原型实现。待做好回过头来看看的话,其实这个效果的难度也不大,只是看个人意愿是否想做而已。Axure本身就提供了模板的功能,也就是说只要实现一次但可以一劳永逸。下面就一起来看看这个遮罩层实现过程和效果吧。
Apache Nifi在Windows环境下搭建伪群集及证书登录
前些时间做了关于Apache Nifi
分布式集群的搭建分享,但很多时候要搭建分布式集群机器资源是个问题,而现在的单机的配置还是相当不错的,故现在就做个关于Windows上搭建个伪分布式集群的分享,同时通过另外一种方式实现Apache Nifi的授权认证。
系统环境及软件版本
Windows8.1
JDK1.8.0_131
Nifi-1.4.0
Nifi安装目录 | WEB端口 |
---|---|
xxx\nifi-ncm | 9443 |
xxx\nifi-cluster01 | 9444 |
xxx\nifi-cluster02 | 9445 |
(其它版本可参考此篇文章) 另在测试中发个问题,使用
Apache Nifi
内嵌的Zookeeper
搭建伪集群里启动总是提示端口占用的问题,故放弃只采用了单结点启动。
Apache Nifi集群搭建及用kerberos实现用户认证
最近这段时间在接触数据流式处理方面的事宜,用到了Apache NIFI现把安装配置中学习的一些经验分享下。此篇文章主要是针对集群及用户权限方面,关于 Apache NIFI 的介绍就不做过多的说明,直接引用官方的首页的说明如下图所示: