最新消息:非无江海志,潇洒送日月

最新发布 第6页

江海志の博客: 记录学习生活的点点滴滴

Big Data

Ubuntu下使用Spark Streaming处理来自FlumeNG的流数据基本方法

江海志 8年前 (2015-11-17) 5319浏览 0评论

SparkStreaming是一个对实时数据流进行高通量、容错处理的流式处理系统,可以对多种数据源(如Kdfka、Flume、Twitter、Zero和TCP 套接字)进行类似map、reduce、join、window等复杂操作,并将结果保存到外部文件系统、数据库或应用到实时仪表盘。   Spark Streaming流式处理系统特点有:  将流式计算分解成一系列...

Big Data

Linux下基于Hadoop的Spark1.2单机安装

江海志 8年前 (2015-11-15) 5091浏览 0评论

一,安装环境 硬件:虚拟机 操作系统:Centos 6.4 64位 IP:10.51.121.10 主机名:datanode-4 安装用户:root Hadoop:Hadoop2.6,Hadoop2.6的单机安装请见:http://www.cnblogs.com/zouzhongfan/p/4309405.htmlHive:Hive0.13,Hive0.13的安装请见:http...

Big Data

Ubuntu下基于hadoop安装Spark开发环境

江海志 8年前 (2015-11-15) 4835浏览 0评论

Ubuntu 64基本环境配置 安装JDK,下载jdk-8u45-linux-x64.tar.gz,解压到/opt/jdk1.8.0_45            下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html 安装scala,下载scala-2.11.6....

生活感悟

新托福iBT口语练习绝好资料——黄金口语80题含参考答案

江海志 8年前 (2015-11-15) 5062浏览 0评论

新托福黄金口语80题,自从放出以来已经成为了各位考友恒久追寻的一份重要资料,今天无老师特地为大家送上一份特别大礼,就是《新托福iBT口语黄金80题(答案版)》,虽然现在各种各样的口语题很多,但是这份新托福黄金口语80题还是最经典的,因为他很好的总结了口语1、2题会碰到的题目的类型,可以帮助各位考友在考前有效地对于大体思路有一个预先的准备。而且无老师今天为大家找到的这份资料,十分...

Big Data

Hadoop2.6在Linux下单机安装教程

江海志 9年前 (2015-11-10) 6772浏览

一,安装环境 硬件:虚拟机 操作系统:Centos 6.4 64位 IP:10.51.121.10 主机名:datanode-4 安装用户:root 二,安装JDK 安装JDK1.6或者以上版本。这里安装jdk1.6.0_45。 下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html 1...

编程开发

RAID技术介绍,对比和总结

江海志 9年前 (2015-10-10) 4972浏览 0评论

简介 RAID是一个我们经常能见到的名词。但却因为很少能在实际环境中体验,所以很难对其原理 能有很清楚的认识和掌握。本文将对RAID技术进行介绍和总结,以期能尽量阐明其概念。 RAID全称为独立磁盘冗余阵列(Redundant Array of Independent Disks),基本思想就是把多个相对便宜的硬盘组合起来,成为一个硬盘阵列组,使性能达到甚至超过一个价格昂贵、 ...

编程开发

PostgreSQL学习手册(PL/pgSQL过程语言)

江海志 9年前 (2015-09-29) 3673浏览 0评论

一、概述:     PL/pgSQL函数在第一次被调用时,其函数内的源代码(文本)将被解析为二进制指令树,但是函数内的表达式和SQL命令只有在首次用到它们的时候,PL/pgSQL解释器才会为其创建一个准备好的执行规划,随后对该表达式或SQL命令的访问都将使用该规划。如果在一个条件语句中,有部分SQL命令或表达式没有被用到,那么PL/pgSQL解释器在本次调用中将不会为其准备执行...

Big Data

《Hadoop基础教程》之初识Hadoop

江海志 9年前 (2015-09-24) 4277浏览 0评论

Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究Hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不压身。 《Hadoop基础教程》是我读的第一本Hadoop书籍,当然在线只能试读第一章,不过对Hadoop历史、核心技术和应用场景有了初步了解。 Hadoop历史 雏形开始于2002年的Apache的Nutch,Nutch...

编程开发

Dijkstra算法求最短路径java实现程序

江海志 9年前 (2015-09-19) 4318浏览 0评论

Dijkstra(迪杰斯特拉)算法是典型的最短路径路由算法,用于计算一个节点到其他所有节点的最短路径。主要特点是以起始点为中心向外层层扩展,直到扩展到终点为止。  Dijkstra一般的表述通常有两种方式,一种用永久和临时标号方式,一种是用OPEN, CLOSE表方式用OPEN,CLOSE表的方式,其采用的是贪心法的算法策略,大概过程如下:1.声明两个集合,open和close...

Big Data

谷歌MapReduce简单介绍入门教程

江海志 9年前 (2015-09-18) 5405浏览 0评论

江湖传说永流传:谷歌技术有”三宝”,GFS、MapReduce和大表(BigTable)! 谷歌在03到06年间连续发表了三篇很有影响力的文章,分别是03年SOSP的GFS,04年OSDI的MapReduce,和06年OSDI的BigTable。SOSP和OSDI都是操作系统领域的顶级会议,在计算机学会推荐会议里属于A类。SOSP在单数年举办,而OSDI...

编程开发

NFS服务介绍以及安装配置使用教程

江海志 9年前 (2015-08-27) 3508浏览 0评论

【什么是NFS】        NFS会经常用到,用于在网络上共享存储。这样讲,你对NFS可能不太了解,笔者不妨举一个例子来说明一下NFS是用来做什么的。假如有三台机器A、B、C,它们需要访问同一个目录,目录中都是图片,传统的做法是把这些图片分别放到A、B、C。但是使用NFS只需要放到A上,然后A共享给B和C即可。访问的时候,B和C是通过网络的方式去访问A上的那个目录...

生活感悟

iPhone进入DFU模式的方法

江海志 9年前 (2015-06-30) 4504浏览 0评论

手动进入DFU模式:开机状态,用数据线跟电脑连接好。先按住关机键2秒,然后,同时按住关机键和Home键8-10秒;最后,只按住Home键15秒。 2 检查否正确进入DFU模式:在DFU模式下,手机是黑屏的。如果没有成功,请重新进行第一步。 转载请注明:江海志の博客 » iPhone进入DFU模式的方法...

生活感悟

最新版本tage1.1.1破解详细教程

江海志 9年前 (2015-06-26) 6450浏览 0评论

惊喜连连,今天给大家带来最新版本tage1.1.1版本的破解教程,还没有用上最新版本的小伙伴们福利来了,再也不用等激活码了。 废话不多说,现在开始教程: 一、首先添加源:apt.so/ios8phone 下载破解版本tage1.0.6版本 二、下载cracktool2.2 版本 三、打开tage破解版1.06,连续点击两次crack激活。 (记住得先激活旧版) 四、在cydia...

编程开发

ubuntu14.04安装ffmpeg

江海志 9年前 (2015-05-08) 15550浏览 8评论

文章搬至CSDN: http://blog.csdn.net/redstarofsleep/article/details/45092145   下载FFmpeg和libx264的包 ffmpeg-2.4.1.tar.bz2  last_x264.tar.bz2 libx264需要yasm,所以先安装yasm Java代码 apt-get install ...