用户登录
还没有账号?立即注册
用户注册
点击换图
投稿取消
文章分类:
还能输入300字

上传中....

下决心一不改了

下决心一不改了

这个人很懒什么都没有留下

3年前

zookeeper windows 安装

1.概述
ZooKeeper是Hadoop的正式子项目,它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护、名字服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。
2.安装&配置
在apache的官方网站提供了好多镜像下载地址,然后找到对应的版本,目前最新的是3.3.6
Windows下安装
把下载的zookeeper的文件解压到指定目录
D:\machine\zookeeper-3.3.6>
修改conf下增加一个zoo.cfg
内容如下:
#Thenumberofmillisecondsofeachtick心跳间隔毫秒每次
tickTime=2000
#Thenumberofticksthattheinitial
#synchronizationphasecantake
initLimit=10
#Thenu
3年前

impala rpm 下载

一、Impala简介
ClouderaImpala对你存储在ApacheHadoop在HDFS,HBase的数据提供直接查询互动的SQL。除了像Hive使用相同的统一存储平台,Impala也使用相同的元数据,SQL语法(HiveSQL),ODBC驱动程序和用户界面(HueBeeswax)。Impala还提供了一个熟悉的面向批量或实时查询和统一平台。
二、Impala安装
1.安装要求
(1)软件要求
RedHatEnterpriseLinux(RHEL)/CentOS6.2(64-bit)
CDH4.1.0orlater
Hive
MySQL
(2)硬件要求
在Join查询过程中需要将数据集加载内存中进行计算,因此对安装Impalad的内存要求较高。
2、安装准备
(1)操作系统版本查看
>more/etc/issue
CentOSrelease6.2(Final)
Kernel\r
3年前

mapreduce 合并文件

1.jpg map会分别解析name1 ip1 tel1 = > key 为name1 value为ip1 tel1name1 age1 address1 = > key 为name1 value为age1 address1reduce输入为name1 name是否相同你不必考虑同一个名字会被记录



  1.jpg name为key其他字段为value 就可以了



  1.jpg 这种方式不知道在reduce中怎么将这些字段合并在reduce中怎么判断name是否相同,因为一次reduce只可以获取一条记录,无法进行两条记录比较
3年前

区块链 银行应用

根据麦肯锡分析,区块链技术影响最可能发生在支付及交易银行、资本市场及投资银行业务的主要应用场景。
数字货币:提高货币发行及使用的便利性,例如央行计划发行自己的额数字货币;跨境支付与结算:实现点到点交易,减少中间费用;票据与供应链金融业务:减少人为介入,降低成本及操作风险;证券发行与交易:实现准实时资产转移,加速交易清算速度(欧陆众筹就是一个典型的模式);客户征信与反欺诈:降低法律合规成本,防止金融犯罪。



  2016年也是区块链发展的元年,各路风投投入了上十亿美金资金投入到区块链的创业公司和项目。国外的ibm、德勤、德意志银行等纷纷发布了自己的区块链设计。纳斯达克已经正在使用区块链技术。证券、投票、数据存贮、物流等行业都已经出现相关的应用。
国内的一线金融和互联网公司如万向金融、乐视金融、平安金融等也加入了这场技术盛宴。欧陆众筹等微小企业更是走在了利用区块链技术的前列。
3年前

人工智能知识

概率论、数理统计、矩阵论、图论、随机过程、最优化、神经网络、贝叶斯理论、支持向量机、粗糙集、经典逻辑、非经典逻辑、认知心理学
当然本科微积分、线性代数是更基础的东西
还要学些编程工具,matlab,spss,C++或Java
—MayIinviteyoutohavedinnerthisFriday?
—_____.
A.Yes,please
B.Justhavealook
C.Nevermind
D.Yes,I'dloveto
关于什么是“智能”,就问题多多了。这涉及到其它诸如意识(consciousness)、自我(self)、思维(mind)(包括无意识的思维(unconscious_mind)等等问题。人唯一了解
3年前

vim c

跳动到第一个非空位置^
下面是我用vim的时候做的笔记........你可以看一下。
-------------------------------------------------------------
Linuxvim操作快捷键
----------------------
1、上k下j左h右l
2、编辑i、a、s
3、视图v
4、返回普通模式esc、ctrl+c、ctrl+[
5、执行命令:
6、添加新页tabnew页面名
7、拷贝y,p或者+y,+p
8、切换页面gt、gT(gotab)
9、分割页面shift+;->(sp文件名或vs文件名)
10、切换面板ctrl+w(表示进入切换状态)+[h,j,k,l](某一个就行)
11、保存w
12、退出q
13、保存退出wq
14、全部退出qa
15、按单词移动w,e,b
16、单行按字符查找f+字符(;继续,上一个)或者t代替f也可以
17
3年前

eclipse乱码

猪哥解答:
编码设置问题,项目properties中有设置,如果你找不到,那么可以这样直接设置编码---->
1、在Eclipse中打开有乱码的程序。
2、用快捷键打开编码设置Alt+回车(也可能是Ctrl+回车),然后选择编码设置,直到没有乱码。
我们常遇到的编码格式有:UTF-8,BIG5,GB2312
编码分IDE的编码方式和文件的编码方式!
更改这两个方式可以解决乱码的问题!
文件编码问题,在项目上右击,选择properties,设置编码即可~一般都是utf-8
IDE的编码方式:在file中!
你得保证前端显示页面也就是调用这个servlet的网页编码也是utf-8的。如果没问题,那么就在前端显示界面将要传递的参数做如下处理encodeuri(encod
3年前

shell mapreduce

用户配置并将一个Hadoop作业提到Hadoop框架中,Hadoop框架会把这个作业分解成一系列maptasks和reducetasks。Hadoop框架负责task分发和执行,结果收集和作业进度监控。
在编写MapReduce程序时,用户分别通过InputFormat和OutputFormat指定输入和输出格式,并定义Mapper和Reducer指定map阶段和reduce阶段的要做的工作。在Mapper或者Reducer中,用户只需指定一对key/value的处理逻辑,Hadoop框架会自动顺序迭代解析所有key/value,并将每对key/value交给Mapper或者Reducer处理。表面上看来,Hadoop限定数据格式必须为key/value形式,过于简单,很难解决复杂问题,实际上,可以通过组合的方法使key或者value(比如在key或者value中保存多个字段,每个字段用分隔符分开,或者value是个序列化后的对象,在Mapper中使用时,将其反序列化等)保存多重信息,以解决输入格式较复杂的应用。
2.2用户的工作
用户编写MapRed
3年前

sas-asmr

耳音、颅内高潮、耳骚等意思
--------------------------------------------------
ASMR (Autonomous sensory meridian response),中文译名"自发性知觉经络反应",是一个用于描述感知现象的新词,其特征是:对视觉、听觉、触觉、嗅觉或者感知上的刺激而使人在颅内、头皮、背部或身体其他范围内产生一种独特的、令人愉悦的刺激感。对于ASMR的本质和分类是有很大争议的,因为虽然ASMR有着数量庞大的狂热追随者和强有力的证据证明这种现象的存在,但是鲜有甚至根本没有科学的解释或者实验数据来佐证这一现象。
3年前

svg fill

如果是矩形的话,再加一个rect覆盖上去不描边,然后给这个rect fill。如果是非矩形。那你把四条line改成一个path来实现,还是用fill。如果你是因为四条直线的颜色不同,但是仍然需要填充的话,也可以使用path来画这四条直线,但是不描边。然后fill上色就可以了



  不明白啊 = =!
3年前

idea vim

作为一个将近8年工作经验的Java程序员,刚好这三样东西我都在用(都有超过4年以上的使用经验),而且用得都很欢,这些年来,这些工具实实在在帮了我很大的忙,让我工作效率更高,有了更多时间扯淡,看新闻。所以容我好好说说选择OSX+Vim+IntellijIDEA的原因。
为什么选择OSX?
漂亮、稳定、Unix环境、各种命令行工具。我可以直接在自己机器上装Nginx,MySQL等和线上部署环境一致,多happy啊。Windows很难做到这一点。
为什么是Vim?
花半个月时间学习Vim后,编辑文件的效率是其它工具的好几倍,为什么不用?当你熟悉使用Vim后,你看其它人慢吞吞编辑文件时,心里总会泛起为他着急的心情。另外我使用Vim的一个最大用途是批量修改文件,列模式,正则表达式替换,区域替换,没有比这更好用的工具了。对了,前两天我们运维同学在系统性学习Vim1个多月以后,忽然发了一个感慨,表示用Vim编辑文件时,那种随心所欲的感觉实在太秒了。
为什么IntellijIDEA,不用Eclipse?
作为使用了IntellijIDEA7年老
3年前

基于Fiddler实现修改接口返回数据进行测试

这篇文章主要介绍了基于Fiddler实现修改接口返回数据进行测试,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
  方法介绍与比对
  在测试的过程中,有的需求是这样的,它需要你修改接口返回的数据,从而检查在客户端手机app内是否显示正确,这也算是一种接口容错测试,接口容错测试属于app性能(专项)测试的其中一种。
  通过Fiddler我们可以有好几种方法修改返回结果:
  第一种:在Fiddler底部的黑色命令行显示区域通过bpuurl的形式按回车之后进行拦截,通过手机app访问指定接口,拦截到后可以选择response文件后通过拦截;
  第二种:在AutoRespnder里AddRule,然后在RuleEditor里设置response的内容;
  第三种:在Rules设置中选择AutomaticBreakpoints中的AfterResponses进行拦截。
  第一种不能自定义创
3年前

云计算与大数据将成为未来投资热点?


    有人预测,在2014年将会有近80%的国内企业增加在云计算方面的投资力度,中国企业对公有云和私有云关注力度相差不大。
  
  2013年,云计算、大数据及信息管理、数据中心整合是中国客户头三位的IT开支。而且这三个方面都大大高于全球同行。在虚拟化、IT现代化、移动技术、IT治理、VoIP及统一通信与协作方面,则明显比全球同行低。
    根据预测显示,到2016年之前,中国CIO重点关注的技术重点将会停留在商业智能应用、云计算和移动技术这三大方面。会有27%的企业选择外
3年前

大数据正新酝造一个支柱产业——物流


    大数据对物流的影响越来越大。
  
  提到物流,笔者首先想到了仓库,那种大集团企业里特别大的仓库,不知道您参观过没有?
  
  笔者有一个同学大学是学化工专业的,本科毕业后去做了仓库管理,相比较化工企业生产线工作岗位来说,物流仓库管理岗位没有那么多污染,也没有化学实验可能的烧杯爆炸,环境要舒服很多。
    金博尔大学拉尔夫教授从1973年获得博士学位,四十年来研究人机系统与用户系统设计,他认为,海量数据分析时代,企业
3年前

确保云中的数据安全


    云计算的早期采用者已经在引吭高歌,对云计算提供的弹性、可扩展性以及灵活性赞不绝口,这最终引起了企业的注意。但随着公有云变得越来越成熟,有关隐私以及数据主权的关注正在阻碍拥有国际用户的组织部署云服务。
  
  云服务商喜欢将云描述为超越物理位置以及政治管辖权限制的无限资源,但事实并非如此。因为你的数据在云中并不意味着其不受当地法律的监管。而且,去年有关美国政府监视范围的启示已经给很多组织使用公有服务的意愿蒙上了一层阴影,尤其是由美国公司所提供的公有云服务。
  
  对于拥有欧洲用户的组织来说,问题尤为严重,因为欧洲拥有严格的数据隐私规则。Clarify360公司是一家云以及数据中心外包咨询公司,该公司融合云与数据中心业务副总裁JoPeterson说云计算绝不会受这些限制。如果公司的顾客受特定规则的支配,那么其所在的公司应该也不例外。
  
  云技术合作伙伴公司(CTP)
3年前

如何在Linux下使用Gitblit工具创建Git仓库服务


  嗨!朋友,今天我们将学习如何在你的Linux服务器或者PC上安装Gitblit工具。首先,我们看看什么是Git,它的功能以及安装Gitblit的步骤。Git是分布式版本控制系统,它强调速度、数据一致性,并且支持分布式、非线性工作流。它最初由LinusTorvalds在2005年为Linux内核设计和开发,使用GPLv2证书,并从此成为软件开发中使用最广泛的版本控制系统。
  Gitblit是完全开源的软件,它基于纯粹的Java堆栈,被设计以在Git仓库速度和效率方面胜任从小型到极大型的项目。它很容易学习和上手,并有着闪电般的性能。它在很多方面远胜Subversion、CVS、Perforce和ClearCase等SCM(版本控制)工具,比如,如快速本地分支、易于暂存、多工作流等。
  Gitblit的功能它可以做为一个哑仓库视图,没有管理控制
3年前

360极速浏览器国际版更改语言方法


  360极速浏览器更改语言方法
  1.点击右上角的扳手图标,选择“Settings”,进入设置界面,然后点击“Advancedsettings”,再点击【Languageandiputsettings】按钮。
  360极速浏览器
  2.点击【Add】按钮,选择繁体中文,点击【OK】。
  360极速浏览器
  3.在中文(繁体中文)语言下,点击【Display360Bro
3年前

简介Redis中的showlog功能


  Redis有一个实用的slowlog功能,正如你可以猜到的,可以让你检查运行缓慢的查询.Slowlog将会记录运行时间超过Y微秒的最后X条查询.X和Y可以在redis.conf或者在运行时通过CONFIG命令:
 
 
代码如下:
CONFIGSETslowlog-log-slower-than5000
CONFIGSETslowlog-max-len25
   
  进行设置。
3年前

Python3 实现爬取网站下所有URL方式

今天小编就为大家分享一篇Python3实现爬取网站下所有URL方式,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
  获取首页元素信息:
  目标test_URL:http://www.xxx.com.cn/
  首先检查元素,a标签下是我们需要爬取得链接,通过获取链接路径,定位出我们需要的信息
soup=Bs4(reaponse.text,"lxml")urls_li=soup.select("#mainmenu_top>div>div>ul>li")
  首页的URL链接获取:
  完成首页的URL链接获取,具体代码如下:
'''遇到不懂的问题?Python学
3年前

理解Lua中的__index和__newindex

这篇文章主要介绍了理解Lua中的__index和__newindex,本文给出了三段代码来讲解__index和__newindex,代码中包含详细注释,需要的朋友可以参考下
  
复制代码代码如下:
--example: 
localtemp_table={ 
  10, 
  1, 
  Index1="hello", 
  Index2="world", 
  Index3="lua", 
  Index4
上一页  1  2  3  4  ...  下一页