mapreduce job参数
Job的运行过程中会有一系列的sort的操作，并且reduceinputgroups的counter变量的值远远要小于reduceinputrecordscounter。
Job在mapper完成以后，shuffle过程中传输了大量的中间结果文件（例如：每个slave上的mapoutputbytes都好几个GB）
在job的webui上的counter中看到，job的spilledrecords的数量远远要大于mapoutputrecords的数量。
如果job的算法中涉及到许多的排序操作，可以尝试写一个Combiner来提高job性能。hadoop的mapreduce框架中提供了Combiner来减少中间结果对磁盘的写入和减少中间结果在mapper和reducer之间的传输，通常这两个方面都是非常影响作业性能的两个方面。
性能对比:
修改wordcount程序，将setCombinerClass去掉，或者不去掉，两种方式对比运行。去掉的结果是，让每一个mapper的运行时间由原先的33s变成了平均48s，并且shuffle过程中的
从1到N 数据中心变革向纵深发展
随着高速带宽、移动互联网的快速发展，以及各类智能终端的普及，海量的数据无时不刻不在被传输，作为海量数据的存储和交换中心，数据中心正在发挥着数据“核心枢纽”的作用。
海量数据的存储与传输，带动了各行业对于数据中心的需求，但同时也对数据中心提出了全新的挑战。在云计算、大数据和人工智能的时代，为了应对市场、技术和用户需求的发展，数据中心正在面临从政策、技术、产业链、服务应用等全方位的变革。
政策密集出台引导行业有序发展
近几年，数据中心的增长潜力开始爆发，产业规模年增长率超过30%，数据中心建设呈现爆发性增长，由此带来的数据中心盲目建设、布局不合理，节能水
hadoop权威指南5中文版
百度私信你了，有《hadoop权威指南》第三版中文的PDF
楼主有没有，有了的话共享一下了
楼主好人，活该一生平安
感谢楼主。。。。。。。。。。十分
大哥 求共享一下
楼主，求分享
vim配置文件在哪
配置文件在哪里
当我们使用Vim时,你需要知道一系列的配置文件.这些配置文件的位置依赖于Vim的安装位置和你所使用的操作系统.
通常,有三个配置文件,你是必须知道在哪里能找到的.vimrc
这是Vim最主要的配置文件.它有两个版本,全局版本(global)和用户版本(personal)).
全局vimrc文件放在你安装Vim的目录中.你可以打开vim,在普通模式下输入下面的命令来找出这个目录的位置:echo$VIM
结果应该是这样的:
Linux:/usr/share/vim/vimrc
Windows:c:\programfiles\vim\vimrc
用户版本的vimrc文件放在你的主目录下.主目录的位置依赖于你的操作系统.Vim最初是为Unix及类Unix操作系统提供的,所以用户版本的vimrc文件都是通过在文件名的最前面加一个点来设置成隐藏文件.这是在类Unix上设置隐藏文件的方法,但不适用于MicrosoftWindows.所以呢,vimrc文件与操作系统有关.应该是这样的:
Li
gradle实战
Gralde吸收了Maven与Ant的优点，可以列举出很多。然而大量的实践与思考发现Maven相比于Gradle的不灵活，正是它的优点，避免了大量聪明的Build Engineer的出现。
maven的依赖管理很死板，只能依赖于标准的maven artifact，不能依赖本地的某个jar文件或者其它的源码。而gradle则可以混合地同时支持这些依赖方法，这样可以让旧项目的迁移容易得多。只要安装好gradle，默认就支持java项目,war项目，ear项目，做单元测试，生成jar包，上传jar包到maven服务器，等等功能。一般的项目都已经够用了。
疫情期间协助警方破获诈骗案过万起 腾讯智能反诈中枢全链条打击网络黑产
突如其来的新型冠状病毒在春节期间集中爆发，原定的假期也在不断延长。在全国抗击新冠病毒的同时，中小型企业、个体商户、企业员工也面临物资短缺和资金上的压力，不法分子趁机以“售卖防疫物资”、“献爱心”、“兼职刷单“、“贷款”等为名实施诈骗，严重危害人民群众的财产安全。对此，腾讯守护者计划积极协助公安机关打击利用疫情实施的诈骗犯罪。截至3月24日16时，全国公安机关共抓获涉案嫌疑人6605名，破获案件14786起，累计涉案金额4.88亿元，其中腾讯守护者计划协助破案过万件。<pstyle="margin:
direct3d 入门
一个菜鸟飘过表示。。。
LS说的并不准确。。。
XBOX360用的是DX9，目前没有任何主机使用DX10，DX11--除非微软推出360的下一代主机。。。
所谓“DX9显卡”并不是不能使用DX10和DX11，使用DX10和DX11唯一的限制是你的操作系统必须是windowsvista以上版本。
也就是说DX10和DX11的使用在硬件上并没有什么限制，而是在操作系统上有限制。。。
至于选择哪个版本，客观上来说，如果你现在开始学习DX并且期望能在一年半载内在国内游戏公司找到一份关于引擎开发的工作的话，DX9是你的选择。因为国内游戏公司基本都是用的DX9。
如果学习这个只是为了兴趣、研究或者不急着找工作的话推荐还是学DX11比较好。（DX10跟DX11差不太多）
另外国内能找到的关于DX11的资料实在是太少了。这也是限制人们学习DX11的因素之一。（DX9比起DX11简直弱爆了）
学DX9，LS推荐的那本书不错。把这本书看透就很好了。很多人推荐“龙书”，其实楼上说的这本就是龙书的第二版，龙书的第一版国内有翻译，
运维之人需要了解你的业务
editor-side-new">
今天参加完51CTO的线下沙龙活动--站在业务扩展的角度看Linux运维技术
晚上了我写一些感受：
我为两位老师的讲解鼓掌！讲的很不错！内容简洁明了，深刻！
黄老师讲的主要是业务这块，其实呢运维的是什么？在线的系统和应用的稳定，为了业务的稳健发展，运维是个很重要的工作，它是业务稳定开展的后台支撑！没有了运维业务就没有保障，也就失去了在线的客户，后果很严重。所以一个在线业务的系统架构要求运维人员很熟悉，能够在出现问题的时候能够迅速做出反应。
林老师主要讲解了整体系统架构中，从一个公司业务初期简单的架构，到业务发展到高峰期时候的架构扩展和
每次架构的改变用到一些现在的主流技术。
&nb
稳经济谋发展 长虹等大企业充分发挥产业带动作用
与过往不同，今年的两会政府工作报告中并没有明确全年经济增速的具体目标，特别指出“要用改革开放的办法稳就业、保民生、促消费，拉动市场、稳定增长。”但要真正将稳定经济落实到遭受过疫情“正面冲击”的市场肌理中，企业稳定发展是根本。尤其是对于占据我国企业集群相当比重的中小型企业来说，唯有经得住当前的“冲击”才能在接下来做出成绩，而来自大企业带动就成为此时此刻稳经济的“快捷键”。长虹，作为与国家相伴发展的优秀企业，在“抗疫”期间一方面积极发挥自身产业实力稳步推进复工复产，同时，充分发挥自身的产业、技术、资源等优势，广泛开展对于中小型企业的多元复工复产达产工作，比如提供防疫物资、人力资源支持、付款方式调整、前端原材料协调、提供金融服务等，充分实践了行业地位赋予的任务与使命。<p
企业私有云平台安全技术
云计算是一种以互联网为基础的新兴计算机应用技术，它融合了分布式计算、效用计算、并行计算、网格计算、网络存储、虚拟化等传统计算机和网络技术，形成了一整套新的标准和模式，“云计算”概念也迅速运用到生产环境中，各种“云计算”的应服务范围正日渐扩大，影响力也无可估量。通俗的讲，云计算就是让你把所有数据处理任务都交给网络来进行，由企业级数据中心负责处理客户电脑上的数据任务，这样就可以通过一个数据中心向使用多种不同设备的用户提供数据服务，从而为个人用户节省硬件资源。本文介绍的云平台安全措施主要是面向VMware系列云计算平台的。
一大波有用的 bash 别名和函数
作为一个命令行探索者，你或许发现你自己一遍又一遍重复同样的命令。如果你总是用ssh进入到同一台电脑，如果你总是将一连串命令连接起来，如果你总是用同样的参数运行一个程序，你也许希望在这种不断的重复中为你的生命节约下几秒钟。
解决方案是使用一个别名（alias）。正如你可能知道的，别名用一种让你的shell记住一个特定的命令并且给它一个新的名字的方式。不管怎么样，别名有一些限制，它只是shell命令的快捷方式，不能传递或者控制其中的参数。所以作为补充，bash也允许你创建你自己的函数，这可能更长一些和复杂一点，它允许任意数量的参数。
当然，当你有美食时，比如某种汤，你要分享它给大家。我这里有一个列表，列出了一些最有用bash别名和函数的。注意“最有用的”只是个说法，别名的是否有用要看你是否每天都需要在shell里面用它。
在你开始你的别名体验之旅前，这里有一个便于使用的小技巧：如果你的别名和原本的命令名字相同，你可以用如下技巧来访问原本的命令（LCTT译注：你也可以直接原本命令的完整路径来访问它。）<preclass="b
2019年的云端：多云、无服务器计算和Kubernetes容器
企业正在迅速从基础设施服务向云服务平台转移。
基于使用SumoLogic平台的1,600多名客户的“活跃数据”，一份新的报告显示：
多云技术的使用和部署量增加了一倍，其中亚马逊网络服务处于领先地位，但微软Azure和谷歌云平台的发展势头强劲。
无服务器架构的使用量继续增长;三分之一的企业使用AWSLambda技术。
此外，三分之一的企业使用托管或本地Kubernetes编排解决方案，而28%的企业在AWS中使用Docker容器。
鉴于市场的爆炸式增长，这些数据都不会令您感到惊讶，但很有趣的是，企业现在正迅速向云服务平台转移。您的工作重点正从基础存储和计算等基础设施服务转向“时尚年轻人”正在使用的服务，即多云管理、无服务器计
Linux使用logrotate分割管理日志rsync日志
editor-side-new">
今天发现我的文件服务的磁盘空间在不断增大，查找了常规日志，都没有发现问题。后来用find找到了一个8个多G的文件，我一看，是rsync.log。哦我一下子明白了，我的这台服务器开启了rsycn功能。
cat/etc/rsyncd.conf
<spanstyle="font-family:'微软雅黑','Micr
Vue实现 点击显示再点击隐藏效果(点击页面空白区域也隐藏效果)
这篇文章主要介绍了Vue实现点击显示再点击隐藏点击页面空白区域也隐藏效果,本文通过实例代码给大家介绍的非常详细，具有一定的参考借鉴价值,需要的朋友可以参考下
平时项目中，经常会做一些下拉菜单等效果，这种效果可能会需要通过一个按钮来控制显示隐藏，并且当点击页面其他空白区域时，也要将其隐藏。
简单写个Demo
<!--按钮--><button@click.stop="ShowHidden=!ShowHidden">显示或隐藏</button><!--下拉列表--><divv-if="ShowHidden"@c
Sql Plus下设置行数和宽度
1.设置页面显示总行数
1)查看目前的pagesize,默认是14:
Sqlplus代码
show pagesize;
2)将pagesize设置好100,则可以一次显示够多行记录了:
Sqlplus代码
set pagesize 100;
2.设置行的宽度
1)查看目前的linesize,默认是80:
Sqlplus代码
show linesize;
2)设置成100或者更宽都可以:
Sqlplus代码
set linesize300;&nbs
用Odata API连接云数据源
半结构化数据集成是新兴Web2.0API集合所面临的主要挑战之一。无论数据是源自于一个客户的应用程序或者是企业网络服务，寻找其最常见的数据共同特性是十分必要的，从而确保本地运行的服务或云计算服务能够互相了解。
RESTful开放式数据协议--即为更多人所知的ODataAPI–有可能实现基于云计算企业软件即服务产品和平台即服务项目的互相联系，从而成就其“大数据”服务，如整个Netflix的电影目录以及WindowsAzure市场的DataMaret.
结构化数据源--例如关系型数据库、电子表格以及包含逗号分隔符的数值文件--主要依赖于无所不在的开放式数据库连接（ODBC）的数据访问API,这一API集合是由微软公司继承SQLAccess
Python基于Tensor FLow的图像处理操作详解
这篇文章主要介绍了Python基于TensorFLow的图像处理操作,结合实例形式分析了Python基于TensorFLow操作图像解码、缩放、剪切、翻转、调整对比度、明度、饱和度等相关操作技巧,需要的朋友可以参考下
本文实例讲述了Python基于TensorFLow的图像处理操作。分享给大家供大家参考，具体如下：在对图像进行深度学习时，有时可能图片的数量不足，或者希望网络进行更多的学习，这时可以对现有的图片数据进行处理使其变成一张新的图片，在此基础上进行学习，从而提高网络识别的准确率。1、图像解码显示利用matplot库可以方便简洁地在jupyter内对图片进行绘制与输出，首先通过tf.gfile打开图片文件，并利用函数tf.image.decode_jpeg将jpeg图片解码为三位矩阵，之后便可以通过matplot绘制与显示图片信息了<divclass="jb51cod
使用input type=text value=str取值不完全解决方案
想要取得格式化之后的数据时，在value=方法取值时，只能取到“XXXX年XX月XX日”，后面的“星期X”一直取不到解决方法如下，感兴趣的朋友可以参考下今天碰到一个很奇怪的问题，看看如下代码：
SimpleDateFormatdateFormat=newSimpleDa
复制代码代码如下:
teFormat("yyyy年MM月dd日E");
Stringdate=dateFormat.format(newDate());
本意是想要打印出来XXXX年XX月XX日星期X
问题出在如下代码，当我想要取得格式化之后的数据时，在value=方法取值时，只能取到“XXXX
jquery获取input输入框中的值
如何用javascript获取input输入框中的值，js/jq通过name、id、class获取input输入框中的value。接下来本文通过代码讲解，需要的朋友参考下
如何用javascript获取input输入框中的值，js/jq通过name、id、class获取input输入框中的value
先准备一段HTML
<inputtype="text"id="CN_NAME"name="CN_NAME"class="CN_NAME">
一、jquery获取input文本框中的值
通过name
varname=$('input[name="CN_NAME"]').val();
通过id<
PasswordManagerXP
1.passwordmanager软件好用吗
联想的ThinkVantagePasswordManager软件是机密信息管理软件，可以帮助用户组织和管理Web站点和应用程序登录信息，如用户名、密码和其他个人信息。
登陆某一个网页时，输入用户名和密码之后，PM就会提示你，是否保存该密码，如果保存，之后你只要输入passwordmanager的密码，就可以直接通过保存的密码自动登陆。如果有了指纹识别，也可以通过刷指纹的方式登陆。现在使用电脑，总是需要输入很多密码，相对于记在文档中的方法，它的安全性要高。习惯该软件的使用方式后，会带来很多便利。2.联想电脑上passwordmanger是什么软件
驱动简介：
【驱动名称】Lenovo联想Thinkpad笔记本电脑PasswordManager
密码管理软件4.2版ForWin7-32/Win7-64/Win8-32/Win8-64(2013
年1月21日发布)
【驱动描述
