个人中心

荣获特级段子评论员证书的男人

这个人很懒什么都没有留下

3年前

spark 堆外内存

我有64内存,spark设置了40G;这个是自己根据需求设定的;
  spark-env.sh中的这三个参数都设置一下,是内存、cpu的关系
  export SPARK_EXECUTOR_INSTANCES=1
  export SPARK_EXECUTOR_MEMORY=40G
  export SPARK_EXECUTOR_CORES=14



  storm用于处理高速、型数据流布式实计算系统hadoop添加靠实数据处理功能 spark采用内存计算迭代批处理发允许数据载入内存作反复查询外融合数据仓库流处理图形计算等种计算范式spark构建hdfs能与hadoop结合rdd特点 hadoop前数据管理标准运用前商业应用系统轻松集结构化、半结构化甚至非结构化数据
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

atom-093

atom 有给小型服务器的信号好像是c系列,查了下应该是Processor C2750 最厉害。2.4G,8c8t
http://ark.intel.com/products/77987/Intel-Atom-Processor-C2750-4M-Cache-2_40-GHz



  现在 amd的cpu还是上一代的核心 没有intel的好,i的研发比amd快了一代
现在i的一千左右的都是最新的核心,比amd的好
amd的低端是通过把上一代的较高端产品减价来卖的,性价比才上去的

强烈建议买intel的
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

“大数据”时代并不是掌握数据,而是利用数据

大数据可以来自方方面面,从生活中的购物交易,到工业上的生产制造;从社交网络媒体信息,到企业化管理决策大数据作为目前IT行业最重要的前进方向之一,已经吸引了众多IT企业的目光。面对海量的数据、不断变化的外部环境,企业应该首先从寻求管理模式的创新入手,寻求在“大数据”时代中生存的基础。
最近几年,“大数据”成为最热的技术词汇之一。面对“大数据”时代的到来,不单单是构建企业信息化这么简单,更重要的是企业应该寻求管理模式的创新。
 
早在30年前,美国着名的社会思想家阿尔文·托夫勒就在《第三次浪潮》中提出:“如果IBM的主机拉开了信息化革命的大幕,那么大数据才是第三次浪潮的
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

云计算时代,什么是云计算(云计算思想篇)

2006年谷歌推出了“Google101计划”,并正式提出“云”的概念和理论。随后亚马逊、微软、惠普、雅虎、英特尔、IBM等公司都宣布了自己的“云计划”,云安全、云存储、内部云、外部云、公共云、私有云……一堆让人眼花缭乱的概念在不断冲击人们的神经。那么到底什么是云计算技术呢?对云计算技术的产生、概念、原理、应用和前景又在哪里?
一、云计算思想的产生
 
传统模式下,企业建立一套IT系统不仅仅需要购买硬件等基础设施,还有买软件的许可证,需要专门的人员维护。当企业的规模扩大时还要继续升级各种软硬件设
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

云计算更多是关于商业模式的转变

就像开发运营更多的是关乎文化转变而不是技术使然,云更多的是关于商业模式的转变,而非技术。即使作为服务供应商(包括云供应商)需要展望基于每个应用程序的收入(与之相反的是每个用户的收入)的这种商业模型些应用程序是企业组织在开始一项更加面向云的部署模式时用来审视该商业模式而需要的。
 
虽然许多IT组织自采纳了一种“面向服务的”方法后已经很长时间了。这种方法聚焦于客户,也就是一个部门、一个商业单元、一个项目。这种方法并不完全兼容基于云的方法,由于大多企业(私有)云实施的“租户”是一项应用程序,而非一个商业实体。作为一个“服务供应商”,IT应该考虑采用一种更加贴近服务提供者的商业模式视野,因为订户都迈向应用程序而服务应面向基础设施服务如流量管制、高速缓存、访问控制和最大化。
 
通过将IT分成不同的服务,IT不仅仅能有效地向IT即服务的目标转化,还能为业务和运营均实现附加的利益。
&nbs
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

大数据是什么?怎么学?这里有答案


首先给大家介绍什么叫大数据,大数据最早是在2006年谷歌提出来的,百度给他的定义为巨量数据集合,辅相成在今天大数据技术随着互联网的发展,更加迅速的成长,小到个人,企业,达到国家安全,大数据的作用可见一斑,也就是近几年大数据这个概念,随着云计算的出现才凸显出其价值,云计算与大数据的关系就像硬币的正反面一样,相密不可分。但是大数据的人才缺失少之又少,这就拖延了大数据的发展,所以人才培养真的很重要。
大数据,又称巨量资料,指的是所涉及的数据资料量规模巨大到无法通过人脑甚至主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。
大数据的类型大致可分为三类:
传统企业数据(Traditionalenterprisedata):包括CRMsystems的消费
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

IE9浏览器减少对功率的消耗使网络能节能的方法


  打开InternetExplorer9时首先注意到的是紧凑的用户界面。大多数命令栏功能,如“打印”或“缩放”,现在都可以通过单击“工具”按钮访问,单击“收藏夹”按钮时会显示您的收藏夹。此外,InternetExplorer还为您提供了需要的基本控制,并让网页显示在正中。IE9本身要比其他浏览器节能以外,IE9还是第一款可以通过Windows系统电源选项来控制节能的浏览器。<pstyle="PADDING-RIGHT:0px;PADDING-LEFT:0px;PADDING-BOTTOM:0px;MARGIN:0px;COLOR:rgb(68,68,68);TEXT-INDENT:28px;LINE-HEIGHT:24px;PADDING-TOP:0px;FONT-FAMILY:宋体,arial,sans-serif,'DejaVuSans','LucidaGrande',Tah
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

夏普电视被告上法庭:消费者质疑存严重安全隐患

  “我觉得有义务让更多家庭了解这一安全隐患,避免悲剧发生。”日前,在北京中关村工作的工程师薛先生向媒体公开了自己的遭遇,其在网上购买的两台夏普畅销款电视被国家认可的第三方检测机构测出有“触电危险”被判断为不合格,这一结果让他触目惊心。他认为低价背后藏着猫腻,有义务提醒其他夏普用户尽早采取预防措施。</spa
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

猎豹浏览器怎么开启广告过滤功能


   1:打开网页的时候,就可以看到网址栏右边一个提示。“页面广告过滤”跟“弹出窗口拦截”
  2:打开广告过滤功能。点击【工具】--【设置主页】
  3:就可以看到广告过滤。再开启你需要的功能设置。就可以在页面上显示到了。
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

建立数字化转型思维的五个关键要素

大家似乎都把数字化转型提上了日程。IDG最近一项研究表明,有近90%的企业组织计划采用数字化优先的商业策略,但只有44%的企业组织真正执行了这一计划,这种脱节,是对数字化转型实际需要什么以及取得成功需要什么缺乏了解而导致的。
 
 
数字化转型可不仅仅是对网站、移动应用和社交网络策略的升级,而是一个让企业组织适应技术进步和行业准入门槛降低带来的快速持续变化的过程。众所周知,现代市场的发展速度比以往任何时候都要快,企业高管们发现他们不得不跟上技术日新月异的步伐。数字化转型不再是一个流行词,而是企业生存的必需品。
 
数字化很重要,这一点大家都认同,但是什么让数字化转型如此难以起步、更不要说实现了?</d
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

云计算将成下一个科技泡沫?

在当前云计算发展如火如荼的情况下,高大上的思杰无疑是IT从业者们的求职天堂。然而,今年年初,这家站在云计算风口的巨头竟也开始大规模裁员了
 
这家站在云计算风口的巨头也开始裁员了,小编突然想到两年前外媒的一句预测:云计算盈利艰难,或成下一个科技泡沫。从思杰的例子来看,这句预言恐怕已经开始得到验证。
 
因为不仅是思杰,云存储供应商Box也是连年亏损,据其最新发布的截至2016年1月31日的2016财年第四季度业绩报告显示,Box第四季度净亏5037万美元;基于云计算的客户关系管理(CRM)服务提供商Salesforce也是同样的命运,第四财季净亏2550万美元……从这些云计算公司典型代表的情况来看,要想在云计算市场取得盈利并非易事,观察家将它称之为泡沫也不无道理。
 
也许会有人拿出近日摩根斯坦利对阿里巴巴集团的调研报告来反驳,称摩根斯坦利预估阿里云未来五年内营收将突破185亿美元,给它
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

MySQL 配置优化


连接请求的变量:
1)max_connections
MySQL的最大连接数,增加该值增加mysqld要求的文件描述符的数量。如果服务器的并发连接请求量比较大,建议调高此值,以增加并行连接数量,当然这建立在机器能支撑的情况下,因为如果连接数越多,介于MySQL会为每个连接提供连接缓冲区,就会开销越多的内存,所以要适当调整该值,不能盲目提高设值。
数值过小会经常出现ERROR1040:Toomanyconnections错误,可以过’conn%’通配符查看当前状态的连接数量,以定夺该值的大小。
showvariableslike‘max_connections’最大连接
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

centos7.2 mysql数据库同步时数据一致性的配置优化


mysq的同步复制的,不管时主从,还是主主,都时利用的mysql自身的复制机制,而这个同步是有可能造成主从数据不一致的,master宕机也有可能导致数据丢失,而在生产环境中,每一数据都是要尽量不等丢失,所以,为了提高主从数据一致性和稳定性,降低丢失数据的可能,就需要进行一些配置优化,使用一些特别的设定,使得数据安全更好,但是同时也会影响到mysql数据库的性能,所以就需要在安全和性能之间进行取舍。根据使用的具体环境,选择最适合自身的数据库安全设置。
下面就一一介绍和列举几个对主从数据复制安全比较重要的几个配置参数:
MySQL版本为5.6
1.master主库上设置:
innodb_flush_log_at_trx_co
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

云计算市场未来将会是谁的天下?

随着大数据时代与信息时代的到来,信息安全、数据保护越来越受到人们的重视。运用云端来处理数据的方式已经不再新鲜,云计算市场依旧火爆,但用户对云的需求也在不断变化。
 
 
数据的爆炸性增长使不少企业选择使用云,因此“云计算”的概念从一出来,就受到企业狂热的追捧,热度一直不下。
 
目前市场上的云计算有三种服务形态:私有云、公有云、混合云。对于这三种不同的云计算形态,用户们所发出的声音也都是褒贬不一。
 
有人说公有云安全性没有保障,迟早会退败,混合云才是云的未来;但还有人说公有云服务代表着计算资源商品化的最终形态,随着数据的不
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

数据在云上,云计算如何保障大数据安全?

社会信息化和网络化的发展导致数据爆炸式增长,全球数据量大约每两年翻一番,这就意味着最近两年产生的数据量相当于之前产生的全部数据量。大数据技术已悄然渗透到各个行业领域,逐渐成为一种生产要素发挥着重要作用。
 
大数据技术的发展赋予了大数据安全区别于传统数据安全的特殊性。在智能时代新形势下,数据安全、隐私安全乃至大数据平台安全等均面临新威胁与新风险,大数据安全保障工作面临严峻挑战。
 
大数据为企业带来巨大的信息价值,云计算则是大数据强大的支撑,“云”正快速推动着数据挖掘的发展。云计算提供了弹性、可扩展的存储与计算服务,为企业提升了数据分析、计算和交付的效率,降低了企业自建计算集群的成本。
 
借助云计算实现数据分析与挖掘,安全保护水平高。数据在云上,又规避了安全风险,降低了泄漏用户的隐私概率。云端存储的数据,大量丢失和被篡改的可能性更低,云技术是企业信息安全的一次飞跃。<div
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Python 一行代码能实现丧心病狂的功能

这篇文章主要介绍了Python一行代码能实现丧心病狂的功能,需要的朋友可以参考下
  手头有109张头部CT的断层扫描图片,我打算用这些图片尝试头部的三维重建。基础工作之一,就是要把这些图片数据读出来,组织成一个三维的数据结构(实际上是四维的,因为每个像素有RGBA四个通道)。
  这个数据结构,自然是numpy的ndarray对象,读取图像文件我习惯使用PIL。因此,需要导入两个模块:
importnumpyasnpfromPILimportImage
  接下来,我用一行代码就把109张图片读到了一个109x256x256x4的numpy数组中,耗时172毫秒:
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Unity3D撤回命令开发详解

这篇文章主要为大家详细介绍了Unity3D撤回命令开发,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
  本文实例为大家分享了Unity3D撤回命令功能开发,供大家参考,具体内容如下
  在类似操作考核的项目中我们经常会遇到回到上一步的需求。所以我们有必要对每一个状态点的所有参与交互的物体的状态进行记录。好了,下面就是代码的实现:
  首先肯定要创建命令的基类,
publicclassBaseCommand{//执行命令publicvirtualvoidExcuteCommand(){}//撤销命令publicvirtualvoidRevocationCommand(){}}
  因为我们控制物体的类似移动改变方式不同,有可能是直接移动的,有可能是用的dotween来操作移动,所以我们的执行命令函数可
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Swift快速集成下拉刷新和上拉加载更多示例代码

这篇文章主要介绍了Swift快速集成下拉刷新和上拉加载更多示例代码,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
  ESPullToRefresh
  ESPullToRefresh是一个非常易于开发者使用的下拉刷新和加载更多组件。通过一个UIScrollView的扩展,可以轻松为UIScrollView的所有子类添加下拉刷新功能。如果你想定制组件的UI样式,只要实现指定的协议方法即可。Github地址
  如何安装
  使用CocoaPods
pod"ESPullToRefresh"
  手动安装
gitclonehttps://github.com/
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

PS后期修饰非常漂亮的城市夜景照片

教程真的很值得学习,介绍地也很详细,对于后期学习的PS学习者非常值得学习,一起来学习吧
  提到夜景照片,我们首先想到的就是灯光的修饰和美化。其实使用PS来修饰夜景照片是有固定的套路的。学会这篇教程介绍的方法,您就可以做出非常漂亮的城市夜景照片了。
  【聊聊今天分享的案例虽然叫摄影快速后期,但我人物不能归纳到摄影或后期技术这一块,那个逼格太高,这里姑且叫做图片处理。
  我不免想起之前在某网络教育上课的经理,课程也是关于处理图片,但什么样的图片是需要处理的?
  当然是不好的图片。那什么样的图片又是好的?用李涛老师的话说,4个字"赏心悦目";"赏心"也就是有共鸣、有感情,"
  悦目"就是通俗的好看,大气,有调性~前者我讲不了,那我就讲后者,后者有主要是审美的问题,这个可以通过"修"调出来,
  所以你得积累足够高的欣赏水平和修图技能。当你看到一张图片,知道哪儿不好,哪儿好,这个很重要,
  因为修图只是
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Delphi建立、读取、存贮INI文件的方法《一》

内容:INI文件在系统配置及应用程序参数保存与设置方面,具有很重要的作用,所以可视化的编程一族,如VB、VC、VFP、Delphi等都提供了读写INI文件的方法,其中Delphi中操作INI文件,最为简洁,这是因为Delphi6.0提供了一个TInifile类,使我们可以非常灵活的处理INI文件。一、有必要了解INI文件的结构:
;注释
[小节名]
关键字=值
...
INI文件允许有多个小节,每个小节又允许有多个关键字, “=”后面是该关键字的值。 
值的类型有三种:字符串、整型数值和布尔值。其中字符串存贮在INI文件中时没有引号,布尔真值用1表示,布尔假值用0表示。 
注释以分号“;”开头。 
二、定义
1、在Interface的Uses节增加IniFiles; 
2、在Var变量定义部分增加一行: 
myinifile:Tinifile;
然后,就可以对变量myinif
  • 0
  • 0
  • 0
  • 0
  • 0
上一页  1  2  3  4  ...  下一页  

分享至

长按复制下方链接,去粘贴给好友吧:
软件
前端设计
程序设计
Java相关
用户登录
用户注册