个人中心

神奇的小江游

这个人很懒什么都没有留下

3年前

hive mapreduce 实例

Hive是基于HDFS的离线数据仓库,提供了SQL的支持,将SQL翻译成MapReduce执行。 而HBase是分布式K-V数据库,非常适合实时的大规模的K-V查询和修改需求。 更多关于Hive和HBase的介绍,请搜索"lxw的大数据田地".



  hive中的join可概括为map端join和reduce端join,两种join的原理不同,使用mapreduce处理的方式也不同,需要了解其中的原理之后,就可以将其自己翻译成mapreduce程序。可以搜索"lxw的大数据田地",里面有对hive中join类型和原理的详细描述。
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

大数据驱动国家治理的未来图景


大数据是信息化发展的新阶段。大数据是一种创新技术、一种基础设施、一种生产要素、一种战略资源、一种科技产业,也是一种治理技术。随着互联网技术的迅猛发展,大数据已经成为了组织创新、产业升级、经济社会发展、国家治理能力现代化的核心驱动力。
作为国家治理技术的大数据
作为一种治理技术,大数据通过挖掘、预测、诊断和应用,能够实现政府的科学决策、精细管理、精准服务、精确监管和高效协同,是提升国家治理现代化的重要手段。
大数据具有容量大、增速快、种类多、价值高的特征和描述、规定、预测的功能。大数据种类繁多,涵盖各种来源、形式和结构,数据更新换代速度和数据运算速度快,呈现出指数级增长态势,通过数据挖掘,将其运用到实践中能够呈现出乘数级效应。同时,通过对数据的统计分析,能够描述和揭示事物发展的现象与规律,即利用
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

ie浏览器出现运行错误

  【故障现象】用ie浏览网页时弹出“出现运行错误,是否纠正错误”对话框,单击“否”按钮后,可以继续上网浏览。

  【故障点评】可能是所浏览网站本身的问题,也可能是由于ie对某些脚本不支持。

  【故障解决】

  ①启动ie,执行“工具→internet选项”菜单,选择“高级”选项卡,选中“禁止脚本调试”复选框,最后单击“确定”按钮即可。

  ②将ie浏览器升级到最新版本

  • 0
  • 0
  • 0
  • 0
  • 0
3年前

分享一个简单的批量处理的bat文件用来分析cpu跑满


  服务器可能会遭受到CC攻击,导致cpu跑满,可以用下面的方法协助分析下
  建立一个批处理文件,通过该脚本代码确定是否存在CC攻击。打开记事本键入如下代码保存为CC.bat:
  @echooff
  time/t>>log.log
  netstat-n-ptcp|find":80">>Log.log
  notepadlog.log
  exit
  
上面的脚本的含义是筛选出当前所有的到80端口的连接。当感觉服务器CPU异常时就可以双击运行该批处理文件,然后查看log.log文件中
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

mysql 数据库碎片


showtablestatusfromtable
主要看这一项
Data_free:20 
20假如是删除一条数据产生的留空空间,你如果一次性删除5W条数据吧,这样会产生100W的字节的存储空间,
假如现在你剩一条记录了,有用的内容将只占二十字节,但MySQL在读取中会仍然将其视同于一个容量为100W字节的列表进行处理,并且除二十字节以外,其它空间都被白白浪费了。
定期优化表是一件很重要的事情
<divid="contentMidPicAD"style="float:left;clear:both
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

关于创建表空间的数据文件的限制


  一般我们使用createtablespace创建表空间的数据文件的时候,对于数据文件的大小是有限制的,通常情况下一个数据文件是不能超过40G,如果我们需要创建大于40G的数据文件的话,那么我们需要使用一个另外一个命令
   
  CREATE BIGFILE TABLESPACE"yyyyy" 
  LOGGING 
  DATAFILE/datafile2/datas/yyyy.dbfSIZE260GREUSEEXTENT 
 &nbs
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

CSS 中px、em、rem、%、vw、vh单位之间的区别详解

这篇文章主要介绍了CSS中px、em、rem、%、vw、vh单位之间的区别,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧
  1、px
  px就是pixel(像素)的缩写,相对长度单位,相对于屏幕分辨率。
  2、em
  参考物是父元素的font-size,具有继承的特点。浏览器默认字体是16px,整个页面内1em不是一个固定的值。
  字体大小同样都是1.5em,但是效果却截然不同,按照W3C提供的公式,我们可以计算下:class为id1的div字体大小继承自父元素body:16px*1.5em=24pxclass为id2的div字体大小继承自父元素id1:24px*1.5em=36pxclass为id3的div字体大小继承
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

编写更好的 Java 单元测试的 7 个技巧


  测试是开发的一个非常重要的方面,可以在很大程度上决定一个应用程序的命运。良好的测试可以在早期捕获导致应用程序崩溃的问题,但较差的测试往往总是导致故障和停机。
  虽然有三种主要类型的软件测试:单元测试,功能测试和集成测试,但是在这篇博文中,我们将讨论开发人员级单元测试。在我深入讲述具体细节之前,让我们先来回顾一下这三种测试的详细内容。
  软件开发测试的类型
  单元测试用于测试各个代码组件,并确保代码按照预期的方式工作。单元测试由开发人员编写和执行。大多数情况下,使用JUnit或TestNG之类的测试框架。测试用例通常是在方法级别写入并通过自动化执行。
  集成测试检查系统是否作为一个整体而工作。集成测试也由
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

高性价比AMOLED平板 过年旅途看电影就选酷比魔方X

说起平板产品,酷比魔方是一家产品线十分丰富的厂商。而这款酷比魔方X则是主打AMOLED超清大屏,一起看看吧
  大家都知道,说起平板产品,酷比魔方是一家产品线十分丰富的厂商。而这款酷比魔方X则是主打AMOLED超清大屏,为消费者带来更好的视听影音体验,感兴趣的朋友千万不要错过了。
  简约银色轻便易携接口实用全都有
  在拿到酷比魔方X的时候,我的第一感觉就是“太薄了”,对比以往的酷比魔方平板产品,这一款显得十分的轻便。
  对比了一下官方的厚度,这次酷比魔方X的厚度仅为6.9mm,而以往产品的厚度往往都是8mm左右,这一下的手感上的差别就十分明显。
  这个厚度甚至比一些市面
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Docker中如何删除image(镜像)的方法

这篇文章主要介绍了Docker中如何删除image(镜像)的方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
  docker中删除images的命令是dockerrmi,但有时候执行此命令并不能删除images
[yaxin@ubox~]$dockerimagesREPOSITORYTAGIMAGEIDCREATEDVIRTUALSIZEeg_sshdlatested9c93747fe145hoursago329.8MBCentOS65lateste55a74a321252daysago360.6MB[yaxin@ubox~]$dockerrmied9c93747fe1Untagg
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

9 个超有趣的 Linux 命令动画演示


  Linux最强大的一个特征就是它有大量的各种小命令工具,这也可以称做是它最有趣的一个地方了。
  在这些大量的有用的命令和脚本中,你会发现有少部分命令工具不那么有用的——如果你不愿意说是完全没用处的话。
  你要知道,Linux命令终端并不是总来干一些严肃的事情的,这里列举的几个没有实际用处、但很有趣的命令。
  它们的有趣并不是因为无用,而是真的有趣,接下来就让我们看看它们是如何搞怪的吧。
  一、cmatrix
  你应该看过好莱坞大片《骇客帝国》,相信你会对电影中那些神奇的场景着迷。
  在Neo的眼里任何东西都能以计算机字节流的形式展现,你是否也想做一个很有黑客范儿的数据流的桌面呢?
  安装cmatrix<preclass="brush:bash;gutter:false;first-lin
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

Oracle的视图、索引、同义词和序列


一、视图
createviewviewnameasselect语句[withreadonly]|[withcheckoption]
dropviewviewname
alterviewviewnameasselect语句
二、索引
1.简介
查询性的表,要多建索引;修改型的表,要少建索引
索引有唯一索引的和非唯一索引两种
oracle提供了B树,散列,位图等索引类型,主要使用B树索引和位图索引。
B树索引是默认条件下创建的,可以是唯一的也可以是非唯一的,可以是基于一列的,也可以是多列的。B树索引在检索高基数数据列时有很好的性能,对于取出较小的数据,
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

flutter FadeTransition实现透明度渐变动画

这篇文章主要为大家详细介绍了flutterFadeTransition实现透明度渐变动画,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
  本文实例为大家分享了flutter实现透明度渐变动画的具体代码,供大家参考,具体内容如下
  flutter动画状态监听器
  AnimationController
//动画控制器AnimationControllercontroller;//AnimationController是一个特殊的Animation对象,在屏幕刷新的每一帧,就会生成一个新的值,//默认情况下,AnimationController在给定的时间段内会线性的生成从0.0到1.0的数字//用来控制动画的开始与结束以及设置动画的监听//vsync参数,存在vsync时会防止屏幕外动画(动画的UI不在当前屏幕时)消耗不必要的资源//duratio
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

影响大数据和分析的5大趋势

随着科技的发展和进步,人们之间的联系理应更加紧密,但是却与期望相反,很多人却变得更加分散和孤立。
社交媒体中的“喜好”使人们两极分化,而其算法更加倾向于提供煽动性内容,引起更强烈的反应,并使人们更长久地沉迷其中。当涉及到当地法律、法规和隐私时,就会看到这种分化。
 
很多组织的战略主管和投资者表示需要剥离不是核心能力的业务,而数字巨头就潜伏在一个支离破碎的世界中,那么人们需要更换一种思路吗?可以通过法规、商业模式和数据将支离破碎的格局转变成机遇。
 
但是,只是分析还不够,还需要进行综合,以将分布式数据连接到分析供应链,并将目录作为连接组织。科技将发挥巨大的作用,但它也需要有正确的流程和人员来实施。综合和分析对于利用大数据和促进向人们所称
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

常用的汇编指令与技巧(收藏)

这篇文章主要介绍了常用的汇编指令与技巧,本文给大家介绍的非常详细,具有一定的参考借鉴价值,需要的朋友可以参考下
  1.数据传送指令:mov
  mover1,r2/*r1=r2*/
  mover1,#4096/*r1=4096*/
  2.大范围的地址读取指令:ldr
  ldrr1,=0x123456789/*r1=0x123456789*/
  ldrr1,=label/*获取绝对地址,即label的地址*/
  label:
  ……
  3.内存访问指令(当ldr后面没有=号时为内存读取指令)
  读取指令:ldr
  ldrr1,[r2,#4]/*将内存地址为r2+4的数据读取到r1中,相当于C语言中的*操作*/
  ldrr1,[r2],#4/*将内存地址为r2的数据读取到r1中,
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

SQLite教程(九):在线备份

这篇文章主要介绍了SQLite教程(九):在线备份,本文讲解了常用备份方法、在线备份APIs简介、高级应用技巧等内容,需要的朋友可以参考下
  一、常用备份:
    下面的方法是比较简单且常用的SQLite数据库备份方式,见如下步骤:
  1).使用SQLiteAPI或Shell工具在源数据库文件上加共享锁。
  2).使用Shell工具(cp或copy)拷贝数据库文件到备份目录。
  3).解除数据库文件上的共享锁。
  以上3个步骤可以应用于大多数场景,而且速度也比较快,然而却存在一定的刚性缺陷,如:
  1).所有打算在源数据库上执行写操作的连接都不得不被挂起,直到整个拷贝过程结束并释放文件共享锁。
  &nbsp
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

SpringBoot远程访问redis服务器问题剖析

使用了SpringBoot的项目,在远程连接Redis服务器时,会遇倒一些小问题,下面通过本文给大家全面解析SpringBoot远程访问redis服务器问题,需要的朋友参考下吧
  使用了SpringBoot的项目,在远程连接Redis服务器时,会遇倒一些小问题,这里剖析一下。
  1.首先,要在pom文件中添加redis依赖:
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-redis</artifactId></dependency>
  2.接着要在项目的配置文件中添加对redis服务器的配置,也就是在application.properties中增加一些参数的赋值:
  • 0
  • 0
  • 0
  • 0
  • 0
3年前

得到XML文档大小的方法

XML文档从格式到大小都是不是确定的。有的可能只有几行,而有的却有好几兆字节。你也许会怀疑是不是需要了解XML文档的大小。而当性能成为首要问题时,知道XML文档大小就是件必须要作的事情了。
从性能角度讲,有两类处理XML文档的方法。批量处理方式需要较短的时间,解析成组的文档。实时方式就是实时的处理文档。批处理方式的性能可以通过在一定时间内处理多少文档来测量,而实时模式的性能也采用类似的测量方式,不过是以处理一个文档需要多长时间来计算的。
Scenarios场景
想象一下,你有一个实时工作的系统,比如一个Web服务器。这个系统需要实时的接收客户发来的订单,并需要立即对这个订单进行响应。
这个系统显然不能用批量处理的方式进行。简单的估计一下,假设这是个很简单的订单,只有十个项目,这样所生成的XML文档就比较小,大概每个文档是4KB。这种情况下,使用DOM来解析收到文档。
如果你的订单每小时只有几个,那么系统性能对你来说还不是问题。但是长远考虑,总有一天订单的数量会多到令你意识到系统性能必须提高。<br
  • 0
  • 0
  • 0
  • 0
  • 0
4年前

word中如何做水印效果图

1.如何设置WORD图片水印效果
  材料/工具:word20101、打开OfficeWord软件,点击菜单栏中的页面布局菜单,如图所示;2、然后点击页面背景组中的水印,如图所示:3、可以看到四种水印,选择一种水印,如图所示:4、选择完成之后可以看到文档中出现了水印,如图所示:5、还可以自定义水印,点击水印---自定义水印,如图所示;6、在弹出的水印对话框中可以看到需要设置的选项,如图所示:7、可以设置图片和文字的水印,现在设置文字的水印,设置语言、文字、字体、字号、颜色、版式、默认是半透明的,完成之后如图所示:8、设置完水印选项之后,点击应用按钮,如图所示:9、点击完按钮之后,可以看到水印效果如图所示:。2.请问在Word中将图片设置成水印效果怎么做啊
  Word2017设置图片的水印效果方法如下:
  1、首先打开或正在编辑的文档。
  2、在菜单栏中点击【插入】选项卡,并在点击【图片】按钮找到图片插入到文档上来。
  3、点击图片选中在菜单栏中选择【图片】选项卡
  • 0
  • 0
  • 0
  • 0
  • 0
4年前

word如何加图标索引

1.如何在word里加入索
  1。
  先将内置标题样式的“标题1”到“标题9”应用到要包括在目录中的标题上。如果需要,可以应用包含大纲级别的样式或自定义的标题样式,也可以对内嵌式标题样式(如段落的头几个字)应用样式;2。
  单击要插入目录的地方;3。打开【插入】菜单,选择“索引和目录”命令,然后选择“目录”选项卡;4。
  选中“显示页码”复选框,则在目录项的右方显示页码;选中“页码右对齐”复选框,则页码以右对齐的方式存在,这能使目录更美观;5。在“制表符前导符”下拉列表框中,选择目录项和页码之间链接的符号格式;6。
  在“格式”下拉列表框中,可以选择使用现有的样式格式,也可以选择Word内置的其它格式。如果选择“来自模板”,则单击“更改”按钮,可以编制索引、目录的自定义格式;7。
  在“显示级别”数值框中,可以设置创建目录的标题样式级别,缺省时创建标题3以上级别的目录;8。单击“选项”按钮,会打开“目录选项”对话框,选中其中的“样式”复选框,则目录根据样式来创建;9。
  在“有
  • 0
  • 0
  • 0
  • 0
  • 0
上一页  1  2  3  4  ...  下一页  

分享至

长按复制下方链接,去粘贴给好友吧:
软件
前端设计
程序设计
Java相关
用户登录
用户注册