数据库

VR改变大数据的四种方式

1

mairuian 发布于 2017-03-10

在这个信息爆炸的时代,数据采集正以惊人的速度发展,但我们不一定了解这些数据。目前,大数据就像是一种肆无忌惮的“野兽”–非常复杂、无结构。传统2D屏幕条形图和饼状图已无法分析大数据,也无法帮助我们有效处理大型数据集。根据Forbes研究显示,我们的眼睛每秒仅能处理传统计...

阅读(34)评论(0)赞 (1)

供应链如何使用大数据?

2

yuehanjs 发布于 2017-03-07

大数据可能被破坏或中断,但供应链管理不在其中之列。这不是说供应链没有改变。人们如何收集和分析数据,改变了供应链的沟通方式。事实上,供应链发生了巨大变化,咨询机构德勤公司发布了一份报告,取消了线性链,声称技术中断导致了“数字供应网络的兴起”。 除了这些转变,供应链管理人员已经适应了...

阅读(20)评论(0)赞 (0)

李克强:加快大数据、云计算、物联网应用

1

shuimunianhua 发布于 2017-03-07

十二届全国人大五次会议5日上午9时在人民大会堂开幕,李克强总理作政府工作报告。李克强表示,大力改造提升传统产业。 深入实施《中国制造2025》,加快大数据、云计算、物联网应用,以新技术新业态新模式,推动传统产业生产、管理和营销模式变革。完善制造强国建设政策体系,以多种方式支持技术...

阅读(25)评论(0)赞 (0)

数据API经济与大规模数据流通:从水的寓言说起

2

binghuakai 发布于 2017-03-07

近期数据API接口服务逐渐兴起,正因数据API服务允许需求方“挑数据”,并具备“开箱即用”以及降低交易成本与门槛等优点,将会成为数据能力开放与交易流通的重要手段。但数据API从当前的实践来看远非完美,运营不慎会导致类似金融领域洗钱行为的“洗数”活动出现,并在隐私保护、计费方面存在...

阅读(23)评论(0)赞 (0)

WAF自动化暴破(绕过)脚本xwaf

1

mairuian 发布于 2017-03-06

xwaf xwaf是一个python写的waf自动绕过工具,上一个版本是bypass_waf,xwaf相比bypass_waf更智能,可无人干预,自动暴破waf Disclaimer [!] legal disclaimer: Usage of 3xp10it.py and we...

阅读(51)评论(0)赞 (0)

5节点Hadoop分布式集群搭建经验分享

2

shuimunianhua 发布于 2017-02-28

我们使用hadoop2.6.0版本配置Hadoop集群,同时配置NameNode+HA、ResourceManager+HA,并使用zookeeper来管理Hadoop集群。 1.1 写在前面的话 1.2 (一)HDFS概述 1.2.1 基础架构 1、NameNode(Maste...

阅读(27)评论(0)赞 (1)

基于Hadoop的数据仓库Hive基础知识

12

小双 发布于 2017-02-28

Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–HiveQL,可通过HQL语句实现简单的MR统计,Hive将HQL语句转换成MR任务进行执行。 一、概述 1-1 数据仓库概念 数据仓...

阅读(26)评论(0)赞 (1)

大数据是电子地图的基础,AI成为下一个技术风口

5

mairuian 发布于 2017-02-22

每到春运之时,人口的迁入和迁出就成了城市的主旋律。昨日,高德地图发布了2017年春运大数据。其中,广东省的5座城市在人口迁出比例排名中占据前5位,而安徽省的4座城市名列人口迁入比例排名前10位,成为返乡大省。 高德地图能够得到关于人口迁徙的大数据,是基于平时对用户数据的收集与累积...

阅读(33)评论(0)赞 (2)

数据分析行业需要具备哪些技术 如何快速进入

1

binghuakai 发布于 2017-02-22

在深度学习中,为了有效地训练深度神经网络,有一些值得我们强烈推荐的做法。在本文中,我将介绍一些最常用的方法,从高质量训练数据的重要性,到超参数的选择,再到更快的做出 DNN 原型的通用技巧。这些方法的大多数由学术界和工业界的研究验证过,并且在诸如 Yann LeCun 等人写的《...

阅读(37)评论(0)赞 (1)

Hadoop面试中6个常见的问题及答案

5

yuehanjs 发布于 2017-02-13

你准备好面试了吗?呀,需要 Hadoop 的知识!!?不要慌!这里有一些可能会问到的问题以及你应该给出的答案。 Q1.什么是 Hadoop? Hadoop 是一个开源软件框架,用于存储大量数据,并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。总之,Hado...

阅读(46)评论(0)赞 (1)