-
据挖掘中所需的概率论与数理统计知识
所属栏目：[大数据] 日期：2021-05-28 热度：117
据挖掘中所需的概率论与数理统计知识 ??（ 关键词：微积分、概率分布、期望、方差、协方差、数理统计简史、大数定律、中心极限定理、正态分布 ） 导言 ：本文从微积分相关概念，梳理到概率论与数理统计中的相关知识，但本文之压轴戏在本文 第4节 （ 彻底 颠[详细]
-
【轰炸】大数据分析2015年中国留学生回国就业蓝皮书
所属栏目：[大数据] 日期：2021-05-28 热度：74
本文摘自数据观 前几日，教育部公布了《中国留学回国就业蓝皮书2015》。蓝皮书中介绍，1978年至2015年底，我国累计出国留学人数404.21万，年均增长率19.06%，累计回国人数221.86万。留学回国就业人员的基本特征有哪些?就业情况怎么样?一起跟天道丝丝小编看看[详细]
-
找出一个整数数组中的第二大数
所属栏目：[大数据] 日期：2021-05-28 热度：118
可能以故事形式：如从第一层到第十层电梯每层停一次，如何找到第二个大的钻石 ?1?#includestdio.h??2?#includeassert.h??3?#define?MINNUMBER?-32768??4?int?find_sec_max(int?arr[],int?size)??5?{??6?????assert(arr);??7?????int?maxnumber=arr[0];??8???[详细]
-
【机器学习】数据处理中白化Whitening的作用图解分析
所属栏目：[大数据] 日期：2021-05-27 热度：124
之前在看斯坦福教程中whiteining这一章时，由于原始图像相邻像素值具有高度相关性，所以图像数据信息冗余，对于白化的作用的描述主要有两个方面：1，减少特征之间的相关性；2，特征具有相同的方差（协方差阵为1）；但是为什么这么做，以及这样做对于算法或者[详细]
-
数据集成--Informatica PowerCenter
所属栏目：[大数据] 日期：2021-05-27 热度：173
概要 随着数据呈现单位级别的递增，从海量的数据中分析出有价值的数据，对未来的事情进行一些预测，显得更能体现出BI的优越性了，但这也同时考验着数据处理ETL的性能和安全。这几天大体调查了一下informatica公司的PowerCenter，在国内市场上使用的挺早的，[详细]
-
美团机器学习中的数据清洗与特征挖掘实践
所属栏目：[大数据] 日期：2021-05-27 热度：147
综述 如上图所示是一个经典的机器学习问题框架图。数据清洗和特征挖掘的工作是在灰色框中框出的部分，即“数据清洗=特征，标注数据生成=模型学习=模型应用”中的前两个步骤 灰色框中蓝色箭头对应的是离线处理部分。主要工作是： 从原始数据，如文本、图像或[详细]
-
String大数加减乘除（非负整数）
所属栏目：[大数据] 日期：2021-05-27 热度：192
leetcode上一题使用String完成大数乘法，鉴于之前华为机试也考到过大数减法，这里做一个大数运算的专题。 说到底，大数运算考察的还是对运算的理解，我们完全可以通过模拟手算来进行。 注意string与int间的转换，string[] - '0' 变成int，int + '0' 变成 str[详细]
-
【bzoj3110】[Zjoi2013]K大数查询 权值线段树套区间线段树
所属栏目：[大数据] 日期：2021-05-27 热度：130
权值线段树套区间线段树 外层线段树按照完全二叉树的建法全部建出 内层线段树动态开点 外层的每个节点上都建一棵区间线段树，维护权值在[l,r]中每个区间出现的个数 每次修改对应外层线段树上的O(log n)个节点，内层修改一个区间，对应内层线段树上的O(log n)[详细]
-
lightoj 1214 - Large Division 大数对小数取余
所属栏目：[大数据] 日期：2021-05-27 热度：59
给定一个200位的大数和一个int范围整数，问大数是否是小数的倍数。 同之前的某到简单数学题 #includebits/stdc++.husing namespace std;#define ll long long#define ull unsigned long long#define mod 1000007#define inf 0x3f3f3f3f#define N 100100using[详细]
-
模版--大数加减乘除
所属栏目：[大数据] 日期：2021-05-27 热度：59
/* 因为计算大数除法时需要用到乘法和减法， 但是不指定字符串长度的乘法和减法不容易用字符数组表示， 所以这里就没写用字符数组计算的大数除法。o(╯□╰)o */ /***********大数加减乘/仅限正整数***************/ //加法测试：HDU 1002 //减法测试：百练O[详细]
-
沈艳：关注大数据分析门槛 警惕大数据神话
所属栏目：[大数据] 日期：2021-05-27 热度：87
大数据是近几年最热门的 IT 概念之一，并已在许多领域实现落地。从淘宝利用平台数据解读中国消费趋势和地区差异到出行类 APP 在拥塞的城市中为用户提供快速的车辆调度，从数据分析团队在奥巴马连任竞选中发挥巨大作用到谷歌智能系统 AlphaGo 在人机围棋大战[详细]
-
大规模数据处理Bloom Filter C++代码实现
所属栏目：[大数据] 日期：2021-05-27 热度：151
大规模数据处理Bloom Filter C++代码实现 ? Bloom Filter是由Bloom在1970年提出的一种多哈希函数映射的快速查找算法。通常应用在一些需要快速判断某个元素是否属于集合，但是并不严格要求100%正确的场合。 一. 实例? 为了说明Bloom Filter存在的重要意义，举[详细]
-
上海交大-IBM“大数据分析”合作项目签约及软件捐赠仪式
所属栏目：[大数据] 日期：2021-05-27 热度：72
4月13日上午，上海交通大学-IBM“大数据分析”合作项目签约及软件捐赠仪式在上海交大闵行校区电院群楼3-208会议室举行。上海交大电子信息与电气工程学院计算机系校友、IBM大中华区副总裁、战略部总经理郭继军，IBM大中华区大数据与分析市场总监韩国华，大数[详细]
-
mmTrix大数据分析平台构建实录[转]
所属栏目：[大数据] 日期：2021-05-27 热度：89
http://www.iteye.com/news/31475 mmTrix大数据分析平台构建实录 学习下[详细]
-
推荐丨大数据处理漫谈：盘点开源软件栈
所属栏目：[大数据] 日期：2021-05-26 热度：111
本篇文章重点梳理了软件栈，主要以开源软件为主，闭源不谈。大数据发展至今，开源软件层出不穷，也去解决了不同的问题，笔者试图去弄清楚这些，分门别类，后面也可以参照下。由于笔者知识面有限，难免会出现一些偏颇，不全，不正确，还请指正。后面也会有很[详细]
-
数据层（数据处理）
所属栏目：[大数据] 日期：2021-05-26 热度：118
package cn.hncu.addr.dao; import java.io.EOFException; import java.io.File; import java.io.FileInputStream; import java.io.FileNotFoundException; import java.io.FileOutputStream; import java.io.IOException; import java.io.ObjectInputStream[详细]
-
SGU 299 Triangle（大数）
所属栏目：[大数据] 日期：2021-05-26 热度：109
Triangle Description It is well known that three segments can make a triangle if and only if the sum of lengths of any two of them is strictly greater than the length of the third one. Professor Vasechkin has? N ?segments. He asked you,if[详细]
-
【经典】有K张折扣券和m元最多能买多少物品（折前价ai，折后价bi
所属栏目：[大数据] 日期：2021-05-26 热度：98
这真是很玄学的一道题，贪心也要贪好几次。。。 题解：http://www.voidcn.com/article/p-eincjhrs-rv.html 题解：http://www.voidcn.com/article/p-yrbutkck-up.html #includebits/stdc++.h#define ll long longusing namespace std;struct node{int a,b;}x[[详细]
-
【未发】大数据分析，Hadoop够用吗？Facebook数据专家说No
所属栏目：[大数据] 日期：2021-05-26 热度：176
来自：?InfoQ 链接：http://www.infoq.com/cn/news/2013/12/facebook-hadoop 随着大数据的发展和应用，Hadoop框架受到越来越多的关注和应用。Facebook分析主管Ken Rudin表示，不要小看关系型数据库技术的价值。他认为，Hadoop可能是“大数据”运动的代名词，[详细]
-
POJ 3982 序列（大数）
所属栏目：[大数据] 日期：2021-05-26 热度：116
序列 题目链接： http://poj.org/problem?id=3982 解题思路： 大数。 AC代码： import java.math.BigInteger;import java.util.Arrays;import java.util.Scanner;public class Main{ public static void main(String args[]){ Scanner sca = new Scanner(Sys[详细]
-
IBM在华正式上线 大数据分析业务
所属栏目：[大数据] 日期：2021-05-26 热度：176
点击上方蓝色字体关注。 您还可以搜索公众号“ D1net ”选择关注D1net旗下的各领域（云计算，数据中心，大数据，CIO，企业协作，网络数通，信息安全，企业移动应用，系统集成，服务器，存储，呼叫中心，视频会议，视频监控等）的子公众号。 ======= IBM(国际[详细]
-
bigdata——HBase+zookeeper+Hadoop集群构筑 之 Hadoop YARN集群
所属栏目：[大数据] 日期：2021-05-26 热度：143
最近项目调查闲下来了，有时间让大脑来整体之前做过的调查，为了便于基于存档，遂将其记录下来，希望对后来者有所帮助。 背景 为了了解Hbase集群下数据的查询以及安全性方面的性能数据，需要搭建HBase集群，简单测试。 角色分类 +--------------+-----------[详细]
-
bigdata——HBase+zookeeper+Hadoop集群构筑 之 zookeeper集群构
所属栏目：[大数据] 日期：2021-05-26 热度：140
整体流程 zookeeper物件下载 物件解压 zoo.cfg文件作成 zoo.cfg文件设定 dataDir的 ID作成 zookeeper物件 zookeeper官网下载，此处使用的是zookeeper-3.5.1-alpha。 物件解压 直接使用如下命令 tar -zxvf zookeeper-****-***.gz zoo.cfg文件作成 命令如下：[详细]
-
bigdata——HBase+zookeeper+Hadoop集群构筑 之 Hbase集群构筑
所属栏目：[大数据] 日期：2021-05-26 热度：147
整体流程 物件下载 解压 conf文件配置 启动停止 状态确认 物件下载 ???? 参考hbase官网 解压 ?? tar -zxvf hbase-***.gz conf文件配置 1.hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_67export HBASE_MANAGES_ZK=false 注意：JDK根据自己的环境配置 ??[详细]
-
大数据处理的关键层次架构
所属栏目：[大数据] 日期：2021-05-26 热度：160
图1、大数据处理的关键层次架构 以下是对上图中各层次架构的说明 一、数据存储层 宽泛地讲，据对一致性（consistency）要求的强弱不同，分布式数据存储策略，可分为ACID和BASE两大阵营。 ACID 是指数据库事务具有的四个特性：原子性（Atomicity）、一致性（C[详细]
