-
大数据处理语言：U-SQL 介绍
所属栏目：[大数据] 日期：2021-03-06 热度：69
微软宣布了新的 Azure 数据湖（Azure Data Lake）服务，该服务被用于云分析，包括了一个超大规模信息库；一个在 YARN 上建立的新的的分析服务，该服务允许数据开发者和数据科学家分析全部的数据；还有 HDInsight，一个全面管理 Hadoop、Spark、Storm 和 HBas[详细]
-
Twitter开源大数据实时分析系统Heron：Heron架构
所属栏目：[大数据] 日期：2021-03-06 热度：54
Heron架构 Heron是Apache Storm的一个直接继承者。从架构角度来看，它与Storm截然不同，但是从API的角度看它是完全向后兼容的。 下面的章节指明了Heron和Storm的区别，描述了Heron背后的设计目标，并解释了其架构的主要组件。 代码库 Heron代码库的详细指南[详细]
-
大数据分析界的“神兽”Apache Kylin初解
所属栏目：[大数据] 日期：2021-03-06 热度：79
转自李栋，来自Kyligence公司，也是Apache Kylin Committer PMC member，在加入Kyligence之前曾就职于eBay、微软。 今天分享的主题是：聊聊“神兽”Apache Kylin的最新特性。本次分享将首先对Apache Kylin进行基本介绍；接下来介绍1.5.x最新版本在架构上的重[详细]
-
kylin-BI工具-tableau9
所属栏目：[大数据] 日期：2021-03-06 热度：169
Tableau 9 Tableau 9.x has been released a while,there are many users are asking about support this version with Apache Kylin. With updated Kylin ODBC Driver,now user could interactive with Kylin service through Tableau 9.x. Apache Kylin cu[详细]
-
Presto随笔
所属栏目：[大数据] 日期：2021-03-06 热度：95
解决了什么问题 快读的交互式查询 presto 和hive到底什么关系 http://www.mutouxiaogui.cn/blog/?p=395 和hive在一个层级，都是基于hdfs的。但是presto可以借助hive的元信息找到hdfs上的节点。 presto现在已经可以连接 MySQL postgre hive等了 presto为什么[详细]
-
HDOJ/HDU 5686 Problem B(斐波拉契+大数~)
所属栏目：[大数据] 日期：2021-03-06 热度：99
Problem Description 度熊面前有一个全是由1构成的字符串，被称为全1序列。你可以合并任意相邻的两个1，从而形成一个新的序列。对于给定的一个全1序列，请计算根据以上方法，可以构成多少种不同的序列。 Input 这里包括多组测试数据，每组测试数据包含一个正[详细]
-
LightOJ 1370 Bi-shoe and Phi-shoe（欧拉函数）
所属栏目：[大数据] 日期：2021-03-06 热度：186
题目链接： LightOJ 1370 Bi-shoe and Phi-shoe 题意： 给出n个数，要求对每个数a[i]找一个数x[i]使得小于x[i]且与x[i]互素的数的个数不小于a[i],求出所有x[i]的最小和。 分析： 和最小则每个数对应的x[i]应最[详细]
-
基因数据处理26之bcftools安装和使用
所属栏目：[大数据] 日期：2021-03-06 热度：117
1.下载： https://github.com/samtools/bcftools 2.安装 make make install 3.结合samtools使用 对排序好的bam数据用samtools生成bcf文件： xubo @xubo :~/xubo/data/testTools/se $ samtools mpileup -ugf ../hs38DH.fa hs2.sort.bam hs2.bcf 由于生成的是[详细]
-
为了驾驭大数据处理，中外互联网巨头做了同样的选择
所属栏目：[大数据] 日期：2021-03-05 热度：61
数据，数据，我要大数据 在今天这个大数据的时代，数据已经成为了许多企业发展的命脉。 图片转自synergicpartners 有些企业需要数据来形成用户洞察，有的企业需要数据来优化业务流程；甚至对于部分企业来说，数据就是他们最珍贵的资产。 在这个卖煎饼都需要[详细]
-
【工作帮】福州的数据人有福了，招数据分析师，年薪20万
所属栏目：[大数据] 日期：2021-03-05 热度：110
机会留给有准备着的人！ 选择比努力更重要！ ? 高薪聘用： 数据分析师 工作职责： 1.根据不同的业务主题，进行数据建模、挖掘； 2.为精准运营和个性化服务提供数据模型和算法支持；? 3.建立业务模型、用户画像，对产品决策制定形成良好的数据支撑； 4.通过数[详细]
-
PrefixSpan序列模式挖掘算法
所属栏目：[大数据] 日期：2021-03-05 热度：115
介绍 与GSP一样，PrefixSpan算法也是序列模式分析算法的一种，不过与前者不同的是PrefixSpan算法不产生任何的侯选集，在这点上可以说已经比GSP好很多了。PrefixSpan算法可以挖掘出满足阈值的所有序列模式，可以说是非常经典的算法。序列的格式就是上文中提到[详细]
-
大数据分析查询引擎Impala
所属栏目：[大数据] 日期：2021-03-05 热度：141
来自标点符的《大数据分析查询引擎Impala》 作者：标点符（钱魏 Way） 链接：http://www.biaodianfu.com/impala.html Impala是Cloudera公司主导开发的新型查询系统，它提供SQL语义，能查询存储在Hadoop的HDFS和HBase中的PB级大数据。 已有的Hive系统虽然也提[详细]
-
1.大道至简的数据处理工具（Power Query）
所属栏目：[大数据] 日期：2021-03-05 热度：175
? ?如果你不想学复杂的函数，如果不想学更难的VBA。但你想把数据处分分析工作做好。那么，来吧！这套课程将是你最好的选择。远离繁杂，回归简单与智能化。 ? ?先来看看power query 怎么做些什么。先来展示一下效果图。[详细]
-
9个最佳的大数据处理编程语言
所属栏目：[大数据] 日期：2021-03-05 热度：132
大数据的浪潮仍在继续。它渗透到了几乎所有的行业，信息像洪水一样地席卷企业，使得软件越发庞然大物，比如Excel看上去就变得越来越笨拙。数据处理不再无足轻重，并且对精密分析和强大又实时处理的需要变得前所未有的巨大。 那么，在巨大的数据集中进行筛选[详细]
-
logminer挖掘不同数据库的归档日志，使用redo log数据字典
所属栏目：[大数据] 日期：2021-03-05 热度：148
挖掘要求: 使用测试库挖掘生产库的归档日志，生产库未设置utl_file_dir参数，生产库不能重启，无法抽取出生产库的数据字典 挖掘方法： 将生产区数据库的数据字典抽取到redo log 中，将有数据字典的redo log一块加载入logminer，使用redo log中的数据字典进行[详细]
-
大数定律和中心极限定理的中文叙述
所属栏目：[大数据] 日期：2021-03-05 热度：93
大数定律和中心极限定理的中文叙述 一、大数定律 1.切比雪夫大数定律 叙述：{Xn}随机变量序列，满足①相互独立；②方差D(X)存在并且一致有上界； 那么{Xn}服从大数定律——随机变量的平均值依概率收敛到随机变量的期望，当n很大时； 体现了均值的稳定性。 2.[详细]
-
倒计时24小时开课｜StuQ大数据分析平台小班课（仅剩10个名额）
所属栏目：[大数据] 日期：2021-03-02 热度：133
StuQ?联合三位大数据资深专家桑文锋、曹犟、付力力共同推出《从0到1构建大数据分析平台》精品小班教学，仅有 60 席位，精品小班课区别于大众在线视频教学，课程设置具有如下特色： 采用在线视频直播授课 以实战为主 在线解答疑问 课后作业review 精品小班课[详细]
-
简化版大数乘法
所属栏目：[大数据] 日期：2021-03-01 热度：114
Description Dear Uncle Jack is willing to give away some of his collectable CDs to his nephews. Among the titles you can find very rare albums of Hard Rock,Classical Music,Reggae and much more; each title is considered to be unique. Last w[详细]
-
【ZJOI2013amp;amp;BZOJ3110】K大数查询
所属栏目：[大数据] 日期：2021-03-01 热度：102
Description 有n 个位置和m 个操作。操作有两种，每次操作如果是1 a b c 的形式，表示往第a 个位置到第b 个位置每个位置加入一个数c。如果操作形如2 a b c 的形式，表示询问从第a 个位置到第b 个位置，第c 大的数是多少。 Solution 树套树的模板题 找矩阵中[详细]
-
大数据处理平滑算法：Good-Turing估计
所属栏目：[大数据] 日期：2021-03-01 热度：145
大数据处理中，不管数据如何大，由于不能穷举一切，总是有限的。 那么在有限的数据规模下，参数平滑算法就十分重要。参数平滑算法是在训练数据不足时，采用某种方式对统计结果和概率估计进行必要的调整和修补，以降低由于数据稀疏现象带来的统计误差。 比如[详细]
-
SCU2016-05 I题 trie图 + 大数dp
所属栏目：[大数据] 日期：2021-03-01 热度：92
File Name : 这很trie图建立转移规则，然后dp。 大数模板 Code : /**********************jibancanyang************************** *Author* :jibancanyang *Created Time* : 一 5/ 9 11:49:40 2016 ***********************1599664856@qq.com**************[详细]
-
飞利浦陈祁侑：需要设计的不是硬件，而是信息挖掘与应用的方式
所属栏目：[大数据] 日期：2021-03-01 热度：85
本文节选自飞利浦资深设计策略顾问陈祁侑在2016国际体验设计大会「智慧生活峰会」上的演讲。你也可以通过底部 “阅读原文” ，上 Meia 直接观看完整视频及更多IXDC 2016大会峰会精彩演讲。 两年前第一次来参加IXDC的时候，说的是如何透过共创、快速迭代共创[详细]
-
【杭电oj】1865 - 1sting（大数递推）
所属栏目：[大数据] 日期：2021-03-01 热度：101
点击打开题目 1sting Time Limit: 5000/1000 MS (Java/Others)????Memory Limit: 32768/32768 K (Java/Others) Total Submission(s): 4973????Accepted Submission(s): 1842 Problem Description You will be given a string which only contains ‘1’; You[详细]
-
hdu 5718 大数模拟
所属栏目：[大数据] 日期：2021-03-01 热度：103
点击打开链接 #include iostream#include algorithm#include cstdio#include vector#include cstring#include queue using namespace std;const int M = 10010000;int num[10],f[M],index; // num[i] 数字i出现的个数 char data[M]; void Add(int x){int t=0[详细]
-
大数据为我们带来了什么？
所属栏目：[大数据] 日期：2021-03-01 热度：135
洞悉行业动态，把握行业趋势，从数据中挖掘洞察，将洞察转变为价值，同时带您了解更多大数据在零售、交通、制造、银行等行业中的应用。 ???? 最早提出大数据时代到来的是麦肯锡：“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们[详细]
