-
大数据处理项目相关
所属栏目:[大数据] 日期:2021-01-16 热度:117
mapReduce部分 * MapReduce MAP :映射 reduce :归纳* 简单来说,一个映射函数就是对一些独立元素组成的概念上的列表(例如,一个测试成绩的列表)的每一个元素进行指定的操作(比如,有人发现所有学生的成绩都被高估了一分,他可以定义一个“减一”的映射函[详细]
-
TF-IDF与余弦相似性的应用(二):找出相似文章
所属栏目:[大数据] 日期:2021-01-16 热度:149
今天,我们再来研究另一个相关的问题。有些时候,除了找到关键词,我们还希望找到与原文章相似的其他文章。比如,"Google新闻"在主新闻下方,还提供多条相似的新闻。 为了找出相似的文章,需要用到"余弦相似性"(cosine similiarity)。下面,我举一个例子来[详细]
-
BI Publisher(rtf)模板开发语法大全(转)
所属栏目:[大数据] 日期:2021-01-16 热度:187
Rtf 模板开发例如背景,纹理分栏等等功能都能用 word 工具实现不再具体总结大家可以参考 word 教程。。。。。 ? 一 . 组 定义一个组的目的是告诉 XMLPublisher 对重复的数据行进行循环显示,也就是说需要使用 for-each 进行数据记录的循环显示 ?for-each:XML[详细]
-
OMXCodec数据处理过程
所属栏目:[大数据] 日期:2021-01-16 热度:173
OMXCodec数据处理过程 (2011-09-02 23:25:39) 转载 ▼ 标签: 杂谈 ? buffer的处理主要由以下4个命令来进行驱动 OMXCodec使用 OMX_EmptyThisBuffer 传递未解码的buffer给component, component收到该命令后会读取input port buffer中的数据,将其组装成帧进行[详细]
-
直播丨SeniorEngineer全方位解读BigData实习
所属栏目:[大数据] 日期:2021-01-11 热度:184
根据《财富》杂志的报道,就业面广,行行需要,薪金高,工作稳定的Big Data Engineer 已经成为当下最炙手可热的职业。 不仅如此,根据美国劳工统计局的数据显示,Big Data Engineer将是美国工作机会增长最快的工作之一。劳工统计局的最新就业率报告预计, 该[详细]
-
poj2506——Tiling(递推+大数加)
所属栏目:[大数据] 日期:2021-01-11 热度:90
Description In how many ways can you tile a 2xn rectangle by 2x1 or 2x2 tiles? Here is a sample tiling of a 2x17 rectangle. Input Input is a sequence of lines,each line containing an integer number 0 = n = 250. Output For each line of inpu[详细]
-
HDoj1715大菲波数(大数)
所属栏目:[大数据] 日期:2021-01-11 热度:135
大菲波数 Time Limit: 1000/1000 MS (Java/Others)????Memory Limit: 32768/32768 K (Java/Others) Total Submission(s): 18616????Accepted Submission(s): 6256 Problem Description Fibonacci数列,定义如下: f(1)=f(2)=1 f(n)=f(n-1)+f(n-2) n=3。 计算[详细]
-
大数据分析原地踏步 原来是分析工具面临信任问题
所属栏目:[大数据] 日期:2021-01-11 热度:192
点击上方蓝色字体关注。 您还可以搜索公众号“ D1net ”选择关注D1net旗下的各领域(云计算,数据中心,大数据,CIO,企业协作,网络数通,信息安全,企业移动应用,系统集成,服务器,存储,呼叫中心,视频会议,视频监控等)的子公众号。 ======= 有时候大[详细]
-
详解:大数据分析的学习之路
所属栏目:[大数据] 日期:2021-01-11 热度:71
来源:机房360 以大数据分析师为目标,从数据分析基[详细]
-
FineBI:一个简单易用的自助BI工具
所属栏目:[大数据] 日期:2021-01-11 热度:186
过去,有关企业数据分析的重担都压在IT部门,传统BI分析更多面向的是具有IT背景的人员。但随着业务分析需求的增加,很多公司都希望为业务用户提供自助分析服务,将分析工作落实到业务人员手中。但同时,分析工具毕竟作为一个系统架设在企业数据分析平台的前[详细]
-
携程大数据实时风控的架构及实践
所属栏目:[大数据] 日期:2021-01-11 热度:200
携程作为国内OTA领头羊,每天都遭受着严酷的欺诈风险,个人银行卡被盗刷、账号被盗用、营销活动被恶意刷单、恶意抢占资源等。 目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步,经过五年的不断探索与创新,已经可以有效覆盖事[详细]
-
Power BI入门教程
所属栏目:[大数据] 日期:2021-01-11 热度:111
题记:这篇文章不仅是Power BI的入门教程,同时相对于Qlik Sense进行了简单比较。 最近把一个Qlik Sense的示例应用手动转成了Power BI的应用,把相关步骤和遇到的问题记录如下,权当作一个入门教程。 1,准备原始数据 由于Qlik Sense的示例应用只有一个单独[详细]
-
“R语言数据分析与挖掘案例实战”培训通知
所属栏目:[大数据] 日期:2021-01-11 热度:93
【培训目标】 ?学完课程之后,学员可以用R作为工具独立完成数据挖掘的整个流程。 【培训特点】 有别于其他培训机构将机器学习、数据挖掘技术拆解开讲解的方法,我们以全流程的完整案例讲解利用R完成数据整理、探索性数据分析、建模分析、模型评估、报告展示[详细]
-
使用文本挖掘实现站点个性化推荐
所属栏目:[大数据] 日期:2021-01-11 热度:79
作者:韦玮,重庆韬翔网络科技有限公司(上海)董事长兼总经理,IT作家,CSDN社区专家。 ? 本文为韦玮原创文章,未经允许不得转载,点此查看作者有关《Python数据分析与挖掘经典案例实战》经验分享。 技术背景 一条信息是否能够让用户感兴趣,主要取决于这条[详细]
-
R语言机器学习与大数据分析高级课程通知(深圳)
所属栏目:[大数据] 日期:2021-01-11 热度:176
一、课程目标 (1)让学员能尽快 掌握R语言的基本使用方法 ,学会利用丰富的网上R语言资料和帮助系统,学会基本的编程方法。 (2) 紧密结合一些应用实例,针对工作中存在的疑难问题进行分析讲解和专题讨论,有效提升学员解决复杂问题的能力。 (3)结合数据[详细]
-
【公开课】聊聊数据分析与挖掘经典案例
所属栏目:[大数据] 日期:2021-01-11 热度:134
系列直播 本期主题 Python数据分析与挖掘经典案例实战 7课时,每周1次2小时,在线直播,手把手教会!! 1 ? ? ? ? ? ? ? ? ? ? 讲师简介 ? ?? ? ? ? 2 ? ? ? ? ? ? ? ? ? ? ? 课程简介及特色 ?? ? ? ? ? 在大数据时代,数据的重要性显得越来越重要,Python作[详细]
-
推荐:R语言大数据分析与机器学习研修
所属栏目:[大数据] 日期:2021-01-11 热度:118
下载本文word版:回复“ 研修班 ”获[详细]
-
大数加法(递推)
所属栏目:[大数据] 日期:2021-01-11 热度:151
#includestdio.h#includestring.h#includealgorithmusing namespace std;int sum[100][10000];int main(){int a,b,c,m,n,q;while(~scanf("%d%d%d",a,b,c)){if(a==0b==0c==0){printf("0n");continue;}memset(sum,sizeof(sum));m = n = q = 0;while(a){sum[0][详细]
-
全国高校R语言大数据分析与机器学习研修班
所属栏目:[大数据] 日期:2021-01-11 热度:147
(培训采用案例教学方式,因选用案例较多,大纲中不一一罗列)[详细]
-
[bigdata-001] mysql 5.7 由于安全问题不能导出数据的解决方式
所属栏目:[大数据] 日期:2021-01-11 热度:152
1. create user 'b1'@'localhost' identified by 'b1'; grant all privileges on *.* to 'b1'@'localhost' identified by 'b1'; 2. select oid into outfile '/home/brian/xxx.csv' from android_user_event_sorted; ERROR 1290 (HY000): The MySQL server i[详细]
-
[bigdata-002]python3 以get方式获取json的api
所属栏目:[大数据] 日期:2021-01-11 热度:151
1. server.py #!/usr/bin/env python3#-*- coding:utf-8 -*-import osimport jsonimport picklefrom flask import Flask,request,render_template,jsonify,make_response,url_forfrom impala.dbapi import connect#flask appapp = Flask(__name__)@app.route[详细]
-
[bigdata-002]python3 +flask 以post方式获取json的api
所属栏目:[大数据] 日期:2021-01-11 热度:180
1. server.py #!/usr/bin/env python3#-*- coding:utf-8 -*-import osimport jsonimport picklefrom flask import Flask,request,render_template,jsonify,make_response,url_forfrom impala.dbapi import connect#flask appapp = Flask(__name__)@app.route[详细]
-
[bigdata-003]在cdh 5.7下 用sqoop1将mysql数据库数据导入到hdfs
所属栏目:[大数据] 日期:2021-01-11 热度:66
1. 假设,myql安装在bigdata2上。我们要在bigdata3上执行sqoop1。 2. 首先,要在mysql上创建一个'b3'@'%'的账户,这个账户限定只能从外部ip地址访问mysql。 3. 在bigdata3上做如下操作 http://www.cloudera.com/documentation/enterprise/5-7-x/topics/cdh_i[详细]
-
挖掘微信Web版通信的全过程
所属栏目:[大数据] 日期:2021-01-11 热度:88
昨天是周末,在家闲得无聊,于是去weiphone.com逛了一圈,偶然发现有人发了一帖叫《微信 for Mac》,这勾起了我的好奇心,国内做Mac开发的人确实很少,对于那些能够独自开发一些Mac第三方工具的开发者我都表示很敬畏,于是点进去看了一个究竟,如果你们好奇[详细]
-
[bigdata-004]CDH Impala的应用场景
所属栏目:[大数据] 日期:2021-01-11 热度:183
可以将Impala视为改进版的Hive。 两者都使用SQL语言,且Imapal的SQL是Hive SQL的子集。 Hive慢,Impala快,测试的结果是,常规问题上,Impala比Hive快十倍。有了Impala,Hive就可以不用了。 Impala没有索引。这是一个非常显著的特征,没有索引,就不能快速存[详细]