-
[bigdata-002]python3 +flask 以post方式获取json的api
所属栏目:[大数据] 日期:2021-01-11 热度:191
1. server.py #!/usr/bin/env python3#-*- coding:utf-8 -*-import osimport jsonimport picklefrom flask import Flask,request,render_template,jsonify,make_response,url_forfrom impala.dbapi import connect#flask appapp = Flask(__name__)@app.route[详细]
-
[bigdata-003]在cdh 5.7下 用sqoop1将mysql数据库数据导入到hdfs
所属栏目:[大数据] 日期:2021-01-11 热度:166
1. 假设,myql安装在bigdata2上。我们要在bigdata3上执行sqoop1。 2. 首先,要在mysql上创建一个'b3'@'%'的账户,这个账户限定只能从外部ip地址访问mysql。 3. 在bigdata3上做如下操作 http://www.cloudera.com/documentation/enterprise/5-7-x/topics/cdh_i[详细]
-
挖掘微信Web版通信的全过程
所属栏目:[大数据] 日期:2021-01-11 热度:150
昨天是周末,在家闲得无聊,于是去weiphone.com逛了一圈,偶然发现有人发了一帖叫《微信 for Mac》,这勾起了我的好奇心,国内做Mac开发的人确实很少,对于那些能够独自开发一些Mac第三方工具的开发者我都表示很敬畏,于是点进去看了一个究竟,如果你们好奇[详细]
-
[bigdata-004]CDH Impala的应用场景
所属栏目:[大数据] 日期:2021-01-11 热度:66
可以将Impala视为改进版的Hive。 两者都使用SQL语言,且Imapal的SQL是Hive SQL的子集。 Hive慢,Impala快,测试的结果是,常规问题上,Impala比Hive快十倍。有了Impala,Hive就可以不用了。 Impala没有索引。这是一个非常显著的特征,没有索引,就不能快速存[详细]
-
LightOJ1214 Large Division (大数求余,同余定理)
所属栏目:[大数据] 日期:2021-01-11 热度:195
Given two integers, a and b ,you should check whether a is divisible by b or not. We know that an integer a is divisible by an integer b if and only if there exists an integer c such that a = b * c . Input Input starts with an integer T ([详细]
-
汇编语言之数据处理的2个基本问题
所属栏目:[大数据] 日期:2021-01-11 热度:179
?? 1、bx、si、di和bp Bx、si和di这3个寄存器我们已经学过了,现在进行一下总结,并学一下bp。 1:在8086CPU中,只有这4个寄存器可以用在[…]中来进行内存单元的寻址。比如,下面的指令都是正确 的: Mov ax,[bx] Mov ax,[bx+si] Mov ax,[bx+di] Mov ax,[b[详细]
-
大数进制转换
所属栏目:[大数据] 日期:2021-01-11 热度:180
一般的数字进制转换大家都很熟悉,先转换为十进制数字,再进行 除 n 取余,这种情况适用于操作数不大的情况(不大于最大的基本数据类型(long long)),但是如果操作数上百位以上甚至上千上万该怎么办呢,显然,传统的方法肯定不行, 我们可以举个例子:将[详细]
-
浅谈ODS与DW的区别-数据项目实战总结
所属栏目:[大数据] 日期:2021-01-11 热度:115
浅谈ODS与DW的区别-数据项目实战总结 ? ODS 全称operation data store 或者 operational data store,中文意思是操作型数据存储( 数据被操作产生的,例如电商交易数据 ( 客户买东西订单 )? 行业订单 工单数据(客户投诉数据) ),或者有的地方也叫运营数[详细]
-
【BZOJ 4542】大数 【莫队】
所属栏目:[大数据] 日期:2021-01-11 热度:185
思路:当P!=2或5时,显然10^x%P!=0 把后缀模P的值搞出来 于是问题就便成询问区间内%P为x的分别有多少个 这个再套一个莫队就可以了。 我的代码压行比较丑,我放std的代码。 #includecmath #includecstdio #includecstring #includeiostream #includealgorith[详细]
-
解读一个新IBM的平台战略:云、大数据分析与人工智能
所属栏目:[大数据] 日期:2021-01-11 热度:121
(上图为 IBM董事长及CEO Ginni Rometty ) 现在,一个新IBM正在浮出水面。在IBM的2015年财报上写道:“今天的IBM已经不仅是一家‘硬件、软件与服务’公司,而转型成为一家认知解决方案与云平台公司。”在公司100多年的历史上,IBM第一次称自己是一家平台公[详细]
-
混合云下商机四伏,IT生产力要如何挖掘?
所属栏目:[大数据] 日期:2021-01-11 热度:95
近年来,随着个人云盘的相继叫停,“云”再一次跃入大众视野。随时可用、不会丢失,这样一个个行走的数据库,显然曾为我们的生活带来了诸多便利。 事实上,云的影响力却不止于此。对于企业而言,云正在成为驱动业务发展的关键生产力。 不管是普普通通的IT日[详细]
-
51nod 1005 大数加法
所属栏目:[大数据] 日期:2021-01-11 热度:70
#include bits/stdc++.husing namespace std;string sum(string s1,string s2){int i,laz=0;string ret=string(10005,'0');for(i=10005-1;i=0;i--){ret[i]=s1[i]+s2[i]-'0'+laz;if(ret[i]'9'){ret[i]-=10;laz=1;}elselaz=0;}return ret;}string opp(string s[详细]
-
自学的道路上自己挖掘、可提供自学的网站与大家一起分享
所属栏目:[大数据] 日期:2021-01-11 热度:193
我这边分享的网站也只是部分,要是你有其他好的学习网站,欢迎留言在我的评论里哦,分享是美德~ demo小样的相关网站: http://www.eoeandroid.com/forum-23-1.html? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?eoe安卓开发 http://www.itlanbao.com/codes.aspx#1,0[详细]
-
数据处理之one-hot
所属栏目:[大数据] 日期:2021-01-02 热度:148
分类方法,通常需要把数据的各个属性转换为一个向量表示,这样每条数据的特征就是一个向量,向量上的每个维度就表示了一个特征属性。 但是如果要转换的数据包含了3种属性,比如身高,体重,年龄。A是女,168cm,70kg,30岁;B是男,180cm,90kg,20岁,那么直[详细]
-
米斯特白帽培训讲义 挖掘篇 厂商寻找
所属栏目:[大数据] 日期:2021-01-02 热度:86
米斯特白帽培训讲义 挖掘篇 厂商寻找 讲师:gh0stkey 整理:飞龙 协议:CC BY-NC-SA 4.0 厂商是什么 厂商可以是一个网站(Web 应用),或者一段程序(PC、移动应用)。从白帽子的角度来说,两个都是厂商,都可以挖掘。 基于漏洞平台的寻找 现在国内有三大漏[详细]
-
七牛数据处理再添新兵——图片瘦身
所属栏目:[大数据] 日期:2021-01-02 热度:61
我们现在已经很难想象,图片的出现,竟然只是作为分割文字和缓解疲劳的工具。 随着智能手机的普及,以及像 in、nice 这样以分享图片为主的应用的流行,人们记录生活、分享感悟的方式不再局限于文字,而是逐渐被拍照取代,拍照也不需要那么刻意为之。 无疑,[详细]
-
[bigdata-007] Hortonworks HDF搭建流程
所属栏目:[大数据] 日期:2021-01-02 热度:62
1. hdf docker搭建 1.1 hdf的镜像xemuliam/hdf 镜像链接 https://hub.docker.com/r/xemuliam/hdf/ 下载镜像: docker pull xemuliam/hdf 1.2 创建容器 docker run --name dck-hdf-8080 -p 8080:8080 -d xemuliam/hdf 1.3 进入容器bash交互 docker exec -it d[详细]
-
BI工具选型指标,如何选择好的BI工具
所属栏目:[大数据] 日期:2021-01-02 热度:77
随着信息化的发展,越来越多的企业将商业智能 BI 的部署列入了企业信息化建设的下期目标, BI 市场需求的日益旺盛,也催生了 BI 厂商激烈的市场竞争,带动了国内 BI 工具技术的发展及成熟。 那么作为一个正在或者即将要进行 BI 工具选型的企业,面对百花齐放[详细]
-
如何正确理解商业智能(BI)?
所属栏目:[大数据] 日期:2021-01-02 热度:127
为了让读者更加清晰地把BI与MIS系统区别开来,本文讨论了BI与DSS(决策支持系统)、EIS(经理执行系统)的主要区别。最后,本文分析了制约BI健康发展的若干因素。 引言 ??? 商业智能(BI)是目前在国外企业界和软件开发界受到广泛关注的一个研究方向。可以用[详细]
-
BI选型流程建议
所属栏目:[大数据] 日期:2021-01-02 热度:85
一、成立选型小组 ? ? ? ? 成立选型小组是企业确定进行软件选型所需要做的第一步。选型小组将负责整个软件选型过程的执行。选型小组成员至少包括公司副总以上领导一名、 CIO 一名、业务负责人一名。 二、评估需求 ? ? ? ? 评估需求是指企业成立 BI 选型小组[详细]
-
BI离不了报表
所属栏目:[大数据] 日期:2021-01-02 热度:165
前不久写了一篇文章:报表 ?VS BI ,指出,报表不等于 BI 。这几天碰到一个客户,让我不得不说出另外的一句话,那就是, BI 离不了报表。 ? ? ??演示中,客户的领导发表意见:你们这个还是报表,我们要的不是报表。比如库存,不同的地方的库存标准是不一样的[详细]
-
企业是否真的需要BI?
所属栏目:[大数据] 日期:2021-01-02 热度:51
这是一个发人思考的问题。 BI 对很多人而言或许还是太过高深,换个角度来问比较容易理解:贵公司需要数据分析吗?财务分析、成本分析或者市场分析?贵公司需要好的分析工具来加速分析的速度吗?如果上述的两个答案是肯定的,贵企业是需要 BI 的。 ? 简单地说[详细]
-
有了ERP,还缺什么?
所属栏目:[大数据] 日期:2021-01-02 热度:105
一、 报表分析方面需要优化 ERP 是一个事务处理系统,它的重点在于进行业务的过程记录与控制,在报表分析处理方面有着先天的缺陷: ( 1 )无法实现不同管理角色的分析要求 中虽然有着大量的报表,却无法按不同管理角色来个性化设置分析平台,同时,繁琐的查[详细]
-
传统BI为什么注定会失败?
所属栏目:[大数据] 日期:2021-01-02 热度:171
? ? 华联商超数据中心总监付立虎曾经讲过这样一个故事:北京华联作为国内大型商业超市,每天来自全国门店的交易数据有千万条,每年仅用户购买的数据累计就超2TB,对于数据分析应用的需求非常强烈。 ????为此,华联在2008年专门引入SAP的BW系统用于数据分析,[详细]
-
深度挖掘基金经理的座驾和基金投资风险之间的关系
所属栏目:[大数据] 日期:2021-01-02 热度:126
本文转自: 量化24小时 已获取官方授权,如需转载,请与原作者联系。 如果一定要贴标签的话。。。。。。 以上是两位基金经理。你的钱会投给谁呢? 这是一个严肃的学术问题,有不少学者研究了sensation seeking和投资风格之间的关系。今天,我们带来的这篇文[详细]