-
Elastic Stack （ELK 5）- 运维数据分析系统
所属栏目：[大数据] 日期：2021-01-08 热度：70
概述 本文将简单介绍运维数据分析系统 Elastic Stack，并描述其基础部署过程。 简介 ELK（Elasticsearch + Logstash + Kibana）用于日志集中分析系统，Elasticsearch 用于存储、搜索、分析数据，Logstash 用于接收并处理数据，Kibana 提供 Web UI 管理数据[详细]
-
生态环境大数据分析应用示范平台总结
所属栏目：[大数据] 日期：2021-01-08 热度：140
生态环境大数据分析应用示范平台总结 1、前言 这个项目从2015年12月开始到2016年11月结束，历时一年，一年的时间有接近八个月的时间我待在呼和浩特。经历了冷暖交替，基本熟悉了当地的饮食生活习惯，结束的时候真有点依依不舍。这是第一个独立负责完成的项[详细]
-
四种BI 开源工具介绍-SpagoBI,openI,JasperSoft,Pentaho
所属栏目：[大数据] 日期：2021-01-08 热度：87
1 BI系统的简述 从技术角度来说 BI 包含了 ETL、DW、OLAP、DM等多环节。简单的说就是把交易系统已经发生过的数据，通过ETL工具抽取到主题明确的数据仓库中，OLAP后生成Cube或报表，透过Portal展现给用户，用户 利用这些经过分类、聚集、描述和可视化的数据[详细]
-
神经网络：请不要开始就让我sigmoid(wTx)，谢谢！
所属栏目：[大数据] 日期：2021-01-08 热度：175
副标题#e# 神经网络：请不要开始就让我sigmoid(wTx)，谢谢！ 引子 学习机器学习，翻阅了一些神经网络的文章，上来就是sigmoid ( 1/(1+exp(x)) )和W T X，让不少初学者摸不着头脑。一些市面上评价很高的机器学习的书也是直接开始sigmoid和收敛性的讨论，想踏[详细]
-
51nod 1029 大数除法
所属栏目：[大数据] 日期：2021-01-08 热度：132
java大法过的。。。。 import java.util.*;import java.math.*;public class acm {public static void main(String[] args){BigInteger a,b,c,d;Scanner input=new Scanner(System.in); while(input.hasNextBigDecimal()){ a=input.nextBigInteger(); b=in[详细]
-
AndroidNative层文件解析漏洞挖掘指南
所属栏目：[大数据] 日期：2021-01-08 热度：161
| 导语?本文以手Q的一次文件解析类漏洞挖掘为例，叙述了Android Native层文件解析类型漏洞挖掘的过程 手Q这个应用从功能来说十分的庞大，如果使用类似MFFA的框架去挖掘文件解析类漏洞，效率低，而且文件入口在哪儿、如何利用脚本进行自动化都是非常大的问[详细]
-
布尔财经想做金融领域的今日头条，并从信息中挖掘交易机会
所属栏目：[大数据] 日期：2021-01-08 热度：195
副标题#e# 布尔财经可以提供200多个单一主题的回归测试，平均准确率也在60%左右。在选股方面，布尔财经的模型可以做到在题材股爆发行情中段给出信号，帮助投资者获取爆发行情末段的超额收益。 文 | 老扎 上世纪七十年代美国宇航局NASA裁员缩减开支，一大批[详细]
-
大数据处理：关于hadoop
所属栏目：[大数据] 日期：2021-01-08 热度：155
副标题#e# Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。 [1]??Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDF[详细]
-
完整数据团队Tips（关于BI系统、数据仓库、数据挖掘和数据实验的
所属栏目：[大数据] 日期：2021-01-02 热度：196
参考The Strong Data Science Audit: How does your organization's data strategy stack up?一文 分析和仪表盘 使用第三方获取用户行为的工具？ 使用Google Analytics、Segment、Heap之类的工具。 有没有明确的用户行为定义，还是说只有PV？ 查看PV是了解[详细]
-
36早报|扎克伯格创造了钢铁侠里的贾维斯 警方用大数据分析抓获18
所属栏目：[大数据] 日期：2021-01-02 热度：104
副标题#e# Hi，早上好，亲爱的小伙伴们，昨天是冬至节，你有吃饺子吗？ 都说冬至节不吃饺子耳朵会被冻掉哦~先上一张我小时候吃饺子的照片，有没有满满的既视感→→？ 过完了冬至节，马上就要迎来平安夜，圣诞节，元旦节，春节…… 好吧，这似乎和大数据没啥[详细]
-
大数据处理分析工具
所属栏目：[大数据] 日期：2021-01-02 热度：142
hadoop Hadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop[详细]
-
bfprt算法，中位数的中位数算法，O(n)时间复杂度求解第k大数
所属栏目：[大数据] 日期：2021-01-02 热度：100
215. Kth Largest Element in an Array 题目地址 https://leetcode.com/problems/kth-largest-element-in-an-array/ 题目描述 Find the kth largest element in an unsorted array. Note that it is the kth largest element in the sorted order,not the[详细]
-
棋盘覆盖。大数
所属栏目：[大数据] 日期：2021-01-02 热度：119
棋盘覆盖 时间限制：3000?ms ?|? 内存限制：65535?KB 难度：3 描述 在一个2 k ×2 k （1=k=100）的棋盘中恰有一方格被覆盖，如图1（k=2时），现用一缺角的2×2方格（图2为其中缺右下角的一个），去覆盖2 k ×2 k 未被覆盖过的方格，求需要类似图2方格总的[详细]
-
BI入门经典
所属栏目：[大数据] 日期：2021-01-02 热度：69
副标题#e# 【前言】 ?????昨天论坛的SQL Server大版新增了一个BI板块，大家讨论得热火朝天，由于此前因为客户环境的问题，一直在使用sql 2000，没怎么关注这一块的东西，最近刚好要做购物篮的分析，所以到网上搜集了一些资料。为了跟大家保持“步调一致”，[详细]
-
为什么说OLAP产品毁了BI?
所属栏目：[大数据] 日期：2021-01-02 热度：160
? ? ? ?企业为了确定经营战略和市场战略所进行的经营活动，在BI项目的分析决策过程中，需要基于多种报告和报表进行分析。理想的市场活动展开，大多需要各个营业点的销售报表，每种商品按季节销售的业绩图表等，这就需要大量准确的并且易于判断的数据。 然[详细]
-
大道至简的数据处理工具-（Microsoft Power Query入门）
所属栏目：[大数据] 日期：2021-01-02 热度：96
副标题#e# 大道至简的数据处理工具-Microsoft Power Query 告别复杂的excel函数，excel VBA编程，让一切回归简单与职能。 什么样的人群适合这样的一个工具： 1、出纳、会计、统计、仓管、数据分析等与数据打交道的的岗位。 2、不想学处理数据的函数、VBA编[详细]
-
数据处理方式与控制程序方式不同
所属栏目：[大数据] 日期：2021-01-02 热度：59
结构化方法是直接通过程序来处理数据，处理完毕后即可显示处?理结果，在控制程序方式上是按照设计调用或返回程序不能自由导航，?各模块程序之间存在着控制与被控制的关系；面向对象方法将数据与?对应的代码封装成一个整体，原则上其它对象不能直接修改其数[详细]
-
如何用大数据实现用户价值的最大化
所属栏目：[大数据] 日期：2021-01-01 热度：118
副标题#e# 来源：易观智库 1 大数据中的用户分析 首先，我们为什么要去做用户分析？面临繁琐的数据之中，需要做什么分析？怎么去提取数据？在建立用户画像模型的过程中，区分用户特征的关键点是什么？应该从哪些方面去寻找用户的特征？其实这个问题扩大化以[详细]
-
算法提高 大数加法
所属栏目：[大数据] 日期：2021-01-01 热度：159
问题描述 输入两个正整数a,b，输出a+b的值。 输入格式 两行，第一行a，第二行b。a和b的长度均小于1000位。 输出格式 一行，a+b的值。 样例输入 4 2 样例输出 6 #includestdio.h#includestring.hvoid fun(int n,int sum[]){int temp,i;for(i=0;in;i++){temp[详细]
-
[bigdata-031] python3+selenium 做抓取
所属栏目：[大数据] 日期：2021-01-01 热度：185
1. 安装 1.1 pip3 install -U selenium 1.2 下载 https://github.com/mozilla/geckodriver/releases/download/v0.13.0/geckodriver-v0.13.0-linux64.tar.gz? 解压缩，然后放到/usr/bin目录 2. 抓取豆瓣 #!/usr/bin/env python3#!-*- coding:utf-8 -*-impor[详细]
-
logminer挖掘
所属栏目：[大数据] 日期：2021-01-01 热度：116
1.???? Logminer介绍 LogMiner 是Oracle公司从产品8i以后提供的一个实际非常有用的分析工具，使用该工具可以轻松获得Oracle 重做日志文件（归档日志文件）中的具体内容，LogMiner分析工具实际上是由一组PL/SQL包和一些动态视图组成，它作为Oracle数据库的[详细]
-
[bigdata-005] 用docker搭建oracle 11g并提供python3 开发
所属栏目：[大数据] 日期：2021-01-01 热度：114
参考资料 http://www.bubuko.com/infodetail-401514.html 1. docker上的oracle 11g https://hub.docker.com/r/alexeiled/docker-oracle-xe-11g/ 安装和启动命令： 1.1 docker pull alexeiled/docker-oracle-xe-11g 1.2 docker run --name dck-oracle-11g -[详细]
-
[bigdata-006] 工作流 tez和oozie
所属栏目：[大数据] 日期：2021-01-01 热度：138
1.? 基本状况 Tez是Hortonworks开发的。 董西成的分析 http://dongxicheng.org/mapreduce-nextgen/apache-tez/ http://zh.hortonworks.com/blog/introducing-tez-faster-hadoop-processing/ tez运行在Yarn上的，DAG工作流，底层设计，对Map和Reduce进一步[详细]
-
HDoj1047Integer Inquiry(大数连续相加)
所属栏目：[大数据] 日期：2021-01-01 热度：197
Integer Inquiry Time Limit: 2000/1000 MS (Java/Others)????Memory Limit: 65536/32768 K (Java/Others) Total Submission(s): 19438????Accepted Submission(s): 5087 Problem Description One of the first users of BIT's new supercomputer was Chip[详细]
-
读取csv数据并保存成图像
所属栏目：[大数据] 日期：2021-01-01 热度：151
int main(int argc,char* argv[]){ifstream file("******.csv");string value;int i = 0;int j = 0;while (file.good()){getline(file,value,'n');//cout string(value,value.length()) endl;if (i 0){value.erase(0,2);value.erase(value.length() - 9);[详细]
浙公网安备 33038102330469号