大数据_站长网

[干货]大规模数据处理的演变(2003-2017)

所属栏目：[大数据] 日期：2020-12-25 热度：60

本PPT介绍了大规模数据处理的演变，从最早的Mapreduce、Hadoop介绍到最新的Beam；并最后得出结论： The future of streaming and batch is Apache Beam。值得一看。本PPT由Google的大神泰勒?阿克道（Tyler Akidau）分享，他是谷歌的一名高级软件工程师。是[详细]
算法提高 P1001 （大数乘法）

所属栏目：[大数据] 日期：2020-12-25 热度：93

当两个比较大的整数相乘时，可能会出现数据溢出的情形。为避免溢出，可以采用字符串的方法来实现两个大数之间的乘法。具体来说，首先以字符串的形式输入两个整数，每个整数的长度不会超过8位，然后把它们相乘的结果存储在另一个字符串当中（长度不会超过16位[详细]
开源大数据处理工具汇总（下）

所属栏目：[大数据] 日期：2020-12-25 热度：152

第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。日志收集系统一、Facebook?Scribe 贡献者：Facebook 简介：Scribe是Facebook开源的日志收集系统，在Faceboo[详细]
如何进行大数据分析及处理？

所属栏目：[大数据] 日期：2020-12-25 热度：196

大数据的分析从所周知，大数据已经不简简单单是数据大的事实了，而最重要的现实是对大数据进行分析，只有通过分析才能获取很多智能的，深入的，有价值的信息。那么越来越多的应用涉及到大数据，而这些大数据的属性，包括数量，速度，多样性等等都是呈现了大[详细]
开源大数据处理工具汇总（上）

所属栏目：[大数据] 日期：2020-12-25 热度：68

查询引擎一、Phoenix 贡献者：：Salesforce 简介：这是一个Java中间层，可以让开发者在Apache HBase上执行SQL查询。Phoenix完全使用Java编写，代码位于GitHub上，并且提供了一个客户端可嵌入的JDBC驱动。 Phoenix查询引擎会将SQL查询转换为一个或多个HBase[详细]
推荐大数据分析的八大工具

所属栏目：[大数据] 日期：2020-12-25 热度：179

去年，IBM宣布以17亿美元收购数据分析公司Netezza；EMC继收购数据仓库软件厂商Greenplum后再次收购集群NAS厂商Isilon；Teradata收购了Aster Data 公司；随后，惠普收购实时分析平台Vertica等，这些收购事件指向的是同一个目标市[详细]
大数据分析到底需要多少种工具？

所属栏目：[大数据] 日期：2020-12-25 热度：58

摘要 JMLR 杂志上最近有一篇论文，作者比较了 179 种不同的分类学习方法（分类学习算法）在 121 个数据集上的性能，发现 Random Forest （随机森林）和 SVM （支持向量机）分类准确率最高，在大多数情况下超过其他方法。本文针对“大数据分析到底需要多少种[详细]
数据处理的统计学习（scikit-learn教程）

所属栏目：[大数据] 日期：2020-12-25 热度：126

数据挖掘入门与实战 ?公众号： datadw Scikit-learn 是一个紧密结合Python科学计算库(Numpy、Scipy、matplotlib)，集成经典机器学习算法的Python模块。一、统计学习：scikit-learn中的设置与评估函数对象（1）数据集 scikit-learn 从二维数组描述的数据中[详细]
大数版的斐波那契数列

所属栏目：[大数据] 日期：2020-12-25 热度：132

光棍的yy http://acm.nyist.net/JudgeOnline/problem.php?pid=655 时间限制：1000?ms ?|? 内存限制：65535?KB 难度：2 输入第一行输入一个n表示有n个测试数据以下n行，每行输入m个1 (1 = n,m = 200) 输出输出这种组合种数，占一行样例输入 31111122222[详细]
[bigdata-34] pyenv + anaconda 4.2 + python3.5+ ubuntu 16.04

所属栏目：[大数据] 日期：2020-12-24 热度：157

1. pyenv 官网 https://github.com/yyuu/pyenv 2. 安装 git clone https://github.com/yyuu/pyenv.git ~/.pyenv echo 'export PYENV_ROOT="$HOME/.pyenv"' ~/.bashrc echo 'export PATH="$PYENV_ROOT/bin:$PATH"' ~/.bashrc echo 'eval "$(pyenv init -)"' ~[详细]
MPP DB 是大数据及时说明体系

所属栏目：[大数据] 日期：2020-12-24 热度：152

大数据规模，及时说明体系（在线查询）是最常见的一种场景，前面写了一个《及时说明体系 (HIVE/HBASE/IMPALA) 浅析》接头业界当前常见的方案。互联网公司用得较量多是 HIVE/HBASE ，如腾讯基于 HIVE 深度定制改革，更名为 TDW ，小米等公司选用 HBASE 等。[详细]
BI进修打算

所属栏目：[大数据] 日期：2020-12-24 热度：115

1??????????《数据客栈》——比尔.恩门，首要先容什么是数据客栈 2??????????SSIS计划与开拓 2.1?????????BIWORK的微软SSIS系列 2.2?????????微软MSDN之SSIS系列 3??????????SSAS计划与开拓 3.1?????????BIWORK的微软SSIS系列 3.2?????????微软MSDN之SSIS系[详细]
BI导论——数据客栈概论

所属栏目：[大数据] 日期：2020-12-24 热度：188

1??????????书名《Building the Data WareHouse》作者：比尔.恩门 2??????????目标：将蕴蓄的数据酿成信息，以成立决定支持体系（DSS） 3??????????原有的DSS是破碎的，按需抽取的，导致一再与低效 4??????????原始数据与DSS数据比拟与差别 4.1?????????原始[详细]
[bigdata-035]用js dtree展示一个树形布局 py3+dtree+jquery

所属栏目：[大数据] 日期：2020-12-24 热度：106

1. dtree的下载 http://destroydrop.com/javascripts/tree/default.htm 2. 目次布局 . ├── static │?? ├── css │?? │?? └── dtree.css │?? ├── img │?? │?? ├── base.gif │?? │?? ├── cd.gif │?? │?? ├── diffDoc.gif │??[详细]
[编程题]数字翻转(大数加法)

所属栏目：[大数据] 日期：2020-12-24 热度：172

对付一个整数X，界说操纵rev(X)为将X按数位翻转过来，而且去除去前导0。譬喻: 假如 X = 123，则rev(X) = 321; 假如 X = 100，则rev(X) = 1. 此刻给出整数x和y,要求rev(rev(x) + rev(y))为几多？? 输入描写: 输入为一行，x、y(1 ≤ x、y ≤ 1000)，以空格离隔[详细]
[bigdata-036] mit-scheme试用

所属栏目：[大数据] 日期：2020-12-24 热度：67

1. 安装Mit-scheme apt-get install mit-scheme 2. 写一个hello wold代码， hi.scm (begin (display "Hello,World!") (newline)) 3. 在呼吁行执行 scheme，进入交互界面，然后输入呼吁 (load 'hi.scm') 将执行这个文件，然后输出 "Hello,World!" 4. scheme语[详细]
[bigdata-037] docker hue 用SQL获取数据以及可视化

所属栏目：[大数据] 日期：2020-12-24 热度：116

1. hue官网 https://github.com/cloudera/hue http://gethue.com/ 2. hue的成果有py2+django开拓，提供Hive,Impala,MySQL,Oracle,PostgreSQL,Spark SQL,Solr SQL,Phoenix...等SQL数据获取和页面展示 3. 用docker 安装hue docker pull gethue/hue 4. hue ima[详细]
[bigdata-037]apache hue 用SQL获取数据以及可视化

所属栏目：[大数据] 日期：2020-12-24 热度：130

1. hue官网 https://github.com/cloudera/hue http://gethue.com/ 2. hue的成果有py2+django开拓，提供Hive,Impala,MySQL,Oracle,PostgreSQL,Spark SQL,Solr SQL,Phoenix...等SQL数据获取和页面展示 3. 用docker 安装hue docker pull gethue/hue 4. hue ima[详细]
[bigdata-038] tushare 金融数据安装行使

所属栏目：[大数据] 日期：2020-12-24 热度：141

1. 安装 pip install tushare 2. 获取股票的根基面 #!/usr/bin/env python3#!-*- coding:utf-8 -*-import tushare as ts#表现根基信息res = ts.get_stock_basics()print(res)print(type(res)) res是的范例是pandas.core.frame.DataFrame，3114? x 22 的矩阵[详细]
一连赋强人工智能财富生态英特尔AI百佳创新鼓励打算硕果累累

所属栏目：[大数据] 日期：2020-12-19 热度：86

当前，人工智能市场快速发展，又调查数据显示，全球人工智能市场的规模2020年超过1500亿美金，并且未来几年保持17%的年增长率。而在中国，人工智能成为我国产业升级和经济转型的一个主要动力，计划到2025年核心产业规模超过4000亿，带动相关的产业规模超过[详细]
文思海辉与达梦完成产物兼容互认证

所属栏目：[大数据] 日期：2020-12-18 热度：189

继文思海辉与国产IT厂商南大通用、数腾软件完成产品兼容互认证，近日，文思海辉又与武汉达梦数据库股份有限公司(以下简称：达梦公司)完成产品兼容性互认证。[详细]
净利润同比下滑超60%，少了小米后华米科技能否独立“行走”？

所属栏目：[大数据] 日期：2020-12-18 热度：180

北京时间11月23日美股盘前，华米科技发布了2020财年第三季度的财务报告。在财报发布后，华米科技当天盘前股价累计下跌7.6%。在23日美股三大股指集体收涨情况下，[详细]
奏响5G“主旋律”，MWC将于明年2月重返上海

所属栏目：[大数据] 日期：2020-12-18 热度：54

假如没有由于疫情而停办，2021年将是MWC天下移动通讯大会落地上海的第十年。按打算，它将在来岁的6月份举行。但因为疫情的影响，2020年的MWC上海展没能准期进行，或者也由于云云，来岁的大会比原打算来得更早一些。据主办方GSMA克日公布，2021年MWC上海展[详细]
戴尔全新产品搭载新一代NVIDIA高性能显卡

所属栏目：[大数据] 日期：2020-12-18 热度：83

历经数次迭代进级，戴尔于克日推出多款重磅新品。搭载新一代NVIDIA GeForce RTX 3070显卡的全新ALIENWARE Aurora游戏台式机、戴尔XPS计划旗舰台式机、G5智能电竞台式机，以越发刁悍的机能、令人赞叹的视觉结果及极致的细节成果，为游戏喜爱者打造了栩栩如[详细]
第十届吴文俊人工智能科学技能奖名单出炉云天励飞荣获一等奖

所属栏目：[大数据] 日期：2020-12-18 热度：129

日前，2020年度第十届吴文俊人工智能科学技术奖获奖名单正式出炉，云天励飞荣获吴文俊人工智能专项奖芯片项目一等奖。吴文俊人工智能科学技术奖被誉为中国智能科学技术最高奖，是人工智能领域的最高荣誉象征。值得一提的是，这是云天励飞第二次斩获吴文[详细]

10856

320