-
媒体|郑宇:用大数据猜测雾霾是怎样做到的?
所属栏目:[大数据] 日期:2020-12-31 热度:118
(本文由澎湃新闻授权转载。) ? 全球范围里,有超过半数的人类居住在城市之中,城市化的进程也从未停止过。面对越来越庞大的城市,许多事情已经超出了控制:拥堵的交通,严重的空气污染,让人烦躁的噪音等等。 ? 没有人真正了解城市中到底发生了什么,也没[详细]
-
(26进制大数相加)hdu 2100 Lovekey
所属栏目:[大数据] 日期:2020-12-31 热度:98
Lovekey Problem Description XYZ-26进制数是一个每位都是大写字母的数字。 A、B、C、…、X、Y、Z 分别依次代表一个0 ~ 25 的数字,一个 n 位的26进制数转化成是10进制的规则如下A0A1A2A3…An-1 的每一位代表的数字为a0a1a2a3…an-1 ,则该XYZ-26进制数的10[详细]
-
怎样操作图像辨认、语音辨认、文本发掘做好鉴黄?
所属栏目:[大数据] 日期:2020-12-31 热度:85
人工智能鉴黄市场竞争愈发激烈,目前图普科技、阿里绿网、腾讯万象优图等团队已占据大量市场份额,在此环境下,不少公司试图通过提供更全面的服务从这片红海中分一杯羹。 那么更全面的定制服务体现在哪些地方?雷锋网(公众号:雷锋网)特地采访了极限元 CEO[详细]
-
打包带走!史上最全的大数据说明和建造器材
所属栏目:[大数据] 日期:2020-12-31 热度:163
来源: 数之联大数据(ID:unionbigdata) 工欲善其事,必先利其器。 作为在大数据领域摸爬滚打叱咤风云的伙计们,也应当有一些实用工具来辅助工作日常。下面是小编精心整理的一些经检测非常实用的工具及网站,呈给大家~~ 数据可视化工具 说到数据呈现,必然[详细]
-
[bigdata-027] 最好用的 python+mysql的包:pymysql
所属栏目:[大数据] 日期:2020-12-31 热度:111
pip3 install pymysql import? pymysqlconn = pymysql.connect(host='127.0.0.1',port=3306,user='root',passwd='tiger88',db='spider_phone',charset='utf8')c = conn.cursor()c.execute('select * from phone_info limit 1;')r = c.fetchone()print(r)prin[详细]
-
数据可视化:手把手打造BI
所属栏目:[大数据] 日期:2020-12-31 热度:131
本文是 如何七周成为数据分析师 的第六篇教程,如果想要了解写作初衷,可以先行阅读七周指南。温馨提示:如果您已经熟悉BI,大可不必再看这篇文章,或只挑选部分。 我们上一篇 数据可视化:教你打造升职加薪的报表 教大家如何制作清晰美观的报表以及相应技巧[详细]
-
下一代大数据处理赏罚平台Apache Beam成为Apache顶级项目
所属栏目:[大数据] 日期:2020-12-31 热度:146
Apache软件基金会在2017年01月10正式宣布Apache Beam从孵化项目毕业,成为Apache的顶级项目 Apache Beam(原名Google DataFlow)是Google在2016年2月份贡献给Apache基金会的Apache孵化项目,被认为是继MapReduce,GFS和BigQuery等之后,Google在大数据处理领域[详细]
-
26、Power Query-日期与时间数据处理实例(统计出某年各月各周的
所属栏目:[大数据] 日期:2020-12-31 热度:195
本节重点:Power Query-日期与时间数据处理实例(统计出某年各月各周的借书人数) 需求如下: 上图所示,根据左侧的数据源,统计出2016年各月各周的借书人数(效果如右侧所示)。 分析:很明显,这个需求是对日期的一个操作,其实仅需要用到左侧的第一列即可[详细]
-
[bigdata-028]apache nifi 从mysql导出数据到hbase
所属栏目:[大数据] 日期:2020-12-31 热度:57
0.在hbase节点,启动thrift处事 hbase-daemon.sh start thrift 1. 在本机启动nif ./bin/nifi.sh start 2. 在赏识器输入http://localhost:8080/nifi,看到nifi的界面 3. 拖一个processor ExecuteSQL到界面 ??? 3.1 在processor上点击右键,选择configure,点[详细]
-
资讯 |大数据统计说明解说培训班(第二轮关照)
所属栏目:[大数据] 日期:2020-12-30 热度:87
大数据统计说明解说培训班 暨首届高校青年西席统计解说创新研讨会 第二轮关照 尊敬的先生和同窗,您好! 自此次培训班/研讨会第一轮关照发出至今,获得了宽大青年西席、研究生与高年级本科的起劲相应,来信或来电咨询,报名踊跃。本日再发一次关照,对培训班[详细]
-
[bigdata]小象幫幫忙,Hadoop 能幫什麼忙?
所属栏目:[大数据] 日期:2020-12-30 热度:178
https://dotblogs.com.tw/rickyteng/2012/12/11/85556 [bigdata]小象幫幫忙,Hadoop 能幫什麼忙? Hadoop 文獻探討 微軟巨量資料计策轉向,全面增援Hadoop http://www.ithome.com.tw/itadm/article.php?c=77576 微軟暗示,全面增援 Apache Hadoop,這动静說[详细]
-
资讯 |大数据统计分析教学培训班(第二轮通知)
所属栏目:[大数据] 日期:2020-12-30 热度:116
大数据统计分析教学培训班 暨首届高校青年教师统计教学创新研讨会 第二轮通知 尊敬的老师和同学,您好! 自此次培训班/研讨会第一轮通知发出至今,得到了广大青年教师、研究生与高年级本科的积极响应,来信或来电咨询,报名踊跃。今天再发一次通知,对培训班[详细]
-
[bigdata-015] apache nifi 官方文得魅择要
所属栏目:[大数据] 日期:2020-12-30 热度:107
1NIFI 概览 |NIFIOverView 1.1NIFI 是什么 |Whatis Apache NIFI NIFI 的设计目标,是让各系统之间自动进行数据流交换。企业通常有多个系统,有的系统生产数据,有的系统消费数据。 dataflow 。 dataflow 涉及到的主要问题: 系统失效:网络失效,硬盘失效,[详细]
-
Algorithm学习笔记 --- 寻找 K 大数
所属栏目:[大数据] 日期:2020-12-30 热度:145
Q: 给你一个无序的序列,要你找出第K大的数是什么? Answer: Answer 1: 利用Hash,桶排序等方式,是第一个想到的(编程珠玑中所记) 假设数列中最大数为max,最小数为min,那么首先做一个数组长度为max – min + 1, 然后做散列函数为an – min,对于冲突[详细]
-
7本书从小工到数据说明专家
所属栏目:[大数据] 日期:2020-12-30 热度:101
帮助您的书学数据分析的基础知识,并接近成为在数据分析方面的专家。 在过去的几年里,我读了相当数量的书籍上的数据分析,确定了七个,在我看来,其中最好的。一起,这些书的研究数据分析的基[详细]
-
22本数据说明、发掘的好书保举—绝对干货,不看反悔!
所属栏目:[大数据] 日期:2020-12-30 热度:121
1. 深入浅出 数据说明 这书挺简朴的,根基的内容都涉及了,说得也较量清晰,最后谈到了R是大加分。 难易水平:很是易。 2.啤酒与尿布 通过案例来说工作,并且是最经典的例子。 3.数据之美 一本先容性的书本,每章都办理一个详细的题目,乃至尚有代码,对领略[详细]
-
说明器材很难选? 看他们怎样发掘大数据代价
所属栏目:[大数据] 日期:2020-12-30 热度:121
点击上方蓝色字体存眷。 您还可以搜刮公家号“ D1net ”选择存眷D1net旗下的各规模(云计较,数据中心,大数据,CIO,企业协作,收集数通,信息安详,企业移动应用,体系集成,处事器,存储,呼唤中心,视频集会会议,视频监控等)的子公家号。 ======= 猜测建模[详细]
-
[bigdata-017] 用Hive操纵hbase
所属栏目:[大数据] 日期:2020-12-30 热度:79
1. 在hbase建设一个表 ivt_mny_pro 2. 在hive建设一个外部表ivt_mny_pro_2_hive create external table ivt_mny_pro_2_hive(key string,idx bigint,beginTime timestamp,endTime timestamp,userid string) row format serde 'org.apache.hadoop.hive.hbase.H[详细]
-
FP-Growth序列频仍模式发掘
所属栏目:[大数据] 日期:2020-12-30 热度:114
1算法计划方针 输入差异的呼吁是用户行使Linux处事器的根基途径,通过长时刻收罗差异用户在行使处事器进程中所行使的呼吁序列,发掘个中频仍呈现的呼吁序列,可以辅佐我们相识用户行使该处事器的根基纪律。 另外,假如存在多台处事器,那么我们可以说明发掘[详细]
-
Algorithm进修条记 --- 探求 K 大数
所属栏目:[大数据] 日期:2020-12-30 热度:196
Q: 给你一个无序的序列,要你找出第K大的数是什么? Answer: Answer 1: 利用Hash,桶排序等方式,是第一个想到的(编程珠玑中所记) 假设数列中最大数为max,最小数为min,那么首先做一个数组长度为max – min + 1, 然后做散列函数为an – min,对于冲突[详细]
-
7本书从小工到数据分析专家
所属栏目:[大数据] 日期:2020-12-30 热度:127
辅佐您的书学数据说明的基本常识,并靠近成为在数据说明方面的专家。 在已往的几年里,我读了相等数目的书本上的数据说明,确定了七个,在我看来,个中最好的。一路,这些书的研究数据说明的基[详细]
-
浅谈大数的进制转换
所属栏目:[大数据] 日期:2020-12-30 热度:57
http://www.voidcn.com/article/p-fpnokpkx-yn.html http://www.cnblogs.com/bhlsheji/p/5104558.html http://www.cnblogs.com/phinecos/archive/2009/09/11/1564975.html[详细]
-
太多选择——企业怎样选择吻合的BI器材?
所属栏目:[大数据] 日期:2020-12-30 热度:96
文 | keira-杨红 在没认清近况前,企业虽然不能一言不合就上BI。 BI差异于一样平常的企业打点软件,不能简朴归类为相同用于进步打点的ERP和WMS,或用于进步企业服从的OA、BPM。BI的本质应该是通过揭示数据,用于增强企业各环节的管控,辅佐快速拟定科学的决定。[详细]
-
bigdata-016] python happybase 操纵hbase
所属栏目:[大数据] 日期:2020-12-30 热度:179
1. 用happybase库 操纵 hbase ??? http://happybase.readthedocs.io/en/latest/ 2. cdh集群的hbase集群有三个节点 ??? hbase的版本是HBase 1.2.0 3. hbase base的log目次小于5g,导致报警,目次在/var/log/hbase,筹备清空它。 ?? 删除不必要的log之后,全部[详细]
-
[bigdata-016] python happybase 操作hbase
所属栏目:[大数据] 日期:2020-12-30 热度:125
1. 用happybase库 操作 hbase ??? http://happybase.readthedocs.io/en/latest/ 2. cdh集群的hbase集群有三个节点 ??? hbase的版本是HBase 1.2.0 3. hbase base的log目录小于5g,导致报警,目录在/var/log/hbase,准备清空它。 ?? 删除不需要的log之后,所有[详细]