
人工智能/大数据/云计算/互联网
文章平均质量分 84
ocean1010
智慧农业和市场监管行业15年以上,分享我们的精彩程序人生。(从PB到Java,从程序开发到项目管理,从产品管理到公司管理,一直在路上)。
展开
-
数据仓库常用几种建模方法
本文主要的主线就是回答下面三个问题:什么是数据模型为什么需要数据模型如何建设数据模型最后,我们在本文的结尾给大家介绍了一个具体的数据仓库建模的样例,帮助大家来了解整个数据建模的过程。一、 什么是数据模型数据模型是抽象描述现实世界的一种工具和方法,是通过抽象的实体及实体之间联系的形式,来表示现实世界中事务的相互关系的一种映射。在这里,数据模型表现的抽象的是实体和实体之间的关系,通过对实体和实体之间关系的定义和描述,来表达实际的业务中具体的业务关系。数据仓库模型是数据模型中针对特定的数据仓转载 2021-05-07 15:51:38 · 573 阅读 · 0 评论 -
数据仓库、数据集市、数据湖、数据中台这些概念,终于整明白了
这几年的数据领域出现好多的概念,例如:人工智能、物联网、边缘计算、数据治理、数据湖、数据中台……可谓是“百花齐放”!一时间大家都在提新概念,但却不是所有人都清楚到底意味着什么。“人家都数据中台了,你还在做数据报表”“人家都数据湖了,你还在搞数据仓库”“阿里“拆中台”了,中台难道不香了”……到底为什么要做数据湖/数据中台,有什么价值呢?孰优孰劣?究竟我的公司是不是也要做数据中台/数据湖吗,这是随之而来的问题。事物总是在不断演化的,唯一不变的就是变化。今天就和大家展开讨论数据仓库、数据湖和数据中台这转载 2021-04-02 11:25:16 · 1656 阅读 · 0 评论 -
数据仓库入门,看这一篇文章就够了
众所周知,做数据分析、BI建设,都离不开数据仓库建设,数仓建设的本质目的是支撑分析决策。今天跟着我来学学数据仓库的基础知识,通过本文的阅读,你将获得以下方面的认知:什么是数仓数仓的核心概念数仓的分层架构数据仓库概述数据仓库,顾名思义,就是存储数据的仓库。现实中的仓库会有不同的分区和归类,分区下有多个货架,货架上堆放着各种各样的商品。对于数据仓库来说,分区归类就类似于数据仓库的基础架构,数据仓库的数据存储结构(如表)就是仓库的货架,而商品则是对应数据仓库实际存储的各种数据。无论是什么样的仓库.转载 2021-04-02 11:01:41 · 450 阅读 · 0 评论 -
Memcached,Redis,MongoDB,HBase比较
Memcached, Redis, MongoDB比较mongodb和memcached不是一个范畴内的东西。mongodb是文档型的非关系型数据库,其优势在于查询功能比较强大,能存储海量数据。mongodb和memcached不存在谁替换谁的问题。和memcached更为接近的是redis。它们都是内存型数据库,数据保存在内存中,通过tcp直接存取,优势是速度快,并发高,缺点是数转载 2017-08-21 12:08:22 · 1079 阅读 · 0 评论 -
浅谈Hive vs. HBase
摘要:对于刚接触大数据的用户来说,要想区分Hive与HBase是有一定难度的。本文将尝试从其各自的定义、特点、限制、应用场景等角度来进行分析,以作抛砖引玉之用。对于刚接触大数据的用户来说,要想区分Hive与HBase是有一定难度的。本文将尝试从其各自的定义、特点、限制、应用场景等角度来进行分析,以作抛砖引玉之用。 Hive是什么?Apache Hive是一个构建于Had转载 2017-08-21 11:09:54 · 435 阅读 · 0 评论 -
一篇很好的Hadoop入门文章:Hadoop是什么、核心HDFS与MapReduce的原理
Hadoop一直是我想学习的技术,正巧最近项目组要做电子商城,我就开始研究hadoop,虽然最后鉴定Hadoop不适用我们的项目,但是我会继续研究下去,技多不压身。《Hadoop基础教程》是我读的第一本Hadoop书籍,当然在线只能试读第一章,不过对Hadoop历史、核心技术和应用场景有了初步了解。 Hadoop历史 雏形开始于2002年的Apache转载 2017-08-21 11:01:05 · 651 阅读 · 0 评论 -
别老扯什么Hadoop了,你的数据根本不够大
本文原名“Don't use Hadoop when your data isn't that big ”,出自有着多年从业经验的数据科学家Chris Stucchio,纽约大学柯朗研究所博士后,搞过高频交易平台,当过创业公司的CTO,更习惯称自己为统计学者。对了,他现在自己创业,提供数据分析、推荐优化咨询服务,他的邮件是:stucchio@gmail.com 。 “你有多少大数据和H转载 2014-01-22 08:40:00 · 899 阅读 · 0 评论 -
云计算的服务模式
云计算可以认为包括以下几个层次的服务:基础设施即服务(IaaS),平台即服务(PaaS)和软件即服务(SaaS)。云计算服务通常提供通用的通过浏览器访问的在线商业应用,软件和数据可存储在数据中心。 IaaS IaaS(Infrastructure-as-a- Service):基础设施级服务。消费者通过Internet可以从完善的计算机基础设施获得服务。 PaaS转载 2013-11-29 09:54:15 · 848 阅读 · 0 评论 -
NoSQL数据库应该怎么选取?
从2010年NoSQL在国内渐渐兴起,众多的开源NoSQL百花齐放,如MongoDB、 CounchDB、Redis、 Hbase... 往往在开发新项目时由于没有历史包袱,这些新兴起技术被应用也最为频繁。在此想请教大家在开发项目时,是根据什么情况来判断,应该使用NoSQL而不是MySQL等关系型数据库呢? 同时也希望大家分享下,NoSQL在不同应用场景中的实践经验开发中经常遇到是否使用N转载 2013-11-12 11:38:20 · 929 阅读 · 0 评论 -
类微信APP,移动互联网第三大入口?
中国移动低调上线飞信公众平台这事儿,在这个微信收费之争的风口,被很多人认为是中移动对腾讯的反击,只是“照着老虎画成了猫”。被诟病的地方有两点:一是界面山寨微信公众平台。二是认证账号流程复杂。笔者对以上吐槽持保留意见。在飞信推出公众平台之前,一直视微信为眼中钉的新浪微博已在内测“微博聚合信息推送平台”。阿里巴巴旺信在愚人节也被爆出正在谋求旺信公众平台。靠山寨Evernote起家的有道转载 2013-11-19 10:15:30 · 1651 阅读 · 0 评论 -
创新工场联合创始人汪华:2013年中国移动互联网进入深水区
汪华:我记得从2009年,我们创新工场刚开始的时候,那一年开始,每年我大概都要到各个场合呼吁一下移动互联网。最早每年都说移动互联网这件事有多好,这个事明年、后年会怎么样。当时大家还是将信将疑,觉得这是一个什么东西。但是最近几年,我们当时关于移动互联网的预言都比较准确的实现了,从当时几百万,到现在已经5亿台设备。再往后看,10亿手机用户换成智能手机也是指日可待。我们当时做的公司只有几万用户,到几转载 2013-11-18 14:09:59 · 1422 阅读 · 0 评论