大数据资讯列表 -乐鱼入口

资讯月刊下载

第121期(18-03)

  • java程序员开发常用的工具
  • 3月全球数据库排名:postgresql 再迎暴涨

第120期(18-02)

  • 开源巨献:2017 年 google 开源了这些超赞的项目
  • 关于区块链,程序员需要了解什么

第119期(18-01)

  • 编写高性能java代码的最佳实践
  • 从15000个python开源项目中精选的top30,github平均star为3707,赶紧收藏!

活跃编辑

资讯编辑

web前端

企业架构

iteye小编

其他专家

进入编辑列表

[企业架构] 常用的几种大数据架构剖析

数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展,数据挖掘、数据探索等专有名词曝光度越来越高,但是在类似于hadoop系列的大数据分析系统大行其道之前,数据分析工作已经经历了长足的发展,尤其是以bi系统为主的数据分析,已经有了非常成熟和稳定的技术方案和生态系统,对于bi系统来说,大概的架构图如下: 可以看到在bi系统 ...
jihong10102006 评论(0) 有73345人浏览 2018-04-12 4 0

[非技术] 面向大数据的分布式调度

引用作者:梁福坤,百度外卖大数据首席架构师。 责编:魏伟 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》,给我们投稿,请联系邮箱weiwei@csdn.net。 前言:大数据的分布式调度是在进行数据etl过程中起到了总体的承上启下的角色,整个数据的生产、交付、消费都会贯穿其中,本文从调度、分布式调度的特征展开,再对大数据调度个性化特征的一些阐述,由满足大数据使用的架构和业务 ...
jihong10102006 评论(0) 有8137人浏览 2017-08-21 0 0

[行业应用] 如何快速全面建立自己的大数据知识体系?

引用作者经过研发多个大数据产品,将自己形成关于大数据知识体系的干货分享出来,希望给大家能够快速建立起大数据产品的体系思路,让大家系统性学习和了解有关大数据的设计架构。 很多人都看过不同类型的书,也接触过很多有关大数据方面的文章,但都是很零散不成系统,对自己也没有起到多大的作用,所以作者第一时间,带大家从整体体系思路上,了解大数据产品设计架构和技术策略。 大数据产品,从系统性和体系思路上来做,主要分 ...
jihong10102006 评论(0) 有9685人浏览 2017-07-24 1 0

[数据库] 柏睿数据董事长刘睿民应邀出席上海静安国际大数据论坛 ...

7月6日,由国家发展和改革委员会、国家工业和信息化部、中共中央网络安全和信息化领导小组办公室指导,上海市经济和信息化委员会与上海市静安区人民政府共同主办,市北高新集团与上海数据交易中心共同承办的“中国数据创新行”上海站接力仪式暨2017上海静安国际大数据论坛活动在上海展览中心友谊会堂隆重举行。柏睿数据董事长刘睿民作为工信部数据库国际标准专家应邀参出席,并就“大数据与智慧医疗”论坛作交流发言。 本 ...
rnifeasy1 评论(0) 有5738人浏览 2017-07-10 0 0

[行业应用] 【收藏】全球100款大数据工具汇总

引用来源:csdn程序员人生公众号 1、 talend open studio 是第一家针对的数据集成工具市场的etl(数据的提取extract、传输transform、载入load)开源软件供应商。talend的下载量已超过200万人次,其开源软件提供了数据整合功能。其用户包括美国国际集团(aig)、康卡斯特、电子港湾、通用电气、三星、ticketmaster和韦里逊等企业组织。 2、dys ...
jihong10102006 评论(1) 有10842人浏览 2017-07-03 1 0

[行业应用] 大数据平台架构技术选型与场景运用

引用导读:本文将大数据的工作角色分为三种类型,包括业务相关、数据科学相关和数据工程。大数据平台偏向于工程方面,大数据平台一般包括数据源、数据采集、数据存储、数据分析等方面。 讲师从数据来源、数据源结构、数据变化程度和数据规模等4个维度对数据源进行分类,数据源分类维度的不同决定最后的技术选型。讲师还对数据源分类的定义及选型方式进行详细讲解,最终联系到大数据的应用场景,让数据应用方式更加直观。 一、大 ...
jihong10102006 评论(0) 有15027人浏览 2017-06-21 2 0

[数据库] b轮融资获数千万美元,柏睿数据到底牛在哪?

2017年对于柏睿数据而言是个幸运的一年, 5月初就传来柏睿数据公司完成b轮融资的好消息,融资金额高达数千万美元,投资方为北京经信委作为lp的中国科学院直属投资基金国科嘉和领投。公司自2014年创立以来,柏睿数据就以每年完成一轮融资的速度,保持着高速发展的态势,得到了国际数据库领域的高度认可和投资界的热捧!早在2014年,柏睿数据就已经完成了千万级人民币的pre-a融资,领投机构为蓝驰创投,这也是国 ...
rnifeasy1 评论(0) 有7527人浏览 2017-05-25 0 1

[行业应用] 贵阳数博会大数据标准化论坛将于5月26日隆重召开

由数博会组委会主办,工信部直属机构中国电子化技术标准化研究所,全国信标委大数据标准工作组、贵阳市质量技术监督局承办的贵阳数博会大数据标准化论坛将于5月26日在贵阳隆重举行。 贵阳数博会大数据标准化论坛以中国智造核心技术标准世界话语权引领为主题,贯彻落实科技强国战略、推动中国技术标准国际话语权的引领、对中国技术走出去起到了重要而积极的作用。该论坛旨在基于大数据时代下帮助社会各界了解国内外大数据领域的 ...
rnifeasy1 评论(0) 有3709人浏览 2017-05-25 0 1

[行业应用] 腾讯qq社交网络的四度分离

引用作者:黄俊,腾讯qq社交网络事业群数据挖掘工程师,主导或参与过社交关系链挖掘,lbs挖掘,推荐系统等多个项目。负责对千亿qq社交关系链的计算、分析和挖掘工作,历经腾讯图计算从hive到spark的演变。 责编:郭芮,欢迎大数据领域技术投稿、约稿、给文章纠错,请发送邮件至guorui@csdn.net。 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》 在社会学领域有一个六 ...
jihong10102006 评论(1) 有5861人浏览 2017-05-22 0 1

[企业架构] 日处理20亿数据,实时用户行为服务系统架构实践

携程实时用户行为服务作为基础服务,目前普遍应用在多个场景中,比如猜你喜欢(携程的推荐系统)、动态广告、用户画像、浏览历史等等。 以猜你喜欢为例,猜你喜欢为应用内用户提供潜在选项,提高成交效率。旅行是一项综合性的需求,用户往往需要不止一个产品。作为一站式的旅游服务平台,跨业务线的推荐,特别是实时推荐,能实际满足用户的需求,因此在上游提供打通各业务线之间的用户行为数据有很大的必要性。 携程原有的实时 ...
jihong10102006 评论(1) 有10564人浏览 2017-04-26 6 4

[数据库] 探讨数据时代构建高可用数据库的新技术

引用作者:崔秋,pingcap 联合创始人,重度开源爱好者,曾任职于搜狗、豌豆荚,长期从事广告系统基础组件相关的研究,现主要从事开源newsql 数据库 tidb/tikv 相关的设计和研发工作。 责编:郭芮(guorui@csdn.net),关注大数据领域。 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅2017年《程序员》。 近几年,随着移动互联网的发展、云计算的普及和各种新业务 ...
jihong10102006 评论(0) 有7361人浏览 2017-03-20 0 0

[行业应用] 大数据和区块链之间的比较分析

大数据和区块链两者之间有个共同的关键词:分布式,代表了一种从技术权威垄断到去中心化的转变。 分布式存储:hdfs vs. 区块 大数据,需要应对海量化和快增长的存储,这要求底层硬件架构和文件系统在性价比上要大大高于传统技术,能够弹性扩张存储容量。谷歌的gfs和hadoop的hdfs奠定了大数据存储技术的基础。另外,大数据对存储技术提出的另一个挑战是多种数据格式的适应能力,因此现在大数据底层的存储层 ...
jihong10102006 评论(0) 有13741人浏览 2017-03-07 0 0

[行业应用] 解析阿里云分布式调度系统伏羲

引用作者:陶阳宇,花名举水,阿里云高级技术专家,飞天分布式系统早期核心开发人员,开发和优化过伏羲系统中多个功能模块,参加了飞天5k、世界排序大赛等多个技术攻坚项目。在分布式计算、高并发系统的设计和开发方面有较丰富的经验。 责编:郭芮(guorui@csdn.net),关注大数据领域。 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》 本文涉及阿里云分布式调度团队在分布式调度系 ...
jihong10102006 评论(0) 有7657人浏览 2017-03-06 0 0

[行业应用] 从大数据到深度学习,这些年度开源“新秀”你可用过? ...

开源如今已渗透到多个领域,从流行应用,到在线服务,再到高新技术,有许许多多的新兴项目出现,也有活跃多年的经典项目随着技术的演变进入新的领域。 国外开源软件管理供应商 black duck software 在2月底发布了第九期年度“开源新秀”报告,显示了在过去一年中在多个领域的全新 top 开源项目。涉及到的领域有:区块链、数据库、深度学习、sdn、容器、网络安全和教育。 1、区块链 —— sa ...
jihong10102006 评论(0) 有4942人浏览 2017-03-03 0 0

[数据库] 图数据库——大数据时代的高铁

引用作者:董小珊,姚臻 责编:仲培艺(zhongpy@csdn.net) 本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅《程序员》 如果把传统关系型数据库比做火车的话,那么到现在大数据时代,图数据库可比做高铁。它已成为nosql中关注度最高,发展趋势最明显的数据库。 简介 在众多不同的数据模型里,关系数据模型自20世纪80年代就处于统治地位,而且出现了不少巨头,如oracle、my ...
jihong10102006 评论(1) 有34094人浏览 2017-03-03 1 0

[互联网] 甲骨文预测:2017年大数据的变化趋势

2017年已然来临,大数据技术仍然保持着飞速发展。无论是物联网、云计算领域乃至企业技术都开始将其引入自身并作为新的变革方向。 众多企业已经在积极接纳大数据技术,并作为提升自身市场竞争力的核心因素。在今天的文章中,我们将基于甲骨文给出的预测结论,总结2017年十项大数据变化趋势。 1.机器学习时代来临 以往的机器学习仅限于数据科学家群体之内,但2017年将成为机器学习进入主流的元年。无论是谷歌的最 ...
jihong10102006 评论(0) 有5937人浏览 2017-02-16 0 0

[行业应用] 推荐系统中基于深度学习的混合协同过滤模型

近些年,深度学习在语音识别、图像处理、自然语言处理等领域都取得了很大的突破与成就。相对来说,深度学习在推荐系统领域的研究与应用还处于早期阶段。 携程在深度学习与推荐系统结合的领域也进行了相关的研究与应用,并在国际人工智能顶级会议aaai 2017上发表了相应的研究成果《a hybrid collaborative filtering model with deep structure for re ...
jihong10102006 评论(0) 有7403人浏览 2017-01-25 0 0

[行业应用] 饿了么推荐系统:从0到1

引用本文由携程技术中心投递,id:ctriptech。作者:饿了么数据运营部资深算法工程师陈一村,在携程个性化推荐与人工智能meetup上的分享。陈一村2016年加入饿了么,现从事大数据挖掘和算法相关工作,包括推荐系统、用户画像等。 随着移动互联网的发展,用户使用习惯日趋碎片化,如何让用户在有限的访问时间里找到想要的产品,成为了搜索/推荐系统演进的重要职责。作为外卖领域的独角兽, 饿了么拥有百万级的 ...
jihong10102006 评论(0) 有5865人浏览 2017-01-20 1 0

[数据库] apache beam:下一代的数据处理标准

引用声明:本文为《程序员》原创文章,未经允许不得转载,更多精彩文章请订阅2017年《程序员》。 作者:李呈祥,万达网络科技集团大数据技术专家,apache hive committer,apache flink committer,超过6年的分布式数据处理系统开发经验,有丰富的开源社区工作经验。 责编:郭芮,关注大数据领域,寻求报道或投稿请联系guorui@csdn.net。 apache beam ...
jihong10102006 评论(0) 有5928人浏览 2017-01-16 2 0

[数据库] 百分点“数据隧道”玩转大数据平台实时数据复制

引用实时数据复制技术在银行、电信、保险、政务和电商等领域应用非常广泛。 比如银行领域的收单业务涉及收单行、银行卡组织及发卡行的数据同步。收单行的数据需要传输到银行卡组织,再由银行卡组织传输给发卡行。 如果收单业务不能做到这几点,则会出现建设银行的pos机只能刷建设银行的卡,招商银行的pos机只能刷招商银行的卡的情况。或者用户刷卡完毕后,商家需要电话询问收单行用户是否有足够余额,收单行再去询问银行 ...
jihong10102006 评论(0) 有4752人浏览 2017-01-12 0 0

最近热门tag

java(1854) google(1441) android(1244) javascript(842) web(669) linux(648) 框架(605) windows(591) 浏览器(540) html5(533) firefox(483) jquery(480) ios(479) ruby(427) chrome(386) html(380) 编程(365) 工作(349) apache(346) python(328)

热门资讯

global site tag (gtag.js) - google analytics
网站地图