澳门新葡亰信誉平台游戏中国开源云计算用户大会:开源云架构已经成为潮流和趋势

by admin on 2020年4月5日

在大数据时代,海量数据正成为互联网、软件、硬件公司们竞逐的金矿。三分技术七分数据,得数据者得天下,数据的所有权之争正变得日益激烈。数据概念的提出比较早,自
2013
年大数据兴起,数据更是被视为未来极为重要的资源,连李克强总理也把数据提升到基础资源的层面,称为“重要的生产力”。

摘要*:*11 月 13 日,在 2017 杭州云栖大会上,Elasticsearch
与阿里云宣布达成战略合作,共同研发及发布阿里云上提供托管的
Elasticsearch,为中国市场提供崭新的用户体验。Elasticsearch
挺进中国市场面临的机遇和挑战如何?阿里云 Elasticsearch
为中国用户提供了哪些新服务?为此,InfoQ 采访了 Elasticsearch
的创始人兼首席执行官 Shay Banon。

著名的数据科学家 Viktor Mayer-Schönberger
曾在《大数据时代》一书中提及各大科技巨头对数据利用的案例:Google
曾通过搜索记录挖掘数据二次利用价值,成功预测流感爆发趋势; Amazon
利用用户搜索及购买的历史数据进行书籍推荐,成功提升站内销量……

【51CTO.com原创稿件】经过多年发展,开源软件已经成为软件生态的重要组成部分,作为会聚全球软件开发者智慧的一种方式,开源模式不断促进软件技术的发展创新,持续推动着软件和信息技术服务在制造、金融、教育等各个领域的普及应用,创造了显著的经济和社会效益。

随着互联网数据规模的爆炸式增长,如何从海量的历史、实时数据中快速获取有用的信息,变得越来越具有挑战性。而这其中,搜索作为获取信息最高效的途径之一,已经越来越受到人们的青睐。

IEEE Spectrum
第三次“最受欢迎编程语言”排行榜显示,与大数据相关的语言普遍呈上升趋势,如 Go、R、Scala
甚至是 Python。

当今,云计算主导的现代IT模式已经渗透到各个行业,驱动着IT技术和应用的创新。由于开源软件代码透明,而且拥有从业者广泛参与的技术社区,开源技术有利于实现软件自主可控,产学研用合作,以及编程人才的培养。因此,工信部等我国政府机构对开源软件的高度重视,多次出台鼓励政策,云计算开源技术也逐渐成为云计算发展的重要生产力。

一款优秀的搜索引擎,它连接了普通用户和网站网页,用户可以轻而易举且免费地搜索到想看的网站和内容,而这些网站的内容被搜索引擎检索到,通过搜索引擎技术呈现给用户。

澳门新葡亰信誉平台游戏 1

近日,第四届中国开源云计算用户大会在北京举行。会上,众多行业主管部门官员,行业信息化技术主管,中国和美国的业界专家、学者、各行业云计算用户及开源社区技术供应商济济一堂,探讨中国开源云计算事业的未来。

11 月 13 日,在 2017 杭州云栖大会上,Elasticsearch
与阿里云宣布达成战略合作,共同研发及发布阿里云上提供托管的
Elasticsearch,为中国市场提供崭新的用户体验。Elasticsearch
挺进中国市场面临的机遇和挑战如何?阿里云 Elasticsearch
为中国用户提供了哪些新服务?为此,InfoQ 采访了 Elasticsearch
的创始人兼首席执行官 Shay Banon。

数据就像这个时代取之不尽用之不竭的“矿井”,挖掘越多、利用越多,就能产生越大的价值。

澳门新葡亰信誉平台游戏 2

经过短短一个小时的交流,能明显感觉 Shay Banon
有着灵敏的商业嗅觉。他在搜索的领域深耕了 18 年,差不多 8 年前创立了
Elasticsearch,他说,创业最重要的是找到自己擅长的地方,并且保持激情和热爱,创业,意味着你要寻找生活中的问题,然后用创造性思维去解决它们。

为何数据如此重要?它为我们带来了哪些挑战?又提供了哪些机遇?

工业和信息化部信息化和软件服务业司副司长任利华在致辞中首先表示,开源事业正在蓬勃发展。开源软件有力地支撑了全球软件产业的创新发展,持续推动着全球信息领域整体格局的演化。近年来,全球开源项目持续增长,基于开源的软件产品和信息技术服务不断涌现,开源架构在云计算、大数据、移动互联网、人工智能、区块链等新一代技术领域的应用不断深化。党中央国务院高度重视软件产业的发展,新世纪以来先后两次颁布了鼓励软件产业发展的重大政策,实施了云计算、大数据、中国制造2025、制造业与互联网融合发展等一系列重要的战略规划。

Elasticsearch 源于一个食谱的应用

10 月 11
日云栖大会阿里云数据智能生态专场,阿里资深技术专家、人工智能专家、高级产品专家齐上阵,为您带来一场云数据的饕餮盛宴,届时还有中国科学院院士重磅发布:大数据系统软件国家工程实验室合作成果,分析大数据系统软件的挑战和机遇!

经过多年发展,我国软件产业在产业规模、创新能力、企业实力和行业应用,公共服务体系建设方面都取得了显著的成绩。今年一到十月份中国软件和信息技术服务业完成业务收入4.42万亿元,同比增长13.9%。18年左右的时间,从500万到了5万亿,我国实现了从百万量级到万亿量级的跨越。

在谈及当年接触 Lucene 并开发 Elasticsearch 的初衷的时候, Shay Banon
认为自己参与 Lucene
完全是一种偶然,当年他还是一个待业工程师,跟随自己的新婚妻子来到伦敦,妻子想在伦敦学习做一名厨师,而自己则想为妻子开发一个方便搜索菜谱的应用,所以才接触到
Lucene。直接使用 Lucene 构建搜索有很多问题,包含大量重复性的工作,所以
Shay Banon 便在 Lucene 的基础上不断地进行抽象,让 Java
程序嵌入搜索变得更容易,经过一段时间的打磨便诞生了他的第一个开源作品“Compass”,中文即“指南针”的意思。之后,他找到了一份面对高性能分布式开发环境的新工作,在工作中他渐渐发现越来越需要一个易用的、高性能、实时、分布式搜索服务,于是决定重写
Compass,将它从一个库打造成了一个独立的 server,并创建了开源项目。

澳门新葡亰信誉平台游戏 3

任利华副司长同时也表达了进一步推动开源软件发展的设想和建议:

第一个公开版本出现在 2010 年 2 月,在那之后 Elasticsearch 已经成为
Github 上最受欢迎的项目之一。

我们知道生产力必备三要素是:劳动者、劳动工具和劳动对象,换到“得数据得天下”的今天,生产力必不可少的就是:人才、技术和数据这现代三大要素了。

1.
认真研究开源业界出现的一些新情况、新问题、新需求,探索有益于开源事业发展的新模式,以开放公开的精神吸引企业和社会专业人士更广泛的参与到现有机制当中,推进开源事业向前发展。

Elasticsearch 的成功源自开源

有了人才和技术,你离瓜分天下仅差“数据”一大要素!来云栖大会啊,让你在现场与和数据专家零距离交流:

2.
继续加强开源软件人才的教育培养,不断优化开源软件培训,积极应对新一代技术发展给人才培养带来的挑战。优化和提升我国在开源软件领域的技术能力,满足数字中国、智慧社会的建设要求。

经过八年,Elasticsearch 在中国也颇受广大工程师欢迎, Shay Banon 说
Elasticsearch 成功的关键因素就是开源还有除了搜索之外的不同用例,如
日志管理、安全和分析。

澳门新葡亰信誉平台游戏 4

3.
鼓励开源爱好者、企业、组织等实质参与开源合作项目,进一步了解产业合作需求,明确开源合作方向,积极推进相关工作,加快开源成果的推广应用。

他认为,开放源代码搜索引擎为人们学习、研究并掌握搜索技术提供了极好的途径与素材,推动了搜索技术的普及与发展,使越来越多的人开始了解并推广使用搜索技术。使用开源搜索引擎,可以大大缩短构建搜索应用的周期,并可根据应用需求打造个性化搜索应用,甚至构建符合特定需求的搜索引擎系统。搜索引擎的开源,无论是对技术人员还是普通用户,都是一个福音。

开源中国为大家带来了全网专享福利!开源中国的会员复制优惠码,在购票时填入,就可以在云栖大会现场开源中国展台处领取现金福利哦!9
月1 日起,268 元门票返现 100 元,168 元门票返现 100元
!赶紧把这个消息传递给好朋友吧,我们云栖大会见!

4.
推动开源软件在各行业的应用创新,以解决现实问题为导向,在制造业和智慧城市等领域大力支持基于开源模式和开源软件的解决方案,支持开源社区驱动引领云计算、大数据、人工智能等快速创新发展。

Shay Banon
有一个愿景,使世界上每个开发人员能够使用搜索作为基础来简单地解决他们最复杂的用例。通过实时和大规模提供数据,Elastic
的产品已经下载了超过 1.5
亿次累积的时间,用于构建现代搜索,日志记录,安全性,指标和分析应用程序。

(文/开源中国)    

电子工业出版社总编辑兼华信研究院院长刘九如指出,随着云应用的不断创新呈现,云计算也步入新的时代。在新的应用需求和新的机遇面前,有众多的成功经验值得分享,也有众多新的热点话题需要研讨交流。与此同时,在企业降本增效和开源技术发展推动下,选择开源云架构已经形成潮流和趋势。由于开发者和用户的共同推动,Openstack等开源创新浪潮,改变了以往的信息技术演化模式,深刻影响着各个IT领域和行业信息化应用格局,这样的共识需要更好的体现到各类信息系统的开源与开放上来。

技术助推力量

SUSE行业创新总监、新兴标准和开源总监、Openstack基金会主席Alan
Clark先生在主题报告中与大家共同回顾了2017年开源产业的发展与挑战,共同探讨了开源云计算技术趋势,以及如何利用OpenStack和SUSE
OpenStack Cloud前进。

当今世界,技术的日新月异加剧了市场竞争力的此消彼涨过程,企业越来越重视技术创新所带来的竞争力量的增强以及由此创造的短期和长期市场利益,逐步形成以技术创新为核心的发展战略。企业之间的竞争,不仅仅是规模上的竞争,更重要的是企业间的技术创新实力的较量。

【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】

马云在云栖大会上演讲时,谈到技术对于未来的重要性,“在未来面前我们都是孩子,未来没有专家”,他认为未来发展得好的公司一定是能将互联网技术用得最好的公司。

任何一种新兴技术,都必然要经历螺旋式上升的发展轨迹,也必须符合技术生命周期的发展规律,即从概念提出、泡沫、破灭、冷静、成熟、应用兴起,再到重生与再创新。对于企业来讲,在企业方向和研发战略上,一定要把握和尊重技术产业领域的发展规律。

Shay Banon 介绍了 Elasticsearch 里的几项关键技术处于的趋势。

澳门新葡亰信誉平台游戏 5

Elasticsearch 和阿里云合作 大步迈进中国市场

当谈及 Elasticsearch 挺进中国市场的战略时, Shay Banon
表示:“中国对我们来说是一个不断增长的市场,过去几年间,我们看到
Elasticsearch 的社区版图扩展至超过 5000
多位开发人员。中国也是全球最大的市场之一,差不多有 1.9
亿的开发者,希望这 1.9 亿开发者都能用到开源的 Elasticsearch
的产品,并且取得成功。今天 Elasticsearch 选择与阿里云合作,并配合
Elasticsearch 的实时处理能力、强大的 X-Pack 功能,如 security,alerting
和 machine
learning,共同加快中国广大开发者生态的创新步伐,构建、托管及管理更多不同的应用。”除此之外,Shay
Banon 认为 Elasticsearch 接下来会针对中国市场,大力推广其商业化产品
X-Pack,让越来越多的人了解与使用。

搜索引擎的数据挖掘优势

大数据时代,也是信息爆炸的时代,是否拥有信息已经不再重要,重要的是如何能够快速的找到所需信息,而搜索引擎在这方面有着天然优势,搜索引擎的数据挖掘将产生更加明显的效果。

很多搜索技术的改进都离不开大数据技术。搜索引擎从本质上看,就是一种典型的大数据应用。目前,搜索在大数据领域已经跨进了一大步,人们可以实时搜索到想要的信息。

根据最新的数据库引擎排名显示,Elasticsearch,Solr 和 Splunk
分别占据了数据库搜索引擎的前三位

澳门新葡亰信誉平台游戏 6

从趋势上来看,Elasticsearch 和 Splunk 上升明显,Elasticsearch
更是表现出了非常强劲的势头。

澳门新葡亰信誉平台游戏 7

在生产环境记录应用的运行日志已经成为惯例,但日志需要经过处理和分析才有意义,第三方日志管理工具的出现正旨在解决这个问题。当下比较有代表性的日志管理工具有
Splunk 和 Logstash (注:Logstash 用途在于将数据插入到 Elasticsearch 和
Kibana 中可视化日志)。

Shay Banon 表示在日志分析领域,Elasticsearch 最大的竞争对手就是 Splunk
,在商业软件付钱与开源软件免费之间选择,Elasticsearch
是全世界最受欢迎的开源解决方案,而且会以灵活性,实时能力和规模地处理大量数据,所以如果你在内地问开发者,大部分开发者倾向于
Elastic Stack。

他举例, 类似于 Netflix,Facebook,Microsoft 以及 Linkedln
公司在日志基础架构上会选择运行大型 Elasticsearch 集群。此外,Elastic
Stack 能够在不同范畴使用,比如欺诈检测和特定领域的业务分析,这将使
Elastic 不继扩张。

机器学习赋能用户解决复杂问题

云计算的发展,使得数据的采集、处理和分析都变得容易,大数据得以存在于各行各业各种数据体系中,人工智能因此成为了一个火爆的领域。

而其中的机器学习就是基于搜索技术建立起来的,而搜索带来的海量数据积累,又能够构建一套基于海量数据的数据统计分析,从而能够为一些应用场景下的关键决策带来指导和支撑。

Shay Banon
强调机器学习在数据搜索领域的重要价值:“以后不是跟数据讲我们要什么,而是数据主动告诉我们这边有什么,这就是机器学习的力量。

一点小小的担忧

搜索引擎知道我们的出行路线、地理位置、工作信息、日常行为模式和交际圈子,它比任何保险公司或银行都了解我们的风险状况,随着可穿戴智能设备的兴起,它也可能比医生更了解我们自身的身体状况。或者说,搜索引擎将变得比我们自己更了解自己。

这是信息时代独特的背景,对于效率的追求使我们不可避免的享受互联网搜索引擎等服务带给我们的信息服务,同时也不可避免的享受个人信息外泄的苦恼。搜索引擎的机器学习势必需要越来越多的用户信息,这与我们的隐私权存在本质上的冲突。或许,我们已经意识到这一点,但在效率面前对此无能为力。

给广大工程师的建议:

计算机世界变化的速度是惊人的。程序员被认为是最接近计算机世界的职业,几乎所有的科技新产品都得由程序员来写代码。

Shay Banon
建议广大程序员要不断地学习新的技能,并且铭记在过往使用那些技能时得到的经验。有激情,并且热爱这份职业,时刻站在终端用户的角度去评估自己所编写的软件,而不是在封闭的空间里编写代码。

除此之外,程序员还要擅于借助工具,开发过程中选择适合自己和项目开发所需要的工具。正所谓工欲善其事,
必先利其器。

写在最后:马云说过的这句话,“帮助年轻人,帮助弱小的人,因为小树苗也可能成长为参天大树。你将种子埋入这些年轻人的脑中,等他们成长起来,就可以改变世界。”

Shay
Banon很喜欢这句话,帮助别人,让别人强大,你才能更强大。这才是生命的意义。

本文由北邮@爱可可-爱生活老师推荐,阿里云云栖社区组织翻译。

发表评论

电子邮件地址不会被公开。 必填项已用*标注

网站地图xml地图