5月19日,BoCloud博云与TalkingData在北京联合发布DataCruiser高弹性大数据云平台,通过BoCloud云架构与TalkingData大数据分析平台的有机融合,提供完整的应用容器和大数据计算相关的组件仓库和便捷的操作模式,使客户在面对“互联网+”时代爆炸性的数据处理业务时,享受大数据分析带来的精准信息和云计算技术带来的IT系统的高效运行,降低企业在部署数据分析平台的综合成本,使云化部署金融大数据平台的时间降低为原来的数十分之一;提高互联网及移动互联网环境下高并发应对能力,带来更好的数据处理体验,使金融大数据的处理能力通过弹性云至少提升10倍;通过云化架构,提供多租户的大数据PaaS平台,帮助客户避免内部重复建设,享受专业的平台保障服务。
应用容器技术,为大数据部署加速
大数据时代,人们越来越清楚地意识到数据中蕴藏的价值。海量数据的拥有者——银行,电力,运营商,物流公司等等行业用户都在积极地寻求方法利用手中的数据。然而大数据处理平台配置和部署的繁琐,以及组件相互依赖关系的复杂让众多企业望而却步。针对这个突出的问题, DataCruiser高弹性大数据云平台,向用户提供简单快捷易部署的大数据加速和分析系统,通过将云计算平台与大数据处理平台的整合,实现了大数据计算、存储、网络、虚拟化和行业应用融合的紧密集成。
平台向用户提供了完整的应用容器和大数据计算相关的组件仓库和便捷的操作模式。
安装大数据处理组件界面
基于简洁的界面交互方式,用户仅需在主机角色中输入对应的服务器地址,整合平台即可根据主机角色解析并生成大数据处理集群和上层应用集群拓扑结构,自动地从组件仓库中分别拉取各个主机所需的组件并进行对应的安装和环境的配置,部署完毕后自动运行各个功能组件。并且安装过程中整合平台根据安装进度向用户呈现可视化的效果。
将大数据计算框架部署的复杂度从O(n)简化到O(1),极大地提高了大数据集群的部署效率。完全实现了“一键式”方式的大数据计算部署和运行。
通过运用***的容器技术,平台极大的降低了大数据处理框架部署和日常维护的复杂度,大幅降低了部署、运行和维护的成本。与此同时,通过将应用系统的开发、测试、准发布和生成四个部署环境统一化处理,减少了开发到上线的环节,成倍提升了业务应用的上线速度。
云化架构,让大数据也能“弹”起来
当前,众多的传统企业面临着互联网对传统业务模式的冲击,并且还面临着业务从互联网向移动互联网的快速发展。这不但带来了企业对数据分析需求的快速增长,同时也带来了业务高峰时段与低谷时段数据不可预估的脉冲式涌动对传统IT架构的冲击问题。
DataCruiser高弹性大数据云平台通过将TalkingData强大的数据分析平台与BoCloud博云的云平台架构进行结合,构建了包括基础平台层、资源存储层、数据处理层和应用容器层在内的整合平台系统,进行统一资源配置和全生命周期的管理——利用Docker容器化技术,构建服务集群、应用集群和监控集群,对物理资源进行统一规划,支持开发,测试,集群,发布,部署,运维不同阶段的统一管理,为业务系统、运维和应用开发提供有力的底层支持,并使得大数据处理能力通过弹性云成倍的提升,帮助企业提高投入产出比,从而创造更多的商业价值。
多租户PaaS平台,将大数据平台的成本降下来
大数据的软件专业化程度高,搭建一个可支持生产、可进行性能调优、能保证数据安全的大数据平台不是一件简单的事情,需要IT开发人员具有丰富的经验才有可能做好。这使得大数据分析的门槛居高不下,不但大数据人才非常紧缺,并且各个公司、甚至大型集团中的不同部门为了搭建自己的大数据硬件、软件平台,投入了大量的重复劳动,导致对自己的业务逻辑和分析算法的研发资源被挤占。
支撑人类社会高速发展的是人类专业化分工的能力。在有需求的地方,提供专业化的服务,在创造商业价值的同时,将能够提升整个社会的运行效率。这正是BoCloud博云和TalkingData这样的技术性公司所不懈追求的。
我们将TalkingData的大数据处理框架集成到BoCloud博云的PaaS平台上,包含了HDFS文件存储系统、Yarn资源管理和Zookeeper协作处理、Kafka数据分发、Strom实时处理和MapReduce离线批处理部分,并提供用户业务定制容器、TalkingData管理容器和第三方开源中间件容器,为客户打造一个专业化的大数据PaaS平台,实现平台与应用的分离,从而使得大数据开发人员能够将有限的资源投入到核心算法和应用的开发中去。
BoCloud博云和TalkingData希望能够切实帮助各类需要大数据分析的企业,例如银行、保险、证券等金融行业企业,通过使用DataCruiser高弹性大数据云平台降低成本、提高效率,能够更加专注于自身专业领域的能力开发和提升。