产品详情
星环一站式大数据平台
星环一站式大数据平台是星环科技为公有云打造的一套完整的大数据开发平台,产品完整涵括了集群管理和调度,企业数据仓库,数据集市,实时计算,数据挖掘和数据查询与搜索等领域,可以帮助用户在云平台上快速便捷的构建大数据应用,快速探索和发现数据价值。平台主要包含两个产品:集群操作系统Transwarp Operating System(TOS)和Transwarp Data Hub (TDH)。
Transwarp Operating System(TOS)
TOS是为大数据应用量身订做的云操作系统,其基于Docker和Kubernetes,基于优先级的抢占式资源调度和细粒度资源分配,支持对TDH的一键式部署、扩容、缩容,同时也允许其他服务和大数据服务共享集群,从而提高资源的使用率。TOS创新的抢占式资源调度模型能在保障实时业务的同时,提高集群空闲时的资源占用,让批量作业和实时业务在互不干扰的情况下分时共享计算资源。
TOS由四个部分组成:Docker是基于cgroup技术的轻量级虚拟化技术,相比较传统的VMware虚拟化技术有启动速度更快,资源占用小,没有性能损失等优点;Resource scheduler实现了创新的抢占式资源调度模型,可以支持复杂工作负载下的资源共享;Built-in system services包含etcd/replicator/load balancer等服务,可以实现多租户管理,自动修复以及自动扩容等功能; Central service repository包含应用的docker镜像,支持TDH以及多种企业软件镜像(如Proxy,Influxdb,MySQL等),同时支持第三方应用镜像上架,可以让用户基于TOS部署完整的应用软件栈。
Transwarp Data Hub (TDH)
TDH是星环大数据处理套件,是国内落地案例最多的一站式Hadoop大数据平台。TDH包含四个产品:Transwarp Inceptor在大数据的批处理和交互式分析等方面全面领先其他Hadoop和MPP产品,是构建基于大数据的企业数据仓库和数据集市的最佳选择;Transwarp Hyperbase提供高并发查询和搜索引擎功能,并通过SQL和API对外提供服务,满足企业对结构化以及非结构化数据的处理需求;Transwarp Stream提供基于SQL的流式计算,支持HA和应用隔离,可以用于构建实时数仓和各种低延时的实时业务;Transwarp Discover提供分布式的数据挖掘算法和工具,可以帮助用户快速的从海量数据中发现数据的价值。此外,TDH还包含各种开发辅助工具,如数据整合工具Sqoop,实时数据同步工具TDA,日志采集工具Flume,消息队列Kafka,工作流Oozie,交互式分析工具HUE等,帮助用户可以方便快捷的开发各种企业应用。
TDH平台在多个技术领域达到世界级领先水平,包括:
1.支持最全SQL,唯一支持Oracle PL/SQL和DB2 SQL PL的数据平台软件
2.唯一支持完善的分布式事务处理的大数据平台
3.业界领先的分布式流式SQL,降低流应用开发门槛,提高流应用开发效率
4.超强的数据分析性能,率先在百TB级别的大数据上实现复杂的数据分析业务
镜像使用方法
通过Azure镜像市场,在“星环一站式大数据平台”应用部署向导页面,填写用户邮箱,集群规模等信息,您可以一键式创建星环一站式大数据集群。
如果集群创建成功,您填写的邮箱将接收到通知邮件。如果您的用户邮箱是首次在Azure镜像市场部署“星环一站式大数据平台”应用,星环云市场将以用户邮箱为账户名创建星环云账户,在用户邮箱收到的邮件中将包含创建的账户名和密码。如果用户邮箱是非首次使用,可以继续使用首次创建星环一站式大数据平台时我们为您创建的星环云账户。您可以在您的星环云账户下创建多个星环一站式大数据集群。
如果您集群部署失败,或您的用户邮箱未收到星环云市场的邮件,请先确认您的Azure帐户资源配额(特别是Azure帐户CPU配额)是否足够。如无配额问题您可以尝试重新部署,或者联系星环的在线技术支持:进入星环科技官方论坛http://support.transwarp.cn,点击右侧“在线支持”悬浮窗口。
在集群创建成功后,您可以使用我们为您创建的星环云账户,登录星环云市场(网址: http://market.starcloud.io),来管理您创建的星环一站式大数据集群。星环云市场的详细使用方法请参考星环云市场使用手册: http://support.transwarp.cn/t/transwarp-operating-system-tos/497
星环云市场中更详细的大数据应用介绍请参考本页面下方技术支持信息中提供的资料。
更多问题请参考下方常见问题解答或敬请前往星环官方论坛http://support.transwarp.cn,或直接垂询客服。
常见问题解答
请参考: http://support.transwarp.cn/t/azure/792
技术支持
为了更好的帮助用户基于星环大数据平台开发应用,星环科技提供各种渠道的技术支持,包括:
1. 技术支持论坛,用户可以获得在线的技术人员的支持: http://support.transwarp.io/
2. 文档与操作手册: http://support.transwarp.io/t/transwarp-data-hub-4-6-x/348
3. 技术博客: http://www.transwarp.io/news?id=4
4. 一些产品公开资料: http://support.transwarp.io/t/topic/413
5. 微信公众号
星环科技 | 星环科技大数据开放实验室 |
(产品试用到2017年2月28日,如需购买正式商用版,请联系ningwei.huang@transwarp.io, 4007-676-098)
其他信息
Template v1.0
最终用户协议网址:http://support.transwarp.cn/t/azure/423
地区: 中国北部
上传日期: 2016年12月02日 03:50:23