大数据技术发展的两大方向和最新进展

简介：

方向一： SQL on Hadoop是Killer App
对SQL支持程度的制约阻碍了企业应用 Hadoop技术

方向二： Hadoop加速Docker化
企业对多租户资源管控和弹性计算的需求促使Hadoop发生变革

统一的企业大数据平台 (Data Hub)

需求一： 资源弹性共享 – 提高资源利用率

• 灵活部署： Big Data + Application
• 资源调度： Auto-scaling + Self-healing
• 服务发现：Central Repository

需求二： 隔离性 – 保障服务质量和安全性

• 数据隔离： Data Sources， Access Pattern,Confidential Levels
• 计算隔离： CPU、 Memory、 I/O
• 应用隔离

动态扩容/收缩集群： Capacity Scheduler + Priority/Price-based Bidding (支持抢占)

自动修复集群： Replicator监测集群规模并保持该规模

Transwarp Operating System 将在2015Q2二季度末发布！

星环科技是目前国内极少数掌握企业级大数据Hadoop和Spark核心技术的高科技公司，从事大数据时代核心平台数据库软件的研发与服务。在全球去IOE的大背景下，Hadoop技术已成为公认的替代传统数据库的大数据产品。公司产品Transwarp Data Hub (TDH)的整体架构及功能特性比肩硅谷同行，产品性能在业界处于领先水平。

公司研发团队是国内最早的大数据Hadoop发行版团队，从2009年起即开始致力于大数据Hadoop平台软件的自主创新和开发，与硅谷同类公司同时起步；2011年在中国率先推出Hadoop发行版；之后，团队负责人原英特尔亚太研发中心CTO孙元浩、亚太区销售总监佘晖离开英特尔，创办星环科技，注册资金一千万。以上海为核心总部，并在北京、广州、南京、济南等地分设办事处。

公司研发团队大多来自知名外企，员工的85%为研发工程师，以博士硕士为主。这样的研发团队规模在国内专业大数据Hadoop开发的团队中并不多见。

TDH是基于Hadoop和Spark的分布式内存分析引擎和实时在线大规模计算分析平台，相比开源Hadoop版本有10x~100x倍性能提升，可处理GB到PB级别的数据。星环科技同时提供存储、分析和挖掘大数据的高效数据平台和服务。