当前位置: 首页 > 互联网, 历程 > 正文

初识高大上

半天的会议和半天的培训,让这一天收获变得丰盛起来。没急着回家,想在这下了班的夜晚再细细回味下今天的收获。对我这个刚刚进入Java开放领域,之前在微软系小公司下做简单开发的我来说。犹如从一扇门进如了另一扇门。这恰如家乡的根博园,从免费的前景区到购票进入恢宏的后景区,令人赞叹不已一样。同样的,需要了解与学习的东西更多了,而对我这个初出茅庐的我来讲,先从概念上去理解与学习这些知识是最好不过了,再加上有同事的细心介绍与指导,自然就更棒了。

首先从高兼容性来讲,这是从我们目前研发的大数据应用基础平台来讲的。即如何将大数据的各个应用系统在基础平台上进行管理起来。从应用的功能配置,部门的管理,用户的管理,角色及权限的管控出发,建立的一个应用基础平台,对相关的应用进行管控。而不需要各单独的应用分别维护这些相同的信息。在我们的项目实践中,一个顶组织,大到政府部门,小到一个基础单位。在这些不同组织中,人员用户信息在各个系统中基本是共通的。再诸如各个应用系统的权限设置也可以聚合起来在统一的平台上进行管理与维护。这也包含用户验证,数据权限等各种相对比较个性的实现了。不过很多场景需要结合到各个具体应用去具体实施了。

其次受到思想冲击的是真正的大数据平台,和我们的同事为这个大数据平台所做的各种工作。简单理解了云的概念。理解使用云与应用云的不同。理解政府各部门之间的数据交换,各部门数据的云存储和备份等。理解云平台的简单架构和几种简单的应用展现。虽然只是从文字上学习和想象了很多云架构和云应用,但第一次从我们的身边切身的了解这些东西还是有很大的不同,收获也是真切的。

我又学习了MPP数据库的相关知识。我们越来越多的同数据打交道,未来的数据也正在以TB甚至PB级别的速度在增长,如何在海量的数据中分析和查询我们需要的数据,就会使用各种不同的数据存取技术。而针对关系形结构数据MPP数据库产品也被大量的使用着。培训人员着重讲解了MPP技术,及诸如TeraData,GBase,GreenPlum,PostgreSql-XL等几种常见的MPP数据库产品,介绍了各自的特点及使用性能比较,优缺点等。极大的开拓了我们的视野,为这些产品在今后可能存在的应用有了一个提前的认识。为自己能更好,更快的理解数据仓库,数据挖掘等增加更多的知识入口,丰富了自己的数据库知识。

另外的两个培训主要关于常见的安全漏洞与处理办法和项目生命周期的概念理解。前者对我们开发人员是有很现实的指导意义,很多情况是我们项目能否通过验收的关键之一,也是我们开发人员尽力会去避免和解决的几个细节之一。这方面的知识其实可以展开成一篇文章细致去讲。而项目生命周期主要是关于项目周期的概念性理解,和项目各过程的理解,及各个过程的在项目周期中的位置,可变性等状况的描述。对需要往项目经理方面发展的人来讲,这部分知识是不可或缺的。

不得不说曾经的我们在GB级别数据上默默无闻的闭门玩耍着,现如今我们敞开大门拥抱TB甚至PB级别的数据。这种的变化对我而言是巨大和深刻的。因而,我需要加倍的努力学习,为自己打开真正的大数据之门。

本文固定链接: http://www.byhard.com/?p=1631 | 海纳百川

该日志由 byhard 于2016年10月21日发表在 互联网, 历程 分类下,
原创文章转载请注明: 初识高大上 | 海纳百川
关键字:
【上一篇】
【下一篇】

初识高大上:目前有3 条留言

  1. 地板
    天下彩:

    赞一个,写的不错

    2016-10-24 18:58
  2. 板凳
    网赚论坛:

    访问您的博客已成习惯!

    2016-10-25 14:49
  3. 沙发
    淘宝摄影:

    人才。。

    2016-10-28 17:38