Vikram Goyal.,银河游戏官方首页工程师和开发人员在Vaughan,在加拿大
Vikram Goyal.

银河游戏官方首页工程师和开发人员在Vaughan,在加拿大

成员自7月21日以来2020年7月21日
Vikram专业从事大银河游戏官方首页和商业智能技术,解决八年的业务问题。他是实现银河游戏官方首页湖泊,企业银河游戏官方首页集市和应用银河游戏官方首页屏蔽等解决方案的专家。作为一个拥有超过15年的经验的完成和资源丰富的软件专业人士,Vikram认为它'在选择技术或方法之前,对解决问题的各个方面至关重要,对问题的所有方面来说至关重要。
Vikram现在 可用的 for hire

文件夹

  • 甲状腺原味
    慢慢改变尺寸(SCD),Excel VBA,Shell Scripting ...
  • Infosys有限公司
    SQL. Server Integration Services(SSIS),Python,Windows PowerShell,T-SQL ...

地点

沃恩,在加拿大

可用性

兼职

优选的环境

apache sqoop.,Excel VBA,Python,Oozie,Apache Hive,Visual Studio,SQL Server 2014

最神奇的......

......我开发的事情是一个银河游戏官方首页策择框架,使用Pyspark并蜂巢自动加载SCD1和SCD2银河游戏官方首页,并使用最小的设置。

就业

  • 银河游戏官方首页工程师

    2019年 - 至今
    甲状腺原味
    • 实现了Pyspark框架,以将银河游戏官方首页从文件(分隔,固定宽度和Excel)从Apache Hive表中摄取。结果,简化了摄入过程并导致节省超过50%。
    • 促进在复杂银河游戏官方首页转换和使用HQL,Oozie和shell脚本中创建的银河游戏官方首页策展脚本之后计算各种维度的管理资产计算。
    • 使用VBA宏创建代码模板,以创建用于银河游戏官方首页摄取和银河游戏官方首页策择成SCD1和SCD2表的元银河游戏官方首页文件。这有助于将代码错误和开发时间缩小约30%。
    技术:慢慢改变尺寸(SCD),Excel VBA,Shell脚本,Hibernate查询语言(HQL),Pyspark,Oozie,Spark SQL,Apache Hive
  • 技术建筑师

    2005年 - 2020年
    Infosys有限公司
    • 创建了一种用于加载各种银河游戏官方首页的银河游戏官方首页摄取框架,例如多结构VSAM,XML,JSON,ZIP和固定宽度文件; Microsoft SQL Server;甲骨文;使用Apache Hive,Apache SQOPOP,SSIS和Python的HDFS上的银河游戏官方首页湖泊。
    • 带领一支四名专业人员使用Microsoft PDW的T-SQL创建两个复杂的银河游戏官方首页集市,实现SCD1,SCD2等负载策略,以及upsert。
    • 写入常见的银河游戏官方首页仓库负载策略,以帮助将开发时间减少近30%。
    • 在Pyspark中创建可重用组件,以实现银河游戏官方首页负载策略,如SCD1,SCD2和事实上升。这导致开发工作节省30%。
    • 实现了使用Apache Hive将复杂XML(结构和银河游戏官方首页量)的复杂XML(两者)的银河游戏官方首页进行摄取到银河游戏官方首页湖的解决方案。此解决方案导致客户节省300,000美元。
    • 创建了两个框架:一个使用Windows PowerShell将在Mart表中创建的视图发送到外部系统的视图以及使用Microsoft SQL Server在给定银河游戏官方首页库的所有表上自动创建和更新统计银河游戏官方首页的银河游戏官方首页提取。
    • 自动化银河游戏官方首页屏蔽的完整过程,通过使用shell脚本和oracle构建新框架,从源中获取银河游戏官方首页,直到保存屏蔽银河游戏官方首页。这有助于减少将屏蔽副本创建近50%的处理时间。
    • 使用Excel Macros创建银河游戏官方首页比较工具来比较源和屏蔽银河游戏官方首页副本,以确保屏蔽银河游戏官方首页的完整性和完整性,这有助于节省大约70%的验证工作。
    技术:SQL Server Integration Services(SSIS),Python,Windows PowerShell,T-SQL,银河游戏官方首页湖泊,Microsoft SQL Server,Excel VBA,Microsoft并行银河游戏官方首页仓库(PDW),SQL Server 2014,Pyspark,Apache Sqoop,Apache Hive,Big银河游戏官方首页

经验

  • 银河游戏官方首页策择框架(开发)

    一个框架,用于自动创建Pyspark中的组件以实现银河游戏官方首页加载策略,如SCD1,SCD2和事实上升。用户编写业务逻辑查询,框架是删除重复银河游戏官方首页,null键等的初始银河游戏官方首页验证。该框架然后运行业务查询,最后,通过实现银河游戏官方首页加载策略(例如)来运行Business查询。 SCD1,SCD2和事实自动上升。

  • Hadoop银河游戏官方首页摄取框架(开发)

    用于加载变化的银河游戏官方首页的银河游戏官方首页摄取框架,如多结构VSAM,XML,JSON,ZIP和固定宽度文件; Microsoft SQL Server;甲骨文;使用Apache Hive,Apache SQOPOP,SSIS和Python的HDFS上的银河游戏官方首页湖泊。用户填写Excel中要摄取的文件的详细信息,该框架创建所有代码,用于将文件摄取到HDFS并在该银河游戏官方首页上创建外部表,然后用户可以访问该银河游戏官方首页。

技能

  • 语言

    Excel VBA., T-SQL., SQL., Python
  • 工具

    微软Excel., oozie., Spark SQL., apache sqoop.
  • 范式

    Etl.
  • 贮存

    SQL. Server 2014., Apache Hive., 微软并行银河游戏官方首页仓库(PDW), 微软 SQL Server., 银河游戏官方首页湖泊, SQL. Server 2012., 银河游戏官方首页库, mysql., SQL. Server Integration Services(SSIS)
  • 其他

    慢慢改变尺寸(SCD), 银河游戏官方首页工程学, 银河游戏官方首页仓库, Excel Macros., 银河游戏官方首页仓库设计, 大银河游戏官方首页, 壳牌脚本
  • 构架

    Windows PowerShell.
  • 图书馆/ API.

    Pyspark.

教育

  • 电子和电气通信工程学士学位
    2001年 - 2005年
    旁遮普工程学院 - 印度昌迪加尔

认证

  • 架构Microsoft Azure解决方案
    2018年6月 - 至今
    微软
  • 管理Microsoft SQL Server 2012/2014银河游戏官方首页库
    2015年2月 - 至今
    微软
  • 使用Microsoft SQL Server 2012/2014实现银河游戏官方首页仓库
    2014年12月 - 至今
    微软
  • 查询Microsoft SQL Server 2012/2014
    2014年9月 - 至今
    微软

查看更多个人资料

加入Toptal.
与他人分享