联系方式
- 手机:17816864985
- Email: [email protected]
- 微信号:17816864985
个人信息
- 郭惠文 /男 /1997
- 本科 /中国计量大学理学院
- 技术博客: https://aayers-ghw.github.io
- Github: https://github.com/Aayers-ghw
- 期望职位:大数据实习
- 期望城市:杭州
技能清单
- Java 基础扎实,熟悉 JVM,包括内存模型、类加载机制以及性能优化
- 熟悉 Linux 开发环境,有一定的 shell 基础,熟悉命令行并会使用 git
- 熟悉 MySQL 数据库,Hadoop,Hive,HBase 的使用
- 熟悉 spark,熟悉使用 Java,Scala 开发 spark 应用
- 有 ACM 竞赛经历,熟悉数据结构和一些基本的算法,具有基本的编程能力
- 具有扎实的数学基础和数学建模的能力
项目经历
Hadoop 项目实战--流量分析系统
项目介绍
该项目为对各网站流量统计的分析项目,通过收集到的各网站流量的使用情况,根据网站访问的 流量进行排序,提取出前百分之八十的网站。从而使运行商掌握了大量的用户上网行为数据,那 么可以从中挖取商业价值。
我的职责
- 搭建项目集群环境
- MapReduce 程序的编写,如数据的排序、topK、自定义 OutPutFormat 的输出
- 将 HDFS 上的数据导入 MySQL
- 对原始日志进行分类信息增强,读入日志数据过滤脏数据,抽取 URL 字段,查询规则分类 表,添加到原始日志
中国计量大学 ACM 在线评测系统
项目介绍
中国计量大学第四代 ACMOJ,是为本校提供一个 ACM 比赛判题的
我的职责
1.利用 shell 脚本实现对线上 OJ 系统信息及运行状态的获取、服务器 nginx 和数据库 MySQL 的 应用状态分析和应用日志的分析
2.参与 MySQL 数据库表的设计
3.定期对其维护,包括数据的备份,服务器状态的检查
致谢
感谢您花时间阅读我的简历,期待能有机会和您共事。