渡劫 发表于 2018-09-16 | 分类于 生活感悟 | 阅读次数: 字数统计: 681 题记 距上次博文更新已经好几个月了,一直没有更新。一方面,是自己在这半年时间里一直做技术沉淀(大部分属于技术总结类),所以没有同步更新到博客上。喜欢的可以移步文末个人公众号浏览。再者,开始考虑进行工作调整(7月面试,8月确定,9月入职)。目前已在新东家上班数日。适应了节奏,缓了缓,想了想,还是做一下“渡劫”后的感受。 阅读全文 »
拆骨之沙埠DNF 发表于 2018-05-14 | 分类于 户外运动 | 阅读次数: 字数统计: 636 今年越野跑的第一个DNF献给了拆骨。都说拆骨让你又爱又恨,爱:补给好;恨:关门卡的紧。 阅读全文 »
DataX初探 发表于 2018-04-14 | 分类于 大数据 | 阅读次数: 字数统计: 599 概述DataX 是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 阅读全文 »
JDBC大查询内存溢出解决方案 发表于 2018-01-28 | 分类于 数据库 | 阅读次数: 字数统计: 844 前言问题还是来源于实际项目。即席查询中,一次查询,返回大量数据会导致内存溢出问题。 问题原始方案直接通过jdbc链接数据库,通过遍历ResultSet获取结果。示例代码: 阅读全文 »
数据库连接池实现 发表于 2017-12-30 | 分类于 java | 阅读次数: 字数统计: 708 需求 数据库连接的池化管理 支持不同数据源链接池化处理 问题 如何维护链接对象 如何区分不同数据源池化 如何实现资源同步问题 阅读全文 »
香港100华东区热身派对小记 发表于 2017-12-18 | 分类于 户外运动 | 阅读次数: 字数统计: 668 序周六,参加了华东区举办的HK100赛前分享会。作为一只,初入越野圈的菜鸟来说,也是去观摩大神的。流程大体:先来个热身,20km,1200多米的爬升的热身跑。实际跑下来,接近25km。然后,洗澡午餐。下午进行赛事分享。港百介绍,路线图分析。往届参赛人员经验分享。最后,是抽奖环节。 阅读全文 »
和武功山的一次热恋 发表于 2017-12-12 | 分类于 户外运动 | 阅读次数: 字数统计: 1.9k 序去年千八结束(点击不虐不欢之“千八”了解更多)后,就一直想去武功山看漫山的草垫。三、四月份是漫山的绿色,现在虽然草木凋零。但是依旧很憧憬。况且,武功山越野赛也一直想去参加。便有了这次的为期两天的武功山之行。 脚步 另一个,七尖越野赛也是要体验一把。后面有机会去七尖走走。 阅读全文 »
正则表达式堆栈溢出问题 发表于 2017-12-03 | 分类于 java | 阅读次数: 字数统计: 532 背景工作中,即席查询,涉及到对sql语句进行切割。解析sql中的注释信息。使用正则表达式匹配分组,进行处理。 问题早上,数仓人员提供一个很长的sql(sql很长,此处省略)。 发现,执行后怎么也不出来结果。看了系统日志,也没发现报错信息,很奇怪。 阅读全文 »
非主键自增问题小记 发表于 2017-12-01 | 分类于 数据库 | 阅读次数: 字数统计: 496 问题现有一数据库表tableA,设计中有一个非主键的int型字段(下统称:dbId),需要实现递增需求。 阅读全文 »
一个与python有关的故事 发表于 2017-11-22 | 分类于 软件设计 | 阅读次数: 字数统计: 1.3k 背景近期系统需求上来迟缓,也腾出了一些时间来梳理沉淀。对系统的代码进行审视,sonar静态检测,消除检测问题。也是还债的过程。回顾过往的坑,有些东西还是要沉淀下来。接下来节听听故事的来龙去脉。 一个故事先说说之前印象比较深刻都一个需求,一个踩了很多坑的故事。 阅读全文 »