公众号:杨建荣的学习笔记 · 作者:r2笔记74天 · 发布:2014-08-24 22:24:53 · 原文链接 最近看一些网站的时候,发现有些数据很有意思,想把数据截取出来,但是想把数据抽取出来很是困难。因为如下的小方框的数...
运维与自动化
通过shell脚本分析足彩(r2笔记74天)
公众号:杨建荣的学习笔记 · 作者:r2笔记74天 · 发布:2014-08-23 22:01:24 · 原文链接 最近对足彩的数据进行了一点分析,简单分享一下自己的一点收获,对于足球比赛的赔率还是很有计算方法的。我收集了一些比...
通过shell和sql结合查找性能sql(r2笔记68天)
公众号:杨建荣的学习笔记 · 作者:r2笔记68天 · 发布:2014-08-18 20:18:00 · 原文链接 在生产系统中,会发现一些潜在的sql问题,为了能够及时和准确的定位,我们可以借助sql_monitor来做性能sql的查找。可以在...
海量数据迁移之分区表批量insert性能改进(r2笔记67天)
公众号:杨建荣的学习笔记 · 作者:r2笔记67天 · 发布:2014-08-17 19:31:01 · 原文链接 在平时的工作中接触到的分区表一般都比较大,而且分区也少则几十,多则几百,上千。在数据迁移的时候,分区表的迁移更是...
通过shell脚本生成查询表数据的sql (r2笔记63天)
公众号:杨建荣的学习笔记 · 作者:r2笔记63天 · 发布:2014-08-14 00:06:44 · 原文链接 在工作中我们需要查询表的数据条数,一般来说就是使用select count(1)或者select count(*)之类的语句。当然了对于不同的...
使用shell生成状态报表(r2笔记61天)
公众号:杨建荣的学习笔记 · 作者:r2笔记61天 · 发布:2014-08-11 19:23:03 · 原文链接 在数据迁移的时候,目前启用了10个并行的进程。每个进程负责一部分的数据导入工作。然而在统计数据导入进度的时候,总是...
用shell脚本巧妙统计文件(r2笔记57天)
公众号:杨建荣的学习笔记 · 作者:r2笔记57天 · 发布:2014-08-07 23:26:56 · 原文链接 在数据迁移的过程中,会产生大量的dump文件,需要对dump的文件情况进行一个简单清晰的管理,比如目录下的文件特别多,而...
一些“简单”的linux命令(r2笔记46天)
公众号:杨建荣的学习笔记 · 作者:r2笔记46天 · 发布:2014-07-27 22:13:06 · 原文链接 有些linux命令看起来极其简单,只包含2个字符,但确有很强的功能性。看起来还是有些陌生的命令,不过在工作中别忘记它们...
使用sed做特殊的行列转换(r2笔记40天)
公众号:杨建荣的学习笔记 · 作者:r2笔记40天 · 发布:2014-07-21 21:55:28 · 原文链接 行列转换在数据库,开发语言中都是一个津津乐道的话题,今天来简单演示一个使用sed所作的特殊行列转换。日志的内容如下:...
linux过滤空文件的命令总结(r2笔记40天)
公众号:杨建荣的学习笔记 · 作者:r2笔记40天 · 发布:2014-07-21 21:55:28 · 原文链接 在linux中有经常做文件的操作,今天有个同事在生产环境统计数据,发现有很多日志文件都是空的,文件太多了,他想查看一下...
