公众号:杨建荣的学习笔记 · 作者:r2笔记64天 · 发布:2014-08-15 23:43:10 · 原文链接 昨晚在做测试环境数据迁移的时候,遇到了io的问题,本来预计2,3个小时完成的数据导入工作最后竟然耗了7个多小时。在数据...
公众号存档
关于oracle后台启用的schedule job(r2笔记65天)
公众号:杨建荣的学习笔记 · 作者:r2笔记65天 · 发布:2014-08-15 23:43:10 · 原文链接 在昨天晚上10点开始,数据库的性能开始下降,出现了一些j00开头的进程。而且持续了比较长的时间,简单分析了一下,对应的...
通过shell脚本生成查询表数据的sql (r2笔记63天)
公众号:杨建荣的学习笔记 · 作者:r2笔记63天 · 发布:2014-08-14 00:06:44 · 原文链接 在工作中我们需要查询表的数据条数,一般来说就是使用select count(1)或者select count(*)之类的语句。当然了对于不同的...
海量数据迁移之通过rowid切分大表(r2笔记62天)
公众号:杨建荣的学习笔记 · 作者:r2笔记62天 · 发布:2014-08-12 23:48:28 · 原文链接 在之前的章节中,讨论过了通过 分区+并行等方式来进行超大的表的切分,通过这种方式能够极大的提高数据的平均分布,但是...
使用shell生成状态报表(r2笔记61天)
公众号:杨建荣的学习笔记 · 作者:r2笔记61天 · 发布:2014-08-11 19:23:03 · 原文链接 在数据迁移的时候,目前启用了10个并行的进程。每个进程负责一部分的数据导入工作。然而在统计数据导入进度的时候,总是...
海量数据迁移之分区并行切分(r2笔记60天)
公众号:杨建荣的学习笔记 · 作者:r2笔记60天 · 发布:2014-08-10 23:01:23 · 原文链接 在海量的数据迁移中,如果某个表特别大,可以考虑对表中的分区进行切分,比如某个表有100g,还有100个分区,那么可以考虑...
数据迁移工具简单分析 (r2笔记59天)
公众号:杨建荣的学习笔记 · 作者:r2笔记59天 · 发布:2014-08-09 23:42:07 · 原文链接 exp/imp 对于数据结构的复制和同步,还是比较理想的工具。 在数据量比较小的情况下,这个工具的性能要远远好于datapump,...
用shell脚本巧妙统计文件(r2笔记57天)
公众号:杨建荣的学习笔记 · 作者:r2笔记57天 · 发布:2014-08-07 23:26:56 · 原文链接 在数据迁移的过程中,会产生大量的dump文件,需要对dump的文件情况进行一个简单清晰的管理,比如目录下的文件特别多,而...
VXFS启用异步IO导致的严重问题(r2笔记56天)
公众号:杨建荣的学习笔记 · 作者:r2笔记56天 · 发布:2014-08-06 18:32:45 · 原文链接 今天在做数据迁移的时候,碰到了一个严重的问题,数据加载完全hang住了,最后无奈回退了。 系统使用的vxfs文件系统,在生...
通过sql语句分析足彩(r2笔记55天)
公众号:杨建荣的学习笔记 · 作者:r2笔记55天 · 发布:2014-08-05 18:49:54 · 原文链接 老是做工作中的数据分析,最近也在看足球彩票,竞猜游戏有输有赢,但是里面还是有不少的数据分析的乐趣,关于足球彩票的...
