超凡魔力

君子善思,善假于物,而不物于物。

0%

awk的可以通过正则或者其他的函数,来实现过滤功能。正则的功能非常的强大,不过话说,正则一般性能都不是特别的高。在一定的场合下,正则也需是非常适合的工具。

阅读全文 »

gp的一些操作sql进行记录,统计哪些sql的性能比较消耗性能。记录一下常见的操作方式。比如如何去重,去重在哪方面比较消耗性能。本来不是更多的的查询条件,会有更多的时间消耗。反而,因为条件,最终的时间会少一些。

利用联表,减少去重的数据量。

sql的各种子查询都能用联表来解决。sql其实也是典型的map、reduce这种。map,如对各种字段的各种运算,而reduce其实就是对数据进行分组、聚合。

阅读全文 »

批量将redis内容导出到csv格式。先根据key,scan一次,然后拿到key之后,取出每个的hash内容,再存入到csv文件中。

阅读全文 »

本文记录的方法,可能并不高明。思路有很多中,可以自己写php脚本,先将mysql的数据吐出csv格式,或者直接php脚本连两个都行。另外,听人说好像有个工具,可以同时连mysql跟gp,这样可以直接dump过来。没有研究过,先暂时用自己的笨办法,反正数据量也并不是太多。

阅读全文 »

网上找到的一遍非常好的跨域相关的知识描述,加上之前也做了一次nginx的代理docker,故将相关的记录一下。

阅读全文 »

sql语句中的exists查询的用法,以及与in子查询的性能比较。

阅读全文 »

ssh客户端,可以有很多种方式。即使在windows下也可以不用安装软件,直接使用。

阅读全文 »