不以结婚为目的的谈恋爱都是耍流氓！ - MYSQL 一个程序猿孙小一,孙小二,PHP,MYSQL,LINUX,APACHE,原创技术,扯淡

撞在墙上的一个思路

作者 : admin 于 2010年01月16日, 00:59:49

2010
01-16

今天一天没干别的，没写程序，没玩游戏，除了中午参加公司的一个吹气球比赛得了第一，获得“**公司第一吹”的称号。

一天都在考虑使用完全开源的方案来解决dz sessions表的性能问题。中午大脑极度紧张，以至于撞在关兄的工位，工位几近散架。

在轻度震荡中想到一个优化方案，就是分离sessions表的一些功能，把sessions会话和统计功能分离，并且统计使用异步提交。

这样，如果sessions会话生存期10分钟的量计算，20万人同时在线，sessions会话存memcached，而统计只用少量字段在独立的表中。因为php的sessions操作速度高，而统计信息调用并不是非常频繁，并且查找也是简单的int型查询，速度快，并且也进行memcached缓存。

下午吴同学详细讲述了我们的统计系统的负载和数据量，在大量实际应用的基础上，我的方案应该能很好的实施。

这样算来，连接瓶颈跟存储瓶颈似乎都能解决。明天集中时间实现这个方案。

MYSQL , PHP
评论(1)

关于discuz的优化纠结

作者 : admin 于 2010年01月15日, 15:23:42

2010
01-15

最近一直在寻找一个开源的方案来解决discuz的性能瓶颈。在做完几个关键表的分表后，sessions表又成了最大的瓶颈。因为页面每次刷新，至少两个sql语句在session表上，究其原因，session表的最大作用在于对用户行为的统计。

曾经尝试过使用php的session，不过支持phpsession的几个sever都不支持条件查询，除非是遍历匹配。这样也不能起到提高性能的作用。

在以上条件下，我寻找了两套方案：ttserver mongodb。

在session表100w数据的测试下，得出以下数据：

连接测试-只测试连接释放
tt:40.0904033184
mysqldb:0.0669066905975

mongodb:226.840053558
mysqldb:0.154407262802

经过一万次的连接测试，同一个脚本中，
ttserver连接耗时 40.09 秒，而mysql连接耗时0.07秒 linux下测试
mongodb 连接耗时 226.8 秒，而mysql连接耗时0.15秒 linux下测试

但是在500次的查询测试中，同一个脚本中，主键查询和索引优化后的复杂查询
mongodb 查询耗时 0.021 秒
mysql 查询耗时 0.123 秒

可以看出，tt和mongo两个功能上完全支持此表优化的数据库，在连接性能上远不如mysql，而web为频繁连接中断的服务，显然并不适合做这项功能。

继续寻找支持此功能的开源方案，欢迎大家提供线索。

MYSQL , PHP
评论(2)

完全缓存discuz论坛数据

作者 : admin 于 2009年12月06日, 22:15:07

2009
12-6

最近一直在琢磨discuz的优化，想出一些数据缓存的策略：

index.php 部分数据已经进行了缓存，但需要全部缓存，只有当页面刷新数/更新时间 >>>> 发帖数/更新时间，则有必要做此缓存，此处缓存更新最为频繁，适合做内存缓存，但更新时间不宜太久，此时间根据首页更新频度确定。

forumdisplay.php 更新频繁，优化策略同上，只是更新频度略低于首页。

viewthread.php 回复更新频繁，内容更新频度低，适合做硬盘缓存。但分页部分不可做缓存，否则……

space.php 更新不频繁，适合做硬盘缓存。

faq.php 做个静态即可。

MYSQL , PHP
评论(0)

phpmyadmin语句定界符的问题

作者 : admin 于 2009年11月11日, 17:59:50

2009
11-11

用phpmyadmin写触发器的朋友，不知道有没有碰见这个问题：用pma导出的语句，死活倒不进去，mysqldump导出的，也不能用pma倒入。

反正问题多多，很令人头疼。

今天再次碰到这个问题后，偶然发现个问题，就是sql输入框下的一个小的内容：语句定界符。

平时导出sql，语句定界符默认是分号，而编辑触发器的时候，是两个斜杠//。

蹊跷就在这里，导入的时候使用的定界符必须跟倒出时候的定界符保持一致，否则就会出现错误。

问题发现后，老王是相当的高兴啊。

discuz论坛优化

作者 : admin 于 2009年11月05日, 18:19:59

2009
11-5

discuz论坛在国内非常流行，用户众多。优秀的用户体验和超强的负载，也赢得了众多的好评。

但discuz毕竟是为中小型网站设计，很容易达到性能的瓶颈。在最近对discuz的改造和表结构的分析，做了以下的探讨，来提升论坛的性能。

第一步，当然就是分表。
技术实力不太强的用户（严重依赖mysql的用户），分表是最直接的做法（当然，有些功能会损失）。

分析一个运营两年的discuz数据库，库表大概是十几个G左右，posts数据表已经几个千万。

首先可以拆分的，就是post表了。根据情况，post表可以分10张，百张，规则可以哈希，也可以阶段自增（分表主键使用tid（帖子id））。分完表，可以看到一排post_**的表，每个表的数据量降到百万以下，速度就无太大影响。

第二个可以拆分的，是threads表，此表分表，可以水平分割方式水平的分割，可以根据论坛版块id进行分表，这样可以使每个表的数据量减小，但这样也损失了一个功能：全站标题检索。

通过以上两个表的改造论坛的承载能力能迅速见长。

底下会讨论高级优化改造得方法，且听下次分解。

MYSQL , PHP , 原创技术
评论(2)

mysql触发器管理

作者 : admin 于 2009年10月14日, 20:45:43

2009
10-14

mysql没有一个像mssql的客户端去管理，所以有了PHPMYADMIN，管理mysql不再单纯依靠命令行，但PHPMYADMIN似乎不是那么万能，偶尔也会耍耍版本细节的脾气。

最近使用mysql触发器，不想使用命令行编辑，但phpmyadmin调试缺比较麻烦，原来想的是先建立一个空的触发器，然后修改，后来发现修改迁移问题多的要死，在老王同学的帮助下，经过几个晚上努力，整理出一些规律。

调试的时候，可以在空的触发器上逐条增加语句，一点一点调试，这样很容易定位问题，迅速修改。

迁移的时候，不能直接编辑触发器拷贝里边的代码，我用的phpmyadmin是2.11.9*版本的，生成的代码虽然他自己认，但一迁移就出了问题，我还没去阅读PHPMYADMIN的代码，不知道代码如何产生，但begin end里的内容大致相同，不同的是两头的辅助语句。

两头的内容跟版本密切相关，用mysqldump导出的语句做模板，把过程添加到里边，基本就没什么问题了。

不同版本的语法稍有出入，没有详细总结，总之掌握了调试的方法，解决问题速度就会提升。

使用触发器后，原来十几次的交互，一次就可以解决。我尝试了下出发器和存储过程，发现开发成本都差不多，复杂度也是类似的，所以没有用存储过程。

mysql5.1触发器小试

作者 : admin 于 2009年08月25日, 22:51:18

2009
08-25

我一直以为mysql5.0的触发器好似没那么强大，被一个搞mssql的老大给忽悠了，其实mysql触发器从5.0就变得很强大，当然包括5.1。

这里拿一个demo说事：

DROP TRIGGER IF EXISTS `ucenterhome`.`uchome_doing_test`;
DELIMITER //
CREATE TRIGGER `ucenterhome`.`uchome_doing_test` AFTER INSERT ON `ucenterhome`.`uchome_doing`
FOR EACH ROW BEGIN
INSERT INTO uchome_doing_1 SET doid= NEW.doid+3, uid= NEW.uid , username= NEW.username,`from`=NEW.`from`,dateline=NEW.dateline,message=NEW.message,ip=NEW.ip,replynum = NEW.replynum,mood=NEW.mood;
END
//
DELIMITER ;

每向uchome_doing表中插一条数据，就复制到uchome_dong_1表中一条。

有两个关键字：

OLD NEW

官方的解释：

The OLD and NEW keywords enable you to access columns in the rows affected by a trigger. (OLD and NEW are not case sensitive.) In an INSERT trigger, only NEW.col_name can be used; there is no old row. In a DELETE trigger, only OLD.col_name can be used; there is no new row. In an UPDATE trigger, you can use OLD.col_name to refer to the columns of a row before it is updated and NEW.col_name to refer to the columns of the row after it is updated.

还有两个关键字

BEFORE AFTER

官方解释

The keyword BEFORE indicates the trigger action time. In this case, the trigger should activate before each row inserted into the table. The other allowable keyword here is AFTER.

mysql数据抽象层-PDO

作者 : admin 于 2009年08月20日, 16:02:02

2009
08-20

好久不用PDO了，公司这边有的项目使用PDO，再熟悉一下，继续沿用之前的方法：

没用数据绑定和一些高级的功能，只是实现基础功能。

< ?php
interface DateBaseConnect
{
#数据库连接
public function Connect( $host , $user , $pass , $datebase );
#使用数据库
public function selectDateBase( $datebase );
#执行一个查询
public function query( $sql );
#取得一行
public function fetch( $sql );
#取得所有
public function fetchAll( $sql );
#取得影响行数
public function affectedRow();
#取得结果行数
public function recordCount();
#取得上次插入ID
public function insertID();
#释放资源
public function close();
}
class sPDO implements DateBaseConnect
{
#连接标识
public $handle = false;
#结果标识
public $query;
#查询次数
public $exetime;
#影响行数
public $affectedRows;
#statement
public $statement;
#数据库连接
public function Connect( $host , $user , $pass , $datebase )
{
try
{
$this->handle = new PDO("mysql:dbname=".$datebase.";host=".$host, $user, $pass);
}
catch (PDOException $e)
{
echo 'Connection failed: ' . $e->getMessage();
}
$this->exetime = 0;
}
#选择数据库
public function selectDateBase( $database )
{
return true;
}
#执行一个查询
public function query( $sql )
{
$this->affectedRows = $this->handle->exec( $sql );
$this->exetime++;
return true;
}
#取得一行
public function fetch( $sql )
{
$this->statement = $this->handle->query( $sql );
return $this->statement->fetch(PDO::FETCH_ASSOC);
}
#取得所有
public function fetchAll( $sql )
{
$this->statement = $this->handle->query( $sql );
return $this->statement->fetchAll(PDO::FETCH_ASSOC);
}
#取得影响行数
public function affectedRow()
{
return $this->affectedRows;
}
#取得结果行数
public function recordCount()
{
return $this->statement->rowCount();
}
#取得上次插入ID
public function insertID()
{
$sql = sprintf("SELECT LAST_INSERT_ID() AS id");
$pdostatement = $this->handle->query( $sql );
$rs = $pdostatement->fetch();
return $rs['id'];
}
#释放资源
public function close()
{
unset($this->handle);
}
#析构函数
function __destruct()
{
$this->close();
}
}
#Demo
$db = new sPDO;
$db->Connect( 'localhost' , 'root' , '123456' , 'ucenterhome' );
$rs = $db->fetchAll( "SELECT * FROM uchome_blogfield" );
print_r( $rs );
?>

MYSQL , PHP
评论(0)

一个备份mysql的脚本，很简单

作者 : admin 于 2009年07月29日, 21:43:46

2009
07-29

帮朋友维护服务器的时候，习惯性得检查各项服务和维护，偶然间发现了这个脚本，冒着被BS的风险分享给大家，希望大家捧个钱场，施舍给老衲几万块钱买套房。

@echo off
C:
CD "C:\Program Files\WinRAR"
net stop Mysql
winrar.exe a -ag"-[YYYY-MM-DD-HH-MM-SS]" -k -r -s -ibck -inul "D:\MYSQL备份生成的文件.rar" "E:\bak\data\*.*"
net start Mysql

Linux下APACHE MYSQL PHP FCgid Suexec 配置文档V1.0

作者 : admin 于 2009年05月22日, 11:14:12

2009
05-22

文档版本：V1.0

启动撰写时间: 2009年05月20日

目的：全面详细介绍LAMP fastcgi方式配置细节,基于之前的自动配置脚本，目的是把更多的细节转达给大家。

需要软件源码：

CentOS4.7

http://centos.ustc.edu.cn/centos/4.7/isos/i386/CentOS-4.7.ServerCD-i386.iso

http://centos.ustc.edu.cn/centos/4.7/isos/x86_64/CentOS-4.7.ServerCD-x86_64.iso

Apache-2.2.9

http://archive.apache.org/dist/httpd/httpd-2.2.9.tar.gz

MYSQL-5.2.6

http://downloads.mysql.com/archives/mysql-5.0/mysql-5.0.22.tar.gz

PHP-5.2.6

http://museum.php.net/php5/php-5.2.6.tar.gz

FCGID

http://ncu.dl.sourceforge.net/sourceforge/mod-fcgid/mod_fcgid.2.2.tgz

安装：

第一步：Linux系统安装,同时可以参照我原来的文档

http://www.sunboyu.cn/2008/06/13/centos5%E5%AE%89%E8%A3%85%E6%8C%87%E5%8D%97%EF%BC%88%E7%AE%80%E5%8D%95%E7%AF%87%EF%BC%89.shtml

阅读全部 »

APACHE , LINUX , MYSQL , PHP
评论(0)

一个程序猿

时光不会倒流,脚步总要前进