By

最近从公司APP分享出去的一篇文章，访问量暴增，而访问计数直接访问的数据库，数据库产生行级锁，许多访问超时。

1
News.objects.filter(pk=self.object.id).update(view_num=F('view_num') + 1)

临时把访问计数去掉。之后找到Redis计数器。在访问文章时，使用incr自增。只是在访问文章列表时，如果对每篇文章都要读一次Redis会影响性能，于是只好做了延时处理，每个一段时间同步到数据库，并进行清零，等想到更好的解决办法再说。

清零时，最好不要使用set key 0这种用法，在多线程情况下会出问题，目前使用incrby key -view_num这种方式, 也就是减去目前Redis中浏览量的方式。

Redis确实是好东西，需要深入学习。

参考资料

联系作者

By

Django服务器的响应慢了, 想加上缓存。在网上查了之后，发现在queryset级别有3个选择。

  • django-cache-machine
  • johnny-cache
  • django-cachalot

最后选择了django-cachalot, 因为发现这个最靠谱。

安装后发现，目前的版本只支持Django1.8, 而1.2.1版本不支持缓存时间设置，也就是CACHALOT_TIMEOUT设置，而线上服务器的Django正好是1.7版本，于是只好放弃。

联系作者

By

需要给公司的域名添加HTTPS,决定先给自留地添加HTTPS支持，安装过程中遇到一些问题，记下来。

libbrotli安装

安装libbrotli时，出现Makefile.am:5: Libtool library used but LIBTOOL is undefined，执行yun install libtool安装即可。

/lib/lsb/init-functions: No such file or directory

执行yum provides ‘/lib/lsb/init-functions’ 可以找到哪个包支持。

1
redhat-lsb-core-4.0-7.el6.centos.i686 : LSB base libraries support for CentOS

之后执行yum install redhat-lsb-core-4.0-7.el6.centos.i686即可

安装免费证书

本来想 Let’s Encrypt, 但DNS解析出问题，想切换到外国的DNS，但考虑到公司的域名解析不能切换，所以继续找免费证书。最好找到沃通

参考资料

联系作者

By

在看Django源码时，知道了Counter，

1
2
3
4
5
6
7
8
9
# Check for duplicate app names.
counts = Counter(
    app_config.name for app_config in self.app_configs.values())
duplicates = [
    name for name, count in counts.most_common() if count > 1]
if duplicates:
    raise ImproperlyConfigured(
        "Application names aren't unique, "
        "duplicates: %s" % ", ".join(duplicates))

感觉很不错，比用dict统计方便多了，以后需要计数时，就用Counter。看来collections库是个宝库，要好好看看。

联系作者

By

此前，MySQL的默认引擎是MyISAM, 所以导致数据库里很多表都是MyISAM, 而MyISAM是表级锁，很容易引起性能问题。最近服务又被锁住了，原因依然是MyISAM的表级锁。于是将MyISAM引擎改为InnoDB。

之前运维同事写过一个脚本，直接拿来用就好。
github地址

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
#!/bin/bash

# 将 db_name 下引擎为 MyISAM 的表改为 InnoDB

# 以下变量按需修改
host_name=''
user_name='root'  #  root 或该用户有 root 同等级权限
password=''
db_name=''

tables=$(mysql -h${host_name} -u${user_name} -p${password} -e "SELECT TABLE_NAME FROM information_schema.TABLES WHERE TABLE_SCHEMA='${db_name}' AND ENGINE='MyISAM';")

for table in ${tables}
do
    if [ ${table} != 'TABLE_NAME' ]; then  # 排除标题
        echo ${table}
        mysql -h${host_name} -u${user_name} -p${password} -e "ALTER TABLE ${db_name}.${table} ENGINE='InnoDB';"
    fi
done

联系作者

By

之前测试服务器上的Thrift服务每天都报
OperationalError: (2006, ‘MySQL server has gone away’)错误，但正式服务器就不会，在网上找了很久还是没找到解决的办法。

最后在(2006, ‘MySQL server has gone away’) in django1.6 when wait_timeout passed找到如下回答:

If you hit this problem and don’t want to understand what’s going on, don’t reopen this ticket, just do this:

  • RECOMMENDED SOLUTION: close the connection with from django.db import connection; connection.close() when you know that your program is going to be idle for a long time.
  • CRAPPY SOLUTION: increase wait_timeout so it’s longer than the maximum idle time of your program.

In this context, idle time is the time between two successive database queries.

这里说对于这个问题，有两种做法，一种是关闭连接， 另一种是设置wait_timeout大于空闲时间。从这里明白原因，因为测试服务器没人访问，所以会断开连接，而正式服务器一直有人访问，所以不会。

关闭连接的话不想采用，不能每次使用都关闭连接。第二种也不采用。于是只好设置一个crontab任务，定时去访问Thrift服务。

联系作者

By

国内访问Docker官网镜像很慢，需要修改镜像地址。阿里云的速度不错，注册之后就可以拿到专属加速器地址。

在阿里云后台有说明，根据不同系统，版本号，有相应的设置

我的Ubuntu上

1
2
echo "DOCKER_OPTS=\"--registry-mirror=https://xxxxxx.mirror.aliyuncs.com\"" | sudo tee -a /etc/default/docker
sudo service docker restart

其中xxxxxx需要替换成专属加速器。

在我的Mac上，根据Docker for Mac, 参考Preferences 设置, 在Preference->Advanced->registry mirrors里添加专属加速器地址

参考资料:

联系作者

By

之前有几个站点是用Wordpress搭建的，准备迁移服务器后，需要安装Wordpress, 这次想用Docker来迁移。于是就在Docker中安装Wordpress. 看到Compose的文档里有一篇Quickstart: Docker Compose and WordPress, 于是使用Compose安装。

按照文档安装，报如下错误。

1
2
wordpress_mysql | 2016-09-22T09:34:33.723755Z 0 [ERROR] InnoDB: mmap(137428992 bytes) failed; errno 12
wordpress_mysql | 2016-09-22T09:34:33.723792Z 0 [ERROR] InnoDB: Cannot allocate memory for the buffer pool

发现是内存不够，因为已经安装了一个MySQL, 并且服务器内存只有512M, 于是内存吃紧, 只好放弃这种安装方法，直接连接现有的MySQL容器。

docker pull wordpress拉取最新版本的Wordpress后，执行命令后台启动Wordpress

1
docker run －d --name wordpress --link mysql:db -p 8000:80 -e WORDPRESS_DB_USER=root -e WORDPRESS_DB_NAME=wordpress -e WORDPRESS_DB_PASSWORD=password wordpress:latest

又发现CPU吃紧, 查看进程后发现loop0进程很占CPU，原来用的是Apache服务器，这就显得浪费了，我已经安装的Nginx了，而Wordpress镜像里还安装Apache。

得想想其它办法才好。当然如果内存足够，这样安装也没什么问题。

联系作者

By

phpmyadmin用来查看MySQL非常方便，决定给测试服务器上安装一个，这样开发人员就可以通过浏览器访问数据库，很方便。

查看官方的说明文档，一直没弄懂要如何连接本地安装的MySQL, 好在测试环境的数据库是通过docker容器安装的，方便连接。

执行docker pull phpmyadmin/phpmyadmin拉取官方的镜像后，假设已经存在一个在运行的MySQL容器，名字叫mysql, 执行

1
docker run --name myadmin -d --link mysql:db -p 8000:80 -e PMA_USER=root -e PMA_PASSWORD=mysql123456 phpmyadmin/phpmyadmin

其中–link是连接已经运行的mysql容器, db只是别名. 而PMA_USER和PMA_PASSWORD是连接mysql的用户名和密码, 这样开发人员在使用phpmyadmin时，就可以不用输入用户名和密码了，之后访问服务器的8000端口就可以访问MySQL数据库了，很方便。

参考资料:

联系作者