通过http tunnel连接mysql

栏目: IT技术 · 发布时间: 4年前

背景

(1) 公司为了降低工作效率, 连接 mysql 必须通过特定的代理才能连接
(2) 产线这个模式可以理解, 但是测试环境你也搞个这个,那我就要哭了
(3) 在公司用wifi可以连接,但是在家无法直接连接mysql,只能通过垃圾的网页版mysql进行数据库操作
![网络图.png](/img/bVbFf69)

解决方案

(1) nginx的stream实现tcp流量转发
(2) nginx的http proxy connect实现http tunnel
(3) Navicat Premium的http tunnel实现

方案一
- 在/etc/nginx/nginx.conf的第一行加上
```
load_module /usr/lib64/nginx/modules/ngx_stream_module.so;
```
  这里modules的路径可以通过 nginx -V 的 --modules-path 看到
```
stream {
    server {
        listen     443;
        proxy_pass stream_backend;
    }
}
```
- 到这这进行不下去了, 此方案行不通
  1、因为nginx的stream是基于tcp/ip的第4层,所以没有http中header的host参数,也就没有基于server_name的配置
  
  2、服务器主机也只会转发http和https流量到docker,stream在host的nginx没配置转发,所以tcp流量根本过不来

方案二

在/etc/nginx/nginx.conf的第一行加上

load_module /usr/lib64/nginx/modules/ngx_http_proxy_connect_module.so;

nginx -s reload

> ```nginx: [emerg] dlopen() "/usr/lib64/nginx/modules/ngx_http_proxy_connect_module.so" failed (/usr/lib64/nginx/modules/ngx_http_proxy_connect_module.so: cannot open shared object file: No such file or directory) in /etc/nginx/nginx.conf```

又要开始折腾了, 没有ngx_http_proxy_connect_module, google了一把, ngx_http_proxy_connect_module

相当于重新编译nginx, 有几个坑, 不过意外发现有个 go 的开源库,专门编译nginx,刚好我是go开发,go的库 nginx-build , 但是下面说的跟这个库没关系, 只是打个go的广告^_^

(1) 选定对应的nginx源码zip,更改nginx的version, nginx -v
(2) ./configure的编译参数, 需要提前nginx -V复制之前的启动参数下来
(3) 执行path的时候需要看`https://github.com/chobits/ngx_http_proxy_connect_module`的说明,哪个版本用哪个patch

$ git clone https://github.com/chobits/ngx_http_proxy_connect_module.git /root/ngx_http_proxy_connect_module
$ wget http://nginx.org/download/nginx-1.12.2.tar.gz
$ tar -xzvf nginx-1.12.2.tar.gz
$ cd nginx-1.12.2/
$ patch -p1 < /root/ngx_http_proxy_connect_module/patch/proxy_connect.patch
$ ./configure --add-module=/root/ngx_http_proxy_connect_module ·后面接上nginx -V里面的configure arguments·
$ make && make install
$ cp /root/ngx_http_proxy_connect_module

执行过程

$ ./configure --add-dynamic-module=/root/ngx_http_proxy_connect_module --prefix=/usr/share/nginx --sbin-path=/usr/sbin/nginx --modules-path=/usr/lib64/nginx/modules --conf-path=/etc/nginx/nginx.conf --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --http-client-body-temp-path=/var/lib/nginx/tmp/client_body --http-proxy-temp-path=/var/lib/nginx/tmp/proxy --http-fastcgi-temp-path=/var/lib/nginx/tmp/fastcgi --http-uwsgi-temp-path=/var/lib/nginx/tmp/uwsgi --http-scgi-temp-path=/var/lib/nginx/tmp/scgi --pid-path=/run/nginx.pid --lock-path=/run/lock/subsys/nginx --user=nginx --group=nginx --with-file-aio --with-ipv6 --with-http_auth_request_module --with-http_ssl_module --with-http_v2_module --with-http_realip_module --with-http_addition_module --with-http_xslt_module=dynamic --with-http_image_filter_module=dynamic --with-http_geoip_module=dynamic --with-http_sub_module --with-http_dav_module --with-http_flv_module --with-http_mp4_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_random_index_module --with-http_secure_link_module --with-http_degradation_module --with-http_slice_module --with-http_stub_status_module --with-http_perl_module=dynamic --with-mail=dynamic --with-mail_ssl_module --with-pcre --with-pcre-jit --with-stream=dynamic --with-stream_ssl_module --with-google_perftools_module --with-debug --with-cc-opt='-O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector-strong --param=ssp-buffer-size=4 -grecord-gcc-switches -specs=/usr/lib/rpm/redhat/redhat-hardened-cc1 -m64 -mtune=generic' --with-ld-opt='-Wl,-z,relro -specs=/usr/lib/rpm/redhat/redhat-hardened-ld -Wl,-E'

出现各种错误,各种google,最终

yum -y install redhat-rpm-config.noarch
yum -y install libxslt-devel 
yum -y install perl-devel perl-ExtUtils-Embed 
yum -y install gd-devel
yum -y install geoip-devel
yum -y install gperftools-devel

最后编译只出现warning类的报错才算成功

+ using system PCRE library
      + using system OpenSSL library
      + using system zlib library
      nginx path prefix: "/usr/share/nginx"
      nginx binary file: "/usr/sbin/nginx"
      nginx modules path: "/usr/lib64/nginx/modules"
      nginx configuration prefix: "/etc/nginx"
      nginx configuration file: "/etc/nginx/nginx.conf"
      nginx pid file: "/run/nginx.pid"
      nginx error log file: "/var/log/nginx/error.log"
      nginx http access log file: "/var/log/nginx/access.log"
      nginx http client request body temporary files: "/var/lib/nginx/tmp/client_body"
      nginx http proxy temporary files: "/var/lib/nginx/tmp/proxy"
      nginx http fastcgi temporary files: "/var/lib/nginx/tmp/fastcgi"
      nginx http uwsgi temporary files: "/var/lib/nginx/tmp/uwsgi"
      nginx http scgi temporary files: "/var/lib/nginx/tmp/scgi"

    ./configure: warning: the "--with-ipv6" option is deprecated

ls /usr/lib64/nginx/modules 就会发现ngx_http_proxy_connect_module.so文件已经生成了, /usr/lib64/nginx/modules是modules路径, nginx -V可以看到--modules-path

开始配置nginx

stream {
    server {
         listen 443;
         server_name admin221.test.example.com;

         proxy_connect;
         proxy_connect_allow            443;
         proxy_connect_connect_timeout  10s;
         proxy_connect_read_timeout     10s;
         proxy_connect_send_timeout     10s;

         proxy_pass http://$http_host;
   }
}

尴尬的发现到这里又做下不去了,只能转发http的流量,无法利用http的tunnel改为tcp流量,到此结束

方案三

前面都死在半路上, 不甘心啊.
意外发现Navicat Premium的连接配置竟然有个http tunnel,惊喜啊, google了一下,原来是利用 php 访问mysql,然后再把数据转发回来
对于一个php小白, 只会go和c++, 只能google下, 一通胡搞
执行过程

(1) 复制Navicat Premium目录下的`/Applications/Navicat Premium.app/Contents/Resources/ntunnel_mysql.php`到 docker 的nginx的静态文件目录www下, 这样nginx可以访问到
(2) 安装php-fpm, yum install -y php-fpm
(3) 配置nginx

server {
    listen      80;
    server_name t221.test.example.com;
    root        /etc/nginx/www;
    access_log  /var/log/nginx/access.log  main;
    error_log   /var/log/nginx/error.log;

    location /ntunnel_mysql.php {
        fastcgi_pass 127.0.0.1:9000;
        include fastcgi_params;
        fastcgi_param  SCRIPT_FILENAME /etc/nginx/www/ntunnel_mysql.php;
    }
}

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持码农网