友情提示:欢迎光临,本博客提供的代码,请粘贴到EditPlus 3中使用!!请使用火狐,Chrome浏览器进行浏览网站!出售wenca.cn域名,有要的请M我qq:316358892

python pip下载加速

post by rocdk890 / 2017-5-3 15:33 Wednesday linux技术

  今天使用pip安装第三方模块的时候,下载速度慢得让人受不了,关键是我还要装10个第三方的模块,这样的速度让人实在不能接受,网上搜了一下,居然国内有5个源地址,其中有4个可以使用,这里我选用了douban的pip源.
  系统:centos

1.打开打开PyPI Mirror Status,选一个你看得顺眼的源(我选了douban)
打开对应的网址,例如豆瓣的pip镜像,下面会有一个 名为simple的文件夹,看下面有没有paramiko目录,如果有,说明这个源可用,简单的方法是在源的URL后直接加simple/paramiko:
https://pypi.doubanio.co...

阅读全文>>

标签: 加速 模块 下载 python pip 第三方

评论(0) 引用(0) 浏览(334)

expect不用输密码自动下载数据备份(新)

post by rocdk890 / 2014-3-28 17:13 Friday linux技术

  在上一篇用expect不用输密码自动scp数据(续)中,用了scp去下载数据备份,但最近海底光缆不是断了嘛,并且用scp去down数据只有几十K的速度,实在是太慢了,我们发现用http下载方式速度是很快,最慢也有100+k/s,为了把服务器的数据备份到本地,我对原来的脚本进行了大更改.
  这里先说下脚本的实现过程:
1.先在服务器上把备份自动打包到一个web目录下(当然这...

阅读全文>>

标签: 删除 脚本 下载 expect 自动 axel 拷贝

评论(0) 引用(0) 浏览(2861)

用expect不用输密码自动scp数据(续)

post by rocdk890 / 2013-10-18 9:19 Friday linux技术

  在上一篇用expect不用输密码自动scp数据中,给大家讲了怎么使用expect自动把数据拷到本地来,但今天公司要求既要原来每周自动down数据回来,又要在手动去down数据的时候是服务器上最新备份的,好吧,为了满足这样的要求,我在原脚本上做了一些修改.

手动down数据脚本:

#!/usr/bin/expect -f
set timeout -1
set passwd pass...

阅读全文>>

标签: 数据 exp 下载 expect 自动 最新 download

评论(0) 引用(0) 浏览(2733)

用expect不用输密码自动scp数据

post by rocdk890 / 2013-9-15 2:09 Sunday linux技术

  今天公司要求把一台服务器上的备份sql文件都传到公司本地服务器上,但公司本地服务器上做了key验证的,也就是说要用key才能登录本地服务器,还有外网的那台服务器没有做key验证,好吧,那就直接从那台服务器上把数据拖到本地服务器上吧.

脚本如下:
vi down.exp

#!/usr/bin/expect -f
set timeout -1
set passwd 你的密码
spawn s...

阅读全文>>

标签: 密码 数据 备份 scp 下载 expect

评论(0) 引用(0) 浏览(2176)

使用curl批量下载图片

post by rocdk890 / 2013-1-10 15:39 Thursday linux技术

  今天公司boss要求我给美工部下载一批图片,然后发了两个链接给我参考,看了下参考链接,还好不是很麻烦,就尾部有点变化,参考链接如下:
http://img.*****.net/i/mk/1.jpg
~
http://img.*****.net/i/mk/539.jpg
针对上面的参考链接,wget看来是派不上用场了,只能使用curl来进行批量下载了.
  系统:centos...

阅读全文>>

标签: php 图片 批量 下载 curl images 采集

评论(0) 引用(0) 浏览(5166)

linux下使用wget下载jdk

post by rocdk890 / 2012-9-4 8:54 Tuesday linux技术

  当使用wget下载jdk的时候,会发现只下载了一个后缀.html的静态文件,毕竟jdk很大,本地下载了再传到服务器是不现实的,现在来告诉大家怎么在服务器上下载jdk.
1.解决办法:
只需要在wget的时候加上一个特殊的cookie就可以搞定:

gpw_e24=http%3A%2F%2Fwww.oracle.com%2F

完整语句:
wget --no-cookie --header ...

阅读全文>>

标签: centos jdk java 下载 jdk1.7 wget

评论(0) 引用(0) 浏览(4566)

nginx不浏览直接下载文件

post by rocdk890 / 2012-7-30 11:12 Monday linux技术

 当我们使用Nginx时,如果要让一些附件比如txt,pdf,doc等不直接在浏览器打开,而弹出另存为的对话框(也就是下载),则可以在nginx里添加如下配置:
location / 
{
if ($request_filename ~* ^.*?\.(txt|doc|pdf|rar|gz|zip|docx|exe|xlsx|ppt|pptx)$){
add_header Content...

阅读全文>>

标签: nginx 配置 设置 下载 浏览

评论(0) 引用(0) 浏览(7555)

apache使用mod_bw模块下载限速

post by rocdk890 / 2012-7-26 13:51 Thursday linux技术

  今天在公司内部服务器上做了一个下载页面,大量下载造成内部服务器无法进入,决定对apache下载进行限速.
  系统:centos 5.8
  需要的软件包:mod_bw-0.92.tgz
1.下载mod_bw
wget http://apache.ivn.cl/files/source/mod_bw-0.92.tgz
tar zxf mod_bw-0.92.tgz

2.安装m...

阅读全文>>

标签: apache 限速 模块 mod_bw bandwidth 下载

评论(0) 引用(0) 浏览(3617)