找回密码
 注册

手机号码,快捷登录

手机号码,快捷登录

搜索

扫描二维码

浅谈站群技术及其核心竞争力

已有 1316 次阅读2014-7-14 17:19 | 管理工具, 竞争力, linux, 垃圾站, 主题词

1、站群基础技术工具的选择,个人首选linux技术,LAMP,原因无他,脚本化、自动化,设想1000个域名的管理,没有高效的linux专用工具,怎么搞得定?
2、建站技术,个人首选专用程序,对于垃圾站,不需要很好的动态网站技术,完全静态页面就可以,只要能方便控制内容和链接;
3、域名、空间管理工具,1000个域名时,怎么有效管理内容的更新、链接的更新?特别是对于每天定时更新来说,怎么保证不出错?如果是分布式,怎么考虑站群链接的一致性?怎么管理域名的IPwhois信息、每个站的主题词?都是很有挑战的问题。
4、SE反馈系统,怎么定量化监控SE对站群的反应?每天的收录情况、是否有站被K或者降权?怎么自动分析1000个站的爬虫日志?怎么分析站群的排名变动情况?
5、还有一块容易被忽视的,就是对SE前面的对手的分析。别人站群是怎么做上去的?他的站群是树形、星形还是链轮?他的站群更新频率、链接策略如何?SE是怎么K他的?他的成本如何?效益如何?这块实际上是站群技术的核心竞争力。

只说了个大概,每个方向的水都很深。愿意与大家一起探讨。

路过

雷人

握手

鲜花

鸡蛋

发表评论 评论 (2 个评论)

回复 达意 2014-12-21 15:03
linux下测试磁盘的读写IO速度
(1)使用hdparm命令
这是一个是用来获取ATA/IDE硬盘的参数的命令,是由早期Linux IDE驱动的开发和维护人员 Mark Lord开发编写的( hdparm has been written by Mark Lord <mlord@pobox.com>, the primary developer and maintainer of the (E)IDE driver for Linux, with suggestions from many netfolk).该命令应该也是仅用于Linux系统,对于UNIX系统,ATA/IDE硬盘用的可能比较少,一般大型的系统都是使用磁盘阵列的.

使用方法很简单
# hdparm -Tt /dev/sda

/dev/sda:
Timing cached reads: 6676 MB in 2.00 seconds = 3340.18 MB/sec
Timing buffered disk reads: 218 MB in 3.11 seconds = 70.11 MB/sec


可以看到,2秒钟读取了6676MB的缓存,约合3340.18 MB/sec;
在3.11秒中读取了218MB磁盘(物理读),读取速度约合70.11 MB/sec
回复 达意 2014-12-21 15:19
阿里云云服务器硬盘分区及挂载

参考自阿里云服务器使用心得。

云服务器环境:CentOS 6.2 64位

客户端环境:Mac OSX

远程连接方式:运行 Terminal,输入命令 ssh username@ip

硬盘分区及挂载操作步骤:

1. 查看未挂载的硬盘(名称为/dev/xvdb)

# fdisk -l

Disk /dev/xvdb doesn't contain a valid partition table

2. 创建分区

# fdisk /dev/xvdb

...

输入n

Command (m for help):n

输入p

Command action
e extended
p primary partition (1-4)
p

输入1

Partition number (1-4): 1

回车

First cylinder (1-2610, default 1):
Using default value 1

回车

Last cylinder, +cylinders or +size{K,M,G} (1-2610, default 2610):
Using default value 2610

输入w

Command (m for help): w
The partition table has been altered!

3. 格式化分区

# mkfs.ext3 /dev/xvdb1

4. 建立挂载目录

# mkdir /data

5. 挂载分区

# mount /dev/xvdb1 /data

6. 设置开机自动挂载

vi /etc/fstab

在vi中输入i进入INERT模式,将光标移至文件结尾处并回车,将下面的内容复制/粘贴,然后按Esc键,输入:x保存并退出

/dev/xvdb1              /data                   ext3    defaults        0 0

7. 确认是否挂载成功

重启服务器

# reboot

查看硬盘分区

# df

/dev/xvdb1            20635700    176196  19411268   1% /data

搞定!Mac 下通过 Terminal 远程操作 Linux 的感觉不错!

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 注册

Archiver|手机版|小黑屋|广告合作|大亚湾在线 ( 粤ICP备12059854号 )

GMT+8, 2024-4-29 16:19 , Processed in 0.056801 second(s), 8 queries , Gzip On, MemCached On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

返回顶部