Post by 咸水元子 on 2008, April 24, 7:44 AM
robots.txt,是用来声明网站中不希望被搜索引擎收录的内容或用来指定搜索引擎收录内容的规则文件。我们知道,现代搜索引擎收录网站页面是通过网络爬虫(英文名称有很多:bots,spider,Crawler,collector,walker,Slurp等等)进行页面采集,即由网络爬虫进入网站,将网站页面以及页面下的连接页面进行下载,然后通过内容分析器来分析页面内容。而在这个过程中,robots.txt的作用就在于告诉网络爬虫,那些页面不能采集,那些页面能采集。一般来说,主流搜索引擎的网络爬虫都是遵守robots.txt规范的。具体的robots规范可参见以下网站:www.robotstxt.org和www.w3.org。
robots.txt要求保存为小写(在Unix、Linux主机环境下,是区别大小写的,即统一字母的大小写不同,其代表不同字符),存放在网站根目录下,并保证可以通过www.yourdomain.com/robots.txt进行访问的。例如,WEB2Baby的robots地址为:http://www.web2baby.com/robots.txt。
» 阅读全文
Tags: 搜索引擎
学习笔记 #未必 | 评论:0
| 引用:0
| 阅读:395
Post by 咸水元子 on 2008, April 23, 7:44 PM
闲来无事煮了几粒米,刚开始也想做站,一直没有功夫弄。有米没有地啊,呵呵。
想着做停放吧,反正闲着也闲着,白养不起。关注了一下相关知识。找来找去,看到的全是一些没有什么实际指导意义的文章。
今天偶然看到一兄台写的,有见地。打消了停放的念头。为啥?非专业,玩不起。
本来想CTRL+C过来的,考虑到版权问题,还要发E-MAIL过去。就先给个地址好了。简单的htm页面。重在内容。
http://myweb.polyu.edu.hk/~05901718r/domain/faq.htm
Tags: 域名
网事随风 #飘过 | 评论:6
| 引用:0
| 阅读:633
Post by 咸水元子 on 2008, April 22, 7:36 PM
今天有幸认识了襄樊雷音乐队的曹雷,见到了他本人。去知音琴行买吉他的时候。
以前听说襄樊有人自己搞了个乐队,有自己的录音棚,几个人自己搞原创,就有点神往。
百度一下襄樊雷音乐队,发现一些相关信息。有两个评论:
其一:
雷音即是诗的符号!
他们用摇滚的喉咙说话!
他们用摇滚的头脑思考!
他们用摇滚的手臂创造!
通过这样一种音乐形式,很显然,他们所要表达的思想比诗歌更有力量!
五个襄樊本土的年轻人,他们是通过摇滚乐舞蹈着的诗人,他们的精神
极其自然的透过诗歌接通了每一个在场的人们,让人们脱去伪装,和着音乐跟
他们一起流泪,一起喜悦,一起疯狂。
» 阅读全文
Tags: 音乐, 歌曲
岁月影踪 #留痕 | 评论:2
| 引用:0
| 阅读:521
Post by 咸水元子 on 2008, April 22, 6:14 PM
最烦看到这样的内容了。以前也是,搞了个烂站,恨不得三天两头被关。要么就是老换IP。换地址还说一声,有啥内容的话都不带通知的,直接无法访问。太阳!
这是今天上老三的站看到的:
网站内容非法被暂停!
- 1. 由于您的网站因放置了国家法律所不允许的内容已被关闭!请及时删除相关内容。请使用BBS论坛的用户管理好自己的论坛帖子,请设置发贴验证码或者积分等设置,避免站点上发布违法信息而被关闭.
- 2. 网站恢复后请加强站点的管理,我们会检查您的站点,如果发现仍然存在非法信息,将会被作出暂停三天的处理,谢谢您对我们工作的配合。
- 3.删除非法信息后,请联系虚拟主机商进行网站的恢复。
- 4. 若因关闭网站给您带来不便请多谅解!请严格遵守我们的虚拟主机服务条款及国家相关法律以免影响您的网站使用。
请您支持与谅解我们的工作,谢谢!
Tags: 标签不好打
网事随风 #飘过 | 评论:4
| 引用:0
| 阅读:549
Post by 咸水元子 on 2008, April 21, 1:17 PM
是该收拾下心情的时候了。
今天又去三加一的博客看了,先要汗自己一个!
该兄弟年纪虽轻,但经历和见识非凡。最主要的是勇于拼搏、有扎实的干劲。博客通篇都体现着一种奋斗精神。创业的路上虽然艰辛,但是毫不气馁。
而我的呢?所写的不是刮风啊就是下雨的。奔三的人了,一事无成,还在整天弄那个调调。
感情的事先放一放吧。不是不重情,而是作为一个男人,要懂得如何去看重情。否则太沉迷于感情之中,到时候恐怕真的会一事无成。如果真爱她,就要给他切切实实看得到摸得着、享受得到的幸福。简单一句吧,重情重义重现实。
» 阅读全文
Tags: 三加一
写给自己 #碎语 | 评论:12
| 引用:0
| 阅读:894
Post by 咸水元子 on 2008, April 20, 3:30 PM
今天是谷雨,二十四节气之六,也是春天里的最后一个节气。
今年春天的雨真多啊,也不晓得是否只是我个人的感觉而已。反正是下了好多场。有绵绵的细雨,也有滂沱的阵雨。昨天外婆82岁的生日,我去了。冒雨去,冒雨回。也挺热闹的。祝福她老人家身体健康,长命百岁。
今天没下了。不过南方还有大雨。
究竟是下雨让人容易思念呢,还是因为思念而感觉雨下的多。昨天晚上撑伞在雨中,把一个人的名字默念了足有一千遍~~
然后我问她是否有感觉
» 阅读全文
Tags: 节气, 雨, 傻瓜
岁月影踪 #留痕 | 评论:4
| 引用:0
| 阅读:537
Post by 咸水元子 on 2008, April 20, 3:02 PM
前段时间偶尔说起这首经典老歌,明天你是否依然爱我,今天终于找到并下载了粤语版的。歌词:
明天你是否依然爱我——谭咏麟、关淑怡合唱CD版
(谭)松林白雪轻铺,爱于小屋中过渡
缠绵是最好,四周冰山都仰慕
却怕某天清早,又再一次要上路
未必可紧记此刻拥抱
(关)巍巍异国乡土,爱于思乡的国度
柔情是瑰宝,化解冰心消冷傲
却怕某天清早,又再走各有各远路
问怎可依靠那追忆终老
» 阅读全文
Tags: 歌曲
岁月影踪 #留痕 | 评论:3
| 引用:0
| 阅读:747
Post by 咸水元子 on 2008, April 20, 8:36 AM
上回说到咸水元子的年纪身材外貌等,感谢兄弟们前来捧场。让俺有了继续扯下去的勇气。
既然都被爆料了一回,也自己坦白了一番,那就来继续继续,争取宽大处理。(反正也逃不出人肉搜索的魔掌)
其实那啥博客暴露隐私无非一句玩笑而已,又不是美女之流。一大男人,用落伍行话来说,就是一MJJ的。哈哈。
是这样,本人一向比较认同君子坦荡荡这句话,虽然谈不上什么君子,但也还行,也不是一小人吧。从上学到现在,无论在网上混也好,在现实中混也罢,我想认识我的人应该都还觉得还行吧。用襄樊话来讲,就是“这娃子还可以”。嗯,这句就足够了。因为也不能指望所有的人都认为你好。尽管有人也觉得俺们长的像黑社会,那是因为还对我不了解。我跟她说,黑社会有这么善良的吗?那还咋混啊。还好,等她了解了之后,我想也不会再有这样的看法了吧。
还有就是觉得即使是在网上,也不能太过分……
» 阅读全文
Tags: 咸水元子
写给自己 #碎语 | 评论:0
| 引用:0
| 阅读:398