之前散仙也用过eclipse直接向hadoop提交MR作业,也提交成功过,这次换了集群环境,提交作业时发现几个异常,特此整理一下,以防后面再出现类似问题。 主要的问题的有2个: 第一个问题,在win7上的eclipse向ha...
阅读(527) 评论(0)
刚装完的hadoop集群,在查看namenode的log时,散仙发现有如下的警告信息: 2014-10-30 16:49:18,340 INFO org.apache.hadoop.hdfs.StateChange: STAT...
阅读(307) 评论(0)
最近,要在沙箱的环境装一个hadoop的集群,用来建索引所需,装hadoop已经没啥难的了,后面,散仙会把重要的配置信息,贴出来,本次装的hadoop版本是hadoop1.2的版本,如果不知道怎么装的,可以参考这篇文章,安装的...
阅读(2801) 评论(0)
Doug Cutting是开源界的大神,也是散仙非常膜拜的一个对象,从最早2000年Lucene的开始,到后来的基于Lucene衍生的企业级搜索项目Solr和ElasticSearch,以及发展到现在专职于全网采集的Nutch...
阅读(162) 评论(0)
Ajax的出现让Web展现了更新的活力,基本所有的语言,都动态支持Ajax与起服务端进行通信,并在页面实现无刷新动态交互。 下面是散仙使用Django+Jquery+Ajax的方式来模拟实现了一个验证用户注册时,用户名存在...
阅读(185) 评论(0)
Pexpect 是 Don Libes 的 Expect 语言的一个 Python 实现,是一个用来启动子程序,并使用正则表达式对程序输出做出特定响应,以此实现与其自动交互的 Python 模块。 Pexpect 的使用范...
阅读(173) 评论(0)
很久没有更新博客,是的,我辞职卖水果去了!看惯了肉夹馍之类成功的案例,来看看我这个要死不活的案例吧!     究竟什么才是互联网思维?开始做水果的时候,我以为互联网思维就是互联网方法,掌握了微...
阅读(182) 评论(0)
Django是非常轻量级的Web框架,今天散仙来看下如何在Django中配置静态的资源访问路径,一个中等规模的网站,可能就会有很多静态的资源需要访问,无论是html,txt,还是压缩包,有时候访问这些资源我们并不需要过多的限制...
阅读(170) 评论(0)
前2篇文章,散仙写了关于Django的入门安装,以及简单模拟数据库的MVC使用,那么本篇就来稍微深入下,来看看如何使用Django来实现一个增删改查的小例子: 序号名称备注1Win7操作系统2开发工具Pychram3Pyth...
阅读(4260) 评论(0)
使用python来运维linux是非常简单轻松的一件事情,但是仅仅是一些交互式比较强的,比shell更灵活的一些工作时,可以使用python,如果是一些简单的查找,排序,等什么的,可以还用shell来完成,下面来看下在pyth...
阅读(178) 评论(0)
1、放下面子 有时候我们低头,是为了看准自己走的路。很多人认为,自己已经过得还可以,不愿意去尝试新鲜的事物,很多东西都放不下,拉不下这个脸,最终死在面子上. 2、放下压力 累与不累,取决于自己的心。心灵的房间,不打扫就会落...
阅读(150) 评论(0)
Django是python里面开源的一个Web框架,下面借用百科的几段内容,给不太了解Django的朋友们普及下概念。 Django是一个开放源代码的Web应用框架,由Python写成。采用了MVC的软件设计模式,即模型M...
阅读(356) 评论(0)
使用Python抓取网页的时候,有时候我们会解析出现异常,这时候,就会导致整个网页解析不成功,究其原因,仅仅是因为编码里某个小小的地方编码出错了,才导致解析失败,那么我们应该如何比较好的避免这种情况出现呢? 看下面的例子:...
阅读(142) 评论(0)
原创不易,转载请务必注明,原创地址,谢谢配合! http://qindongliang.iteye.com/blog/2142783 对于中文的搜索来说,词库系统,也是一个比较重要的模块,本篇散仙以IK分词器为例子,介绍了...
阅读(295) 评论(0)
有时候,我们有这样的需求,需要清空多个表的内容,这样我们有两种做法,可用delete from table 或 truncate table table,两种方法视情况而定,前者只是一条条的删除表数据,主键自增的序列还能保存,...
阅读(146) 评论(0)
每到月末,桌面上基本都会爆满,散仙的习惯一个月整理一次桌面,上面放了各种文件,word,excel,txt,jar,压缩包等等,如果每天整理一次,感觉比较麻烦,一个月整理一次,又发现到时候整理的东西,实在太多了,少说也得花了5...
阅读(173) 评论(0)