lucky_xingxing的博客
lucky_xingxing · 共 25 篇文章
[置顶] Hive Hbase integration (整合) 出现zk始终连接 localhost:2181
前提是 hive客户端和zk没在一台机器,hive只是作为客户端使用,没有和hadoop集群在一起。 hive 和 hbase 整合(integration) 的时候,在创建hive关联Hbase表的时候出现如下 zk始终连接localhost:2181, 建表语句如下: --------------------------------------------------------------------------------------------------- create external table h_table_user3(key int, name string,age i…
2015-03-11T18:35:42Z · 开源软件 · 评论(0)
datax 编译安装包 并进行正常使用 过程中各种错误 解决
centos 系统 ------------------------------------------------------------------ 首先必须安装 rpmbuild yum install rpm-build ---------------------------- 接着运行编译命令,到datax源码的rpm目录下面 rpmbuild --ba t_dp_datax_engine.spec ------------报错提示缺少 dos2unix-------------- yum install dos2unix ------------接着继续执行编译命令出现一下错误-…
2015-03-17T17:59:19Z · 开源软件 · 评论(0)
HBase Scan Filter 自定义 Comparator 比较器
最近项目需求需要完善Sqoop的更多功能点,其中一项是将Hbase的数据导出到hdfs或hive,重点是Hbase出来的数据需要支持条件过滤。类似于Sql中的什么 > ,< ,=,主要是针对数字类型的数据过滤 等。 研究了关于Hbase的过滤只能通过Filter来进行,其中符合我们条件的Filter有一个: SingleColumnValueFilter 这个Filter支持根据字段值进行过滤。 但是Filter 的 Comparator 没有一个支持数字类型比较器,BinaryComparator,BitComparator这些比较器没法实现我们的需求,使用他们过滤出来的数据不准确。于是目…
2015-02-11T11:27:53Z · 开源软件 · 评论(0)
HashMap 通过Key进行like匹配查找value
import java.util.*; /** * Created by Administrator on 2014/5/29. */ public class LikeHashMap<K,V> extends HashMap<K,V> { public List<V> getValues(Object key) { List<V> values = new ArrayList<V>(); K [] keys = null; Set<K> set = this.keySet(); keys = (K [])set.toArray(); Arrays.sort(keys); for(int i…
2014-05-29T12:08:24Z · 编程语言 · 评论(2)
java多线程消费者生产者模式(BlockingQueue 通过阻塞队列实现)
import java.util.concurrent.BlockingQueue; import java.util.concurrent.LinkedBlockingQueue; /** * Created with IntelliJ IDEA. * User: csx * Date: 4/24/14 * Time: 9:56 AM * To change this template use File | Settings | File Templates. * * 生产者与消费者模型中,要保证以下几点: * 1 同一时间内只能有一个生产者生产 * 2 同一时间内只能有一个消费者消费 *…
2014-04-24T13:20:05Z · 编程语言 · 评论(0)
java用空格分割字符串
两个词之间存在多个空格可通过下面的方式 增加一个加号即可 public static void main(String [] args){ String test = "aa c ff f t u"; String tests [] = test.split(" +"); System.out.println(tests.length); }
2013-05-24T14:30:44Z · 编程语言 · 评论(0)
mysql 8小时断开连接解决方法
解决Mysql8小时无访问断开连接的方法 配置数据源目前测试通过的是c3p0; 我使用的是GUICE+JPA 以下是配置好的persistence.xml文件: <?xml version="1.0" encoding="UTF-8"?> <persistence version="1.0" xmlns="http://java.sun.com/xml/ns/persistence" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://java.sun.com/xml/ns/pers…
2013-03-21T10:42:47Z · 数据库 · 评论(0)
jetty在linux下后台启动
java -jar start.jar & 启动成功后敲回车即在后台运行 如果想查看控制台信息,此时进入jetty跟目录,会产生一个nohup.out 此时运行tail -f nohup.out 即可
2013-03-20T17:34:12Z · 编程语言 · 评论(0)
mysql只能localhost连接,解决不允许其他机器去访问
ERROR 1130: Host ***.***.***.*** is not allowed to connect to this MySQL server 登陆mysql 首先 use mysql; 按照别人提供的方式update的时候,出现错误。 mysql> update user set host='%' where user = 'root'; ERROR 1062 (23000): Duplicate entry '%-root' for key 'PRIMARY' 然后查看了下数据库的host信息如下: mysql> select host from user where u…
2013-03-14T10:04:24Z · 数据库 · 评论(0)
jquery实现简单的导航菜单
css文件内容: { margin: 0px; padding: 0px; } h2 { margin: 10px 0px; font-size: 14px; font-weight: bold; } p { margin-bottom: 10px; } body { text-align: center; font-family: "Lucida Grande", Verdana, Arial, Sans-Serif; font-size: 62.5%; } #container { margin: 150px auto 0px; width: 400px; text-align: lef…
2013-03-14T10:04:15Z · Web前端 · 评论(0)
maven jetty plugin配置
<plugin> <groupId>org.mortbay.jetty</groupId> <artifactId>jetty-maven-plugin</artifactId> <configuration> <webAppConfig> <contextPath>/navigation</contextPath> </webAppConfig> <connectors> <connector implementation="org.eclipse.jetty.server.nio.SelectChannelConnector"> <port>8080</port> <maxIdleTim…
2013-03-13T16:39:17Z · 编程语言 · 评论(0)
maven tomcat plugin配置
<plugin> <groupId>org.apache.tomcat.maven</groupId> <artifactId>tomcat7-maven-plugin</artifactId> <version>2.1</version> <configuration> <path>/navigation</path> <port>8080</port> </configuration> </plugin>
2013-03-13T16:37:59Z · 编程语言 · 评论(0)
mysql在windows下修改mysql 8小时连接断开
在mysql安装目录下找到 my.ini文件 我的是在 C:\Program Files\MySQL\MySQL Server 5.0 下面 打开该文件在最后追加 [mysqld] wait_timeout=600 interactive_timeout=600 600代表600秒
2013-03-13T16:36:40Z · 编程语言 · 评论(0)
jetty的控制台打印信息改为输出到文件 以及启动debug模式供远程调试
1: 将原本的启动方式 java -jar start.jar 改为java -jar start.jar 2>error.log 1>stdout.log 注意这个时候控制台将不会再有信息输出,你可以查看jetty根目录会生成该两个log文件,打开看,日志信息已经输出到两个文件当中 0代表标准输入 1代表标准输出 2代表标准错误输出 1>stdou.log 意思是把标准输出记录到stdout.log文件里面去 2>error.log意思是把标准错误输出记录到error.log文件里面去 2: jetty启动debug模式供远程调试: F:\jetty-distribution-8.1.8.…
2013-03-13T16:35:59Z · 编程语言 · 评论(0)