timebusker的博客

[置顶] 经典图形笔记

做票需要分析市场主线、环境、能量以及四面（基本面、技术面、消息面、政策面），选择好目标后在趋势内要保持好耐心，快不如慢交易的本质要走到大众情绪的对立面，识别市场情绪、大众情绪，跟随市场情绪，反向大众情绪做交易跟随。时分情绪回暖 K线趋势图时分量价背离容易发套黄白...

Posted by timebusker on 2024-12-05

[置顶] 经典美句收录集合

赞美美句我想不出任何你需要改变的地方，我爱你的全部。普天之下唯一能够影响他人的方式，就是找出他们想要什么，并且教给他们如何获得。如果成功有诀窍的话，那就是我们能洞悉他人的立场，同时还能兼顾自己和他人的立场。励志美句 ...

Posted by timebusker on 2022-08-10

Hive-压缩数据存储格式

Avro Files、ORC、RCFile、Parquet、SequenceFile等属于文件储存的一种格式，其已经默认包含了文件压缩算法，如LZO、Gzip等。在某些情况下，将压缩的数据保存在Hive表中比未压缩存储的性能更好;无论是在磁盘使用方面还是在查询性能方面。可以将压...

Posted by timebusker on 2017-12-20

MyBatis系统总结—初识MyBatis

说道JavaWeb，很多人都知道SSH，这里的H代表了hibernate，这是一个数据库访问框架，hibernate在Java开发中的地位也是相当高，众所周知的JPA标准就是由hibernate主导完成的。然而，数据库访问框架除了hibernate之外，还有另外一个大名鼎鼎的数据库框架，那就...

Posted by timebusker on 2017-12-20

Hive-性能优化

Fetch抓取 Fetch抓取是指，Hive中对某些情况的查询可以不必使用MapReduce计算。例如：SELECT * FROM employees;在这种情况下，Hive可以简单地读取employee对应的存储目录下的文件，然后输出查询结果到控制台。 hive.fetc...

Posted by timebusker on 2017-12-19

Hive-Hive使用Spark on Yarn作为执行引擎

Hive从1.1之后，支持使用Spark作为执行引擎，配置使用Spark On Yarn作为Hive的执行引擎，首先需要注意以下两个问题： Hive的版本和Spark的版本要匹配具体来说，你使用的Hive版本编译时候用的哪个版本的Spark，那么就需要使用相同版本的Spar...

Posted by timebusker on 2017-12-17

Hive-HiveServer服务高可用

在生产环境中使用Hive，强烈建议使用HiveServer2来提供服务，好处很多：在应用端不用部署Hadoop和Hive客户端；相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户；有安全认证机制，并且支持自定义权限校验；有...

Posted by timebusker on 2017-12-15

Hive-ETL开发样例

编写HSQL脚本 -- 经纬度信息; drop table if exists tb_test_kk_tmp; create table tb_test_kk_tmp as select kkbh,jd,wd from tb_test where udf_is_null(kkbh)=1 a...

Posted by timebusker on 2017-12-15

Hive-程序开发（UDF/UDAF/UDTF/JDBC）

UDF函数开发 Maven依赖 <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> ...

Posted by timebusker on 2017-12-14

Hive-常用的函数及函数定义

常用函数常用函数太多，不举例介绍，有详细文档 UDF UDF —— User Definition Function 用户定义函数一路输入，一路输出 sin(30°)=1/2 # 开发案例 UDAF UDAF —— User Definition Aggre...

Posted by timebusker on 2017-12-13

Hive-常用的数据类型、表、库等操作

数据库操作 # hive 默认数据库为default，进入hive环境直接使用 # 数据库的文件路径 /user/hive/warehouse # 创建数据库： create database db_test; # 数据库的文件路径 /user/hive/warehouse/d...

Posted by timebusker on 2017-12-12

Hive-2.X版本安装及服务配置

Posted by timebusker on 2017-12-11

Nginx中的高可用

https://yq.aliyun.com/articles/669934

Posted by timebusker on 2017-06-05

Nginx中的静态资源缓存

博客 http{ # 服务器连接的超时时间 proxy_connect_timeout 10; # 连接成功后,等候后端服务器响应时间 proxy_read_timeout 180; # 后端服务器数据回传时间 proxy_send_timeout...

Posted by timebusker on 2017-06-04

Nginx中的负载均衡配置使用

tengine新增健康检查模块可实现故障自动转移负载均衡配置&&宕机自动切换严格来说，nginx自带是没有针对负载均衡后端节点的健康检查的，但是可以通过默认自带的ngx_http_proxy_module模块和ngx_http_upstream_module模块...

Posted by timebusker on 2017-06-02

Nginx中的upstream配置使用

配置例子定义一组服务器。这些服务器可以监听不同的端口。而且，监听在TCP和UNIX域套接字的服务器可以混用。 upstream backend { server backend1.example.com weight=5; server backend2....

Posted by timebusker on 2017-06-02

Nginx中的location匹配规则

location匹配命令 ~ # 波浪线表示执行一个正则匹配，区分大小写 ~* # 表示执行一个正则匹配，不区分大小写 ^~ # ^~表示普通字符匹配，如果该选项匹配，只匹配该选项，不匹配别的选项，一般用来匹配目录 = # 进行普通字符精确匹配 @ ...

Posted by timebusker on 2017-06-01