生活学习记录 生活学习记录
七七

七七

  • 累计撰写 155 篇文章
  • 累计创建 34 个分类
  • 累计收到 0 条评论

ES日期格式

  • 2024-03-12 17:04
  • 25
  • 0
  • 0
  • 26.5℃
大数据数据 
"yyyy-MM-dd'T'HH:mm:ss.SSSXXX"

es_kibana添加删除别名

  • 2024-03-12 17:04
  • 14
  • 0
  • 0
  • 25.4℃
大数据数据 
POST /_aliases { "actions": [ { "add": { "index": "data_tick_log_test_*", "alias": "view_data_tick_log_test"

flinkSQL提交SQL异常

  • 2024-03-12 17:03
  • 23
  • 0
  • 0
  • 26.3℃
大数据数据 
错误： org.codehaus.janino.CompilerFactory cannot be cast to org.codehaus.commons.compiler.ICompilerFactory 问题是在Flink SQL Client中碰到的 Flink SQL> select *

Flink提交TaskManager日志无法查看

  • 2024-03-12 17:03
  • 19
  • 0
  • 0
  • 25.9℃
大数据数据 
错误提示: The file LOG/STDOUT is not available on the TaskExecutor 场景:

FlinkSQL验证与执行计划查看

  • 2024-03-12 17:03
  • 16
  • 0
  • 0
  • 25.6℃
大数据数据 
import org.apache.flink.api.java.tuple.Tuple2; import org.apache.flink.streaming.api.datastream.DataStream; import org.apache.flink.streaming.api.en

单节点HDFS配置

  • 2024-03-12 17:03
  • 22
  • 0
  • 0
  • 26.2℃
大数据数据 
core-site.xml <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <!-- Licensed under the Apache Lice

Yarn之日志分析

  • 2024-03-12 17:03
  • 51
  • 0
  • 0
  • 29.1℃
大数据数据 
前言 Yarn中的id种类繁多，比较乱，下面整理下yarn中常出现的几种id，分别介绍一下。 1）jobId描述：出自MapReduce，对作业的唯一标识。 格式：job_${clusterStartTime}_${jobid} 例子：job_1498552288473_2742 2）applica

PRESTO使用过程中调整参数记录

  • 2024-03-12 17:02
  • 18
  • 0
  • 0
  • 25.8℃
大数据数据 
参数名称 参数作用 配置位置 使用场景 hive.recursive-directories(true|false) 读取hive数据时,是否允许递归读取 hive catalog的配置文件中 在hive中有 tez 引擎生成的hive表,每个tez的job的stage会产生一个子文件夹,具体的数据

HADOOP联邦

  • 2024-03-12 17:02
  • 23
  • 0
  • 0
  • 26.3℃
大数据数据 
Federation即为“联邦”，该特性允许一个HDFS集群中存在多个NameNode同时对外提供服务，这些NameNode分管一部分目录（水平切分），彼此之间相互隔离，但共享底层的DataNode存储资源。 在hadoop1.x中HDFS的架构 文件的存储是放在块上的（Block Storage）

KYLIN使用异常处理

  • 2024-03-12 17:02
  • 21
  • 0
  • 0
  • 26.1℃
大数据数据 
一、点击加载hive表出现如下异常： java.lang.NoClassDefFoundError: org/apache/hadoop/hive/cli/CliSessionState java.lang.NoClassDefFoundError: org/apache/hadoop/hive/q
弹