首页
IT技术
前端
后端
移动开发
编程语言
数据库
大数据
每日资讯
登录
标签
big data
skywalking构建基础镜像 skywalking集群搭建
目录1.搭建ES2.搭建Skywalking1.安装java2.解压skywalking压缩包3.修改配置文件 application.yml4.修改配置文件 webappwebapp.yml5.支持springcloud gateway
skywalking构建基础镜像
elasticsearch
大数据
big data
java
admin
5月前
28
0
postman查看es索引 postman连接es
对于很多的开发者来说,他们很习惯用Postman来测试 REST 接口。在我之前的文章 “如何在 Linux,MacOS 及 Windows 上进行安装 Elasticsearch” 中,我也展示了如何使用 Postman 来访问我们的 E
postman查看es索引
elasticsearch
大数据
big data
运维
admin
6月前
15
0
linux查询es位置 linux查看es数据
一、在linux环境搭建es集群: 注意:要创建一个用户来安装,不要直接用root用户,否则要报错1、官网下载elasticsearch-7.12.1-linux-x86_64.tar.gz包下载地址:https:www.elastic.c
linux查询es位置
elasticsearch
big data
bootstrap
hadoop
admin
6月前
21
0
es master节点可以故障多少个 es集群节点挂掉
1.什么是脑裂现象?在ElasticSearch集群初始化或者主节点宕机的情况下,由候选主节点中选举其中一个作为主节点。指定候选主节点的配置为:node.master:true。 当主节点负载压力过大,或者集群环境中的网络问题,导致其他节点
es master节点可以故障多少个
elasticsearch
分布式
big data
内存回收
admin
6月前
21
0
kafka 消息队列 分布式事物 kafka做消息队列
文章目录前言1. Kafka概述1.1 定义1.2 消息队列1.2.1 传统消息队列的应用场景1.2.2 消息队列的两种模式1.3 Kafka 基础架构参考资料 前言本文主要通过对B站Kafka视屏的学习,记录要点作为笔记,以备快速回顾和
kafka 消息队列 分布式事物
kafka
学习
大数据
big data
admin
6月前
17
0
logstash ruby if语句 logstash input
示例以下配置能够实现从 SQL Server 数据库中查询数据,并增量式的把数据库记录导入到 ES 中。1. 查询的 SQL 语句在statement_filepath =>"etclogstashstatement
logstash ruby if语句
big data
SQL
数据库
bc
admin
6月前
18
0
flink task JVM Metaspace 持续增加 flink slot jvm
6. TaskManager在集群启动过程中起到什么作用?TaskManager的启动流程较为简单: 启动类:org.apache.flink.runtime.taskmanager.TaskManager 核心启动方法 : selectN
flink
java
big data
ci
apache
admin
6月前
21
0
kafka 推送策略优化 用kafka实现消息推送平台
概述Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。是一种高吞吐量的分布式发布订阅消息系统,以容错的方式记录消息流,以文件的方式来存储消息流,它可以处理消费者在网站中的所有动作流数据(包括网页浏览,
kafka 推送策略优化
kafka
big data
分布式
数据
admin
6月前
18
0
flink消费protobuf flink消费多个source
目录测试用sourceJDBCsource读取 Kafka数据常见的Source可以分为大概4类:1、基于本地集合的 source2、基于文件的 source3、基于网络套接字的 source4、自定义的 source 常见的有 Apach
flink消费protobuf
flink
scala
big data
apache
admin
6月前
18
0
es百万数据分页 es大数据量分页
一、 要解决的问题search命中的记录特别多,使用from+size分页,直接触发了elasticsearch的max_result_window的最大值;{"error": {"root_cause&quo
es百万数据分页
elasticsearch
big data
搜索引擎
分页
admin
6月前
20
0
clickhouse PreparedStatement 入库 clickhouse coalesce
一 clickhouse简介1.1什么是clickhouseClickHouse是俄罗斯的Yandex于2016年开源的一个用于联机分析(OLAP:Online Analytical Processing)的列式数据库管理系统(DBMS:D
数据库
big data
数据
服务器
SQL
admin
6月前
18
0
hadoop配置spark集群开启worker是什么命令 hadoop开启kerberos
大数据技术AIFlinkSparkHadoop数仓,数据分析、面试,源码解读等干货学习资料106篇原创内容公众号官网参考:https:hadoop.apache.orgdocsr2.7.3hadoop-project-disthadoop-
hadoop
big data
HDFS
HTTP
admin
6月前
23
0
es先去重后分组 es去重查询误差
问题复现今天加班写了一个接口,刚开始发现诶数据还是正常的,觉得可以上线了,因为这个接口只是去ES查了一次数据,统计了一下数量,前端验证也没什么问题,但是突然,我发现了另一个问题: 这里面待处理是0 啊,为什么接口返回的是10,有值导致前端加
es先去重后分组
elasticsearch
大数据
big data
ES自动判空
admin
6月前
19
0
有正在运行的nginx但是提示找不到命令 nginx未找到命令
nginx在linux上的安装nginx的安装1. 安装 pcre 依赖2. 安装 openssl 、zlib 、 gcc 依赖3. 安装 nginx4. 启动nginx5. 验证附一: 防火墙设置nginx 简单使用介绍Nginx 的常
kafka
java
big data
nginx
admin
6月前
16
0
ES冷热数据分类 es 冷热数据分离
项目背景公司基于elasticsearch实现了很多的业务统计分析与展示服务,而且随着业务的发展,数据量的持续增涨,es的查询效率方面遇到了很多的问题。由于在早期建设该技术平台时,未过多考虑性能加速方面的设计,故均是配置使用的普通大容量、低
ES冷热数据分类
elasticsearch
big data
大数据
数据
admin
6月前
17
0
达梦的maven仓库 达梦数据库官网
1. 表空间管理1.1系统表空间在创建 DM 数据库时,会自动创建 5 个表空间:SYSTEM 表空间、ROLL 表空间、MAIN 表空间、TEMP 表空间和 HMAIN 表空间。SYSTEM 表空间存放了有关 DM 数据库的字典信息,用户
达梦的maven仓库
big data
SQL
数据库
表空间
admin
6月前
19
0