在线支持
在线支持
微信支持
微信支持
  • 产品使用示例 星小环 官方人员 发表时间:2022-06-29 18:17:00

【教学视频】如何安装TDH社区版 精华 置顶

感谢大家对星环科技社区版的支持,为了便于用户的上手使用,我们录制了一个安装教程,包含如何配置集群域名、格式化docker盘、挂载分区的操作,以及如何安装manager,安装组件服务。 点击下方视频链接即可查看: https://transwarp-ce-1253207870.cos.ap-shanghai.myqcloud.com/%e7%a4%be..

617
0
  • TDH社区版 星小环 官方人员 发表时间:2022-10-25 16:54:04

社区版相关资源指路 精华 置顶

社区版tdh常见的故障/问题排查攻略:https://community.transwarp.cn/thread?topicid=248 社区版tdh相关的产品包&驱动包获取:https://www.transwarp.cn/product/tdh-community-edition 相关教程 社区版tdh安装视频教程: ..

158
0
  • TDH社区版 星小环 官方人员 发表时间:2022-10-25 17:04:44 最新回复:2022-10-25 17:31:34

常见错误排查攻略以及使用问题(问题持续更新中,最近更新时间为2022.11.26) 精华 置顶

117
2
  • 知识分享 星小环 官方人员 发表时间:2022-11-26 18:52:43

linux操作系统下怎么关闭icmp,Linux 开启和关闭Ping的操作方法

linux 默认是开启 ping 操作的,通过以下两种方式可以开启和关闭 ping 操作 。关闭服务器上的ping可以在一定程度上在互联网上隐藏自己,防止一些批量扫描软件探测主机,减少被入侵的几率。 1、修改内核参数 通过内核参数设置也有两种方式,一种是临时修改,一种是永久修改。 1.1 临时设置 ping 操作 # 禁止 ..

12
0
  • 知识分享 星小环 官方人员 发表时间:2022-11-26 15:27:24

【知识分享】Linux中查看主机名的10种方法 精华

主机名(也称为计算机名)是提供给连接到网络的设备(可以是系统、交换机、路由器等)的名称,用于通过网络对其进行标识。同一网络中不能有两个主机名相同的系统。linux系统给当前主机命名的目的是能够更容易记住,尤其是在部署集群的时候更加方便。一般主机名称都会有ip地址来关联,这样在其它集群中,主机换ip其它的集群机器不用相应的修改。 默认情况下,可以在终端中找..

9
0
  • 知识分享 星小环 官方人员 发表时间:2022-11-24 19:19:10

【知识分享】如何计算Task数量

6
0
  • 星环组件 发表时间:2022-11-23 14:25:25 最新回复:2022-11-23 16:17:48

inceptor部署环境问题

inceptor 连接出现java.sql.sqlexception: connection is closed!..

23
1
  • 知识分享 星小环 官方人员 发表时间:2022-11-22 11:07:51

如何根据错误信息定位出现问题的发生阶段以及错误类别 精华

大家在使用inceptor的时候,可能会因为各种原因导致sql语句发生错误,一般错误信息会由如下几部分组成: 1. 错误发生阶段 compile failed:编译阶段(并未生成task) execution failed:执行阶段(已生成task,在task执行过程中出错) 2. 错误类别 parse error:词法/语法错误(由ant..

26
0
  • 知识分享 星小环 官方人员 发表时间:2022-11-21 16:27:22

运维神器--火焰图介绍

15
0
  • 知识分享 星小环 官方人员 发表时间:2022-11-21 15:43:34

【知识分享】UDF那些事

背景: udf来源与hive,hive可以允许用户编写自己定义的函数udf,来在查询中使用。inceptor中udf的开发规范与hive相同,有3种udf: udf: 以单个数据行为参数,输出单个数据行; udaf: 以多个数据行为参数,输出一个数据行。 udtf: 以一个数据行为参数,输出多个数据行为一个表作为输出。 ..

22
0
  • 知识分享 星小环 官方人员 发表时间:2022-11-14 14:50:38

【知识分享】Inceptor中不同的表格式对应的不同的应用场景

28
0
  • 关系型分析引擎Inceptor 发表时间:2022-11-09 11:16:04 最新回复:2022-11-17 17:44:47

beeline登录,报错hbase because of null user

beeline 登录报错,无法登录inceptor..

36
4
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 19:42:53

【知识分享】小文件相关的问题以及应该怎么处理

问题背景 很多客⼾在⽣产环境都会遇到⼩⽂件问题,⼩⽂件可能来⾃于上游系统,可能来⾃于书写不当的sql,也可能是错误数据导致join ⽣成⼤量⼩⽂件。 ⽤⼾侧观察到的现象就是,性能下降,任务报错,甚⾄executor lost。 问题分析 ⼩⽂件问题隐患: 1. 导致map 任务⾮常多,从而性能下降; 2. ⼩⽂件过多,可能会影响到后..

67
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 19:39:47

小文件合并以及automerge出现问题怎么解决

现有功能 改进的automerge 功能:https://community.transwarp.cn/thread?topicid=251 插入时候的全表/分区小文件合并功能:https://community.transwarp.cn/thread?topicid=252 现有功能可能出现的问题: 改进的automer..

58
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 19:30:24

【知识分享】小文件合并设计实现版本

当前设计实现方案: 小文件合并时机:在插入表数据后进行 (insert into等) 在插入后会启动一个 inceptorpostcompacttask来完成合并工作。 为了生成一个合理的operator tree, 方案借助了一个虚拟的sql来完成。 假设被插入表是t,那么会使用 insert into t select * from t来生成。 在4..

60
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 19:23:09

【知识分享】改进partition automerge

原来automerge (ngmr.partition.automerge) 不计算base本身的大小,并且可能会将两个大的数据块合并在一起 (不管阀值多小)。 改进的方法是: 1)合并之前检查自身的大小,如果已经超过阀值(默认8m),就不参与合并了。 2)合并时,把自身的大小计算在内。 阀值控制参数重用现有的:ngmr.partition.merg..

52
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 19:20:11

【知识分享】Automerge用法及注意事项

功能介绍 automerger 用于map端控制map task的数目,它根据每个partition(数据块)所在的位置及大小将多个partitions交给一个task去完成。 控制参数 总开关: ngmr.partition.automerge 默认false ngmr.partition.mergesize 默认3,控制额外merge的数据块个数 ng..

50
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-27 14:09:07

Slipstream中的概念与Kafka中的概念的对应关系

48
0
  • 产品使用示例 星小环 官方人员 发表时间:2022-10-24 18:48:46

【教程】安装Manager时如何配置RPM仓库

53
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-24 18:42:14

【API访问实例】使用hyperbase API访问启用Kerberos的服务demo

如果需使用api来进行权限的管理,可考虑如下实例: 使用java api访问启用kerberos的服务示例 环境准备: 配置kerberos客户端 配置默认路径:/etc/krb5.conf (linux) 或者 c://windows/krb5.ini (windows) 或者 添加java程序启动参数 -djava.sec..

53
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-24 18:36:43

【知识分享】Transwarp HyperBase 运行模式(cluster/local)

transwarp hyperbase可以运行在localmode和clustermode模式下,可通过set ngmr.exec.mode=local/cluster进行设置。 localmode localmode:单节点模式,同一时间只有一台机器读数据,是一个查询模型。主要应用在高并发实时业务场景,为hyperbase的高并发查询服务。job..

51
0
  • 知识分享 星小环 官方人员 发表时间:2022-10-24 17:56:05

【知识分享】如何进行Prometheus 的存储容量规划

概述 aquila insight 使用prometheus (作为 aquila 角色之一) 收集和存储监控指标, 这些指标默认持久化在本地 (暂时不支持保存数据到第三方存储服务), 可以通过查看aquila 配置 prometheus.data.dir获得本地存储目录,建议将 prometheus.data.dir 单独挂到一块磁盘上, 使用默认值可能会..

58
0
  • 产品使用示例 星小环 官方人员 发表时间:2022-10-24 17:32:10 最新回复:2022-10-24 19:00:35

【产品使用示例】使用Aquila Insight运维示例(含演示视频)

56
2
  • 知识分享 LilJ 发表时间:2022-10-24 17:20:20

【知识分享】Sqoop通用参数&命令说明

① 通用参数说明 –username 源数据库名称 –password 密码 –connect 数据库jdbc连接串 –query sql语句,其中 where $conditions 是固定写法 –target-dir 写入hdfs目录 后面跟的hdfs目录需要确认用户有写权限 -m -m 4 map个数,抽数的线程数,默认为4 当..

58
0
  • 产品使用示例 星小环 官方人员 发表时间:2022-10-24 17:16:08

【教学视频】如何通过社区版TDH对数据进行分析探索

主要围绕以下5个操作点,感兴趣的同学可以点击链接进行查看: 1、初始化tdh客户端; 2、执行sqoop抽数脚本到hdfs目录,运行mapreduce任务 3、配置waterdrop连接quark 4、创建外表,加载sqoop抽取的数据到employee_ods表中 5、创建orc表,从ods表中插入数据进行数据分析探索。 https://tr..

54
0
  • 集成方案 星小环 官方人员 发表时间:2022-10-24 17:14:43

【集成方案】Sqoop对接TDH手把手教学贴

97
0
  • 集成方案 星小环 官方人员 发表时间:2022-10-24 17:03:09

【集成方案】Kettle对接TDH手把手教学贴

78
0
  • 新闻公告 星小环 官方人员 发表时间:2022-10-21 17:04:44

自主创新、领先一代,星环科技成功登陆科创板

48
0
  • 经典案例分享 星小环 官方人员 发表时间:2022-10-12 17:03:52

【案例】星环科技×某能源企业:数据中台实践

81
0
  • NoSQL宽表数据库Hyperbase LilJ 发表时间:2022-09-23 14:56:26 最新回复:2022-09-27 17:27:17

Hyperbase介绍以及在日常监测管理系统场景中的应用实践

163
3
共173条 1 2 3 4 5 6 下一页

登录 后发表话题。没有帐号? 注册 一个。