南大通用GBase 8a集群如果出现OS异常断电,死机时,可能会出现部分元数据没有正确保存到磁盘上情况,比如gbase.table_distribution表。如果集群为单节点,没有副本用于自动恢复时,可能造成部分表查询时报错Can't get distribution attribute of table。
作者: laozizhu
hadoop搭建之linux 节点间ssh 互信passphraseless的搭建方法
ssh互信可以避免节点间,包括ssh本机,访问时需要手工输入密码的情况。
Hadoop不同版本对Java支持情况和支持的JDK
不同的hadoop版本对JAVA的版本有最低要求,默认java8肯定可以。本文介绍不同版本hadoop支持的JAVA版本。
南大通用GBase 8a重分布日志各个阶段耗时情况
南大通用GBase 8a通过重分布Rebalance进行扩缩容等操作,在集群层的express.log里记录了执行情况,包括各个阶段的耗时。
南大通用GBase 8a的Python接口使用样例
本文介绍通过python访问GBase 8a的方法。涉及连接,DDL,DML,DQL,存储过程,加载等常见功能。
南大通用GBase 8a列转行函数unpivot介绍
与pivot函数相反,unpivot是将列转成行。本文介绍GBase 8a里,unpivot的使用。本文不完整,还在完善中。
ChatGLM2-6B搭建过程记录
本文记录清华大学开放使用的ChatGLM2-6B的完整大家过程,在本地机器32G内存,无显卡,可以缓慢运行。要求python3.7+环境,本文用的是python 3.9 + redhat 7.9。如果你没有大内存机器,就别测试了。如果没有8G显存的nvidia显卡,就别太指望性能。
为什么客户要自己训练自己的深度学习模型(LLMs)
让客户自己训练自己的深度学习模型(LLMs)有以下几个重要原因
南大通用GCDW K8S 9.8.0.4.1多租户版本介绍
对比于9.8.0.3.5的GCDW, 9.8.0.4.1支持多租户,其配置也有了些许的变动。
Kubernets 组件 metrics 安装,监控集群CPU,内存使用情况
kubernets提供了metrics API来支持kubectl top命令,显示集群CPU和内存使用情况。如没有安装,则会报error: Metrics API not available错误。