前言 当我们自建大数据集群（如OLAP集群、实时计算集群、分布式存储集群、全文搜索集群等）的时候，除了硬件资源要合理配备外，在操作系统层面也要进行一些事前配置，让大数据组件能...
IP属地：北京
-
大数据集群Linux系统参数预调优指南 -
【CUDA】nvcc和nvidia-smi显示的版本不一致？Date: 2020/11/22 Coder: CW Foreword: CW 近日在自己的机子上发现，nvcc --version 和 nvidia-smi 显示出来的CU...
-
-
点个赞，假装看得懂
基于Calcite解析Flink SQL列级数据血缘
数据血缘 数据血缘（data lineage）是数据治理（data governance）的重要组成部分，也是元数据管理、数据质量管理的有力工具。通俗地讲，数据血缘就是数据在...
-
基于Calcite解析Flink SQL列级数据血缘数据血缘 数据血缘（data lineage）是数据治理（data governance）的重要组成部分，也是元数据管理、数据质量管理的有力工具。通俗地讲，数据血缘就是数据在...
-
本博客所有内容均适用知识共享-署名-相同方式共享（CC-BY-SA）4.0协议。
-
Spark启动时的master参数以及Spark的部署方式我们在初始化SparkConf时，或者提交Spark任务时，都会有master参数需要设置，如下： 但是这个master到底是何含义呢？文档说是设定master url，但是...
-
李宏毅-ELMO、BERT、GPT视频笔记本文根据李宏毅老师2019最新的机器学习视频整理。 视频地址：https://www.bilibili.com/video/av46561029/?p=61ppt下载地址：h...
-
我会毫不犹豫的奔向你，这次，每次，次次。
1、这个全世界怎么要求你，那是它的事，我最偏心你，我的糖都给你。 2、我会毫不犹豫的奔向你，这次，每次，次次。 3、你可以听很丧的歌，但我希望你能看看外面的太阳星星月亮行人树...
-
被人理解真的是很奇妙的事情
1 “被人理解真的是很奇妙的事情， 是那种你以为只有你自己蜷缩在看不见光的地方，而他提着灯来找你时对你说，我可以坐在你旁边吗。” 2 “人生里很多节点都是突然一个瞬间想通的，...
-
但行好事，莫問前程
-
如何理解K-L散度（相对熵）Kullback-Leibler Divergence，即K-L散度，是一种量化两种概率分布P和Q之间差异的方式，又叫相对熵。在概率学和统计学上，我们经?；崾褂靡恢指虻サ?、...
-
读《房思琪的初恋乐园》带着窥伺的好奇，连着两天晚上，看完了林奕含的小说《房思琪的初恋乐园》。 这本书出版后不久，林奕含就在住处上吊自杀，她父母的声明证实了书中所写，就是女儿13岁时遭补习班名师诱奸...
-
git push大文件处理方法
Git对二进制文件处理效率不高（Git默认会压缩并存储二进制文件的所有完整版本，如果二进制文件很多，这种做法显然不是最优），所以github限制文件大小在100M内（git ...
-
理解 CRLF，LF
CRLF, LF 是用来表示文本换行的方式。CR(Carriage Return) 代表回车，对应字符 '\r'；LF(Line Feed) 代表换行，对应字符 '\n'。由...
-
Python解压缩ZIP文件出现乱码问题的解决方案
python中的zipfile?？橛美唇庋顾鮖IP文件非常方便，但是如果ZIP文件的子文件的文件名里含有中文的话，解压出出来的文件的文件名却是乱码！这到底是为什么呢？ 查看z...
-
SSL和SSH的区别
在OSI七层模型中,这两个安全传输协议其实都是建立在应用层上的 在最初的设计意图中； SSL(Secure Sockets Layer (SSL) and Transport...
