首页
首页
沸点
课程
直播
活动
竞赛
商城
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
霍云
掘友等级
数据开发
|
字节跳动
无他,唯手熟尔
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
25
文章 23
沸点 2
赞
25
返回
|
搜索文章
霍云
数据开发 @字节跳动
·
3年前
关注
notify"死锁"
之前找工作时,面试写了个生产者消费者,其中用到了wait notify。写完面试官问我你知道notify会产生死锁么? 我当时根本没明白,就一把锁怎么能产生死锁? 最后实际...
赞
5
分享
霍云
数据开发 @字节跳动
·
3年前
关注
clickhouse 日常使用总结
jdbc操作jdbc使用preparestatement怎么获取最终得到的sql呢?...
赞
14
分享
霍云
赞了这篇文章
Flink_China
@Apache Flink China
·
3年前
关注
Flink 在快手实时多维分析场景的应用
首先看 Flink 在快手的应用场景和规模。 1. 快手应用场景 快手计算链路是从 DB/Binlog 以及 WebService Log 实时入到 Kafka 中,然后接...
3
评论
分享
霍云
关注了
Flink_China
数据开发 @字节跳动
霍云
数据开发 @字节跳动
·
3年前
关注
Java闭包&Flink ClosureCleaner
内部类获取外部类静态属性,通过字节码来看,是外部类提供了一个静态方法。例如: 这个知识点不用关内部类是静态的还是非静态的。他为什么能拿到外面类的静态属性呢javap -v ...
赞
2
分享
霍云
数据开发 @字节跳动
·
3年前
关注
CAP
最近应该是要仔细看看两阶段提交,然后很多网上的文章就把我带到了 cap这里来。 只是听说过,然后简单知道很多技术是为了可用性(A),牺牲了一些一致性(C)。 一般会这么说,...
1
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
日常记录
字符串类型比较不区分大小写。需要加上binary关键字 例如...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
正则表达式
竖线将zhansan|lisi|wangwu|zhaoliu中的竖线换成逗号竖线有特殊含义,需要加转义...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
聊聊SQL
但是在分布式,多技术的情况下,元数据就非常重要了。一般会有xxx on xxx 例如:spark on hive 如果你在一个公司工作了10年,你手上有很多的数据,可能会在...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
SparkStreaming写kafka
spark的运行时架构是多个executor,每个executor里面有个线程池来执行任务。 那么我们需要sink到kafka,由于每个executor是一个独立的进程,而...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
举报
mac 写文章的快捷键怎么全不能用了 怎么回事?
分享
评论
点赞
霍云
数据开发 @字节跳动
·
3年前
关注
win10输入法和IDAE代码补全冲突解决方案
在使用idea进行开发的时候,win10环境下补全的快捷键是ctrl + 空格。但是这个玩意和win10输入法快捷键冲突了。 由于ctrl+space用的比较顺手,没想着去...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
Java 指令重排序
cpu会对代码进行优化,导致真正执行起来的顺序和我们想的可能不一样。经典的一道面试题就是单例模式为什么要用DBL,并且要不要加volatile volatile保证了线程之...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
kafka-offset
实时计算中,source端和sink端很有可能都是kafka,涉及到如何在整个过程中能够不丢数据也就是at-least-once,在这个基础上如何再做到exactly-on...
赞
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
再谈Shuffle(Spark&MR)
Map的输出并不是简单的直接写到磁盘,先写到缓冲区,当缓冲区要spill磁盘的时候对缓冲区内容进行排序。 每个MapTask(计算一个split)都有一个环形缓冲区(默认1...
1
评论
分享
霍云
数据开发 @字节跳动
·
3年前
关注
Spark Streaming微批到底是什么
此文章主要作为学习源码的过程,有想交流的朋友欢迎联系。 在receiver模式中,已经知道了receiver如何在executor上启动的,接下来探究一下receiver接...
赞
评论
分享
霍云
数据开发 @字节跳动
·
4年前
关注
Spark-Task如何和Executor绑定的
简单带一下一个spark app的执行。 我们的代码通过action算子进行启动,action算子里调用了SparkContext的runJob方法。即action算子->...
赞
评论
分享
霍云
数据开发 @字节跳动
·
4年前
关注
ThreadLocal笔记
今天被问到了ThreadLocal这块涉及到的面试题也挺多的,关于ThreadLocal是怎么一回事,什么场景该使用,百度出来的帖子太多了。我记录一下我能想到的面试点 Th...
赞
评论
分享
霍云
赞了这篇文章
说出你的愿望吧
Developer @🍨Vzan
·
4年前
关注
一文带你过完Spark RDD的基础概念
上一篇权当吹水了,从这篇开始进入正题。 RDD(Resilient Distributed Dataset)叫做 弹性分布式数据集 ,是Spark中最基本的数据抽象,它代表...
62
10
分享
下一页
个人成就
文章被点赞
16
文章被阅读
37,207
掘力值
1,233
关注了
21
关注者
10
收藏集
0
关注标签
9
加入于
2019-02-14