首页
首页
沸点
课程
直播
活动
竞赛
商城
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
会员
登录
注册
苦哈哈
掘友等级
游戏爱好者
|
打鱼
获得徽章 0
动态
文章
专栏
沸点
收藏集
关注
作品
赞
46
文章 44
沸点 2
赞
46
返回
|
搜索文章
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Impala常见问题笔记
kerberos下怎么jdbc链接(kerberos)? jdbc url的写法: jdbc:hive2://host:21050/;principal=hive/_HOS...
2
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Esrally性能测试步骤与调优
我正在参加「掘金·启航计划」 安装部署 python3.8安装 使用root用户操作: 自行查找python官网:https://www.python.org/ 或直接下载...
3
1
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
ES集群异常修复与进阶实践
ES 出现failed to execute pipeline for a bulk request问题 已知情况: 当前环境各组件运行正常,数据由HBase侧不停写入ES...
10
5
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
一次Linux logger无法发送消息的问题追溯
常规使用,logger无法给本地系统日志和远端发送消息,无显式报错,而在这之前能够正常工作。 具体复现如下: 排查与定位 首先排除rsyslog升级、配置等原因,因为之前一...
6
1
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Spark3源码在IDEA中的编译步骤
Spark3源码编译-IDEA 之前可以在linux环境进行spark源码的修改和编译,没有在笔记本上走通过编译流程,记录遇到的问题和解决方案。在电脑上修改编译源码方便日常...
3
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Shell中运算操作和常见错误解决
运算操作 四则运算 不经常写脚本的同学,遇到的第一个坎就是这个——shell脚本中不能直接做加减乘除(报错command not found): 可以在线Shell工具尝试...
6
3
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
浅谈Spark之NativeSQL引擎
我们在Spark任务的DAG图中很容易看到WSCG(全阶段代码生成)的身影。CodeGen技术从算子融合角度解决虚函数开销和中间数据物化问题:简单来说,CodeGen框架通...
3
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
搭建个人知识库:Obsidian 1.0 正式发布
Obsidian是一款科研笔记和知识管理软件,最近obsidian终于抛掉beta版的帽子,开启了1.0时代。Obsidian是基于Markdown文件的本地知识管理软件,...
44
4
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
ElasticSearch的RBAC安全特性
当前大部分Elasticsearch集群的使用场景,多是内网部署,且不对外部提供相关服务。或者仅将Elasticsearch集群作为支撑业务的底层服务,不对公网开放9200...
4
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Spark GraphX 图算法的理解
Spark GraphX是一个分布式图处理框架,基于 Pregel 接口实现了常用的图算法。包括 PageRank、SVDPlusPlus、TriangleCount...
5
1
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
ES分词器安装方法
常规安装 说明 例如,下载的ik分词器压缩包,解压之后放到ElasticSearch安装路径下的plugins目录,之后重启es即可(文件名字随意,es会自动识别文件)。 ...
4
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
1年前
关注
Spark Streaming任务GC严重的问题排查优化
业务背景 业务代码本身是没有致命逻辑错误的,程序可以正常的启动和运行较长一段时间,如一周两周; 流计算任务,从kafka读取数据计算后写; 没有使用第三方缓存承接中间数据;...
2
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
Spark功能点思维导图|【收藏】
2019年就快结束啦,又到了总结过去展望未来的时候,最近和小伙伴们在进行Spark的功能的梳理,以便进一步研究学习。 Spark Streaming是核心Spark API...
4
2
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
源码篇:Spark SQL客户端Driver类|[Spark Source]
版本版本spark2.3.1HDPSparkSQLCLIDriver图解1-processCmd图解2-伴生对象main方法总体结构SparkSQLCLIDriver伴生对...
3
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
使用Spark批量导入数据到JanusGraph完整实践
开发层面通常使用嵌入式的Java应用程序或连接JanusGraph Server的模式与JanusGraph数据交互,但作为分布式图数据库的一个代表,不与Spark这样的分...
5
5
分享
苦哈哈
赞了这篇文章
锐玩道
微信搜 「锐玩道」
·
4年前
关注
技术中台-分布式架构在蚂蚁金服的实践
来源|阿里云峰会文| 技术领导力社区本文整理自阿里高级技术专家-许文奇在2019阿里云峰会上的分享《技术中台-分布式架构在蚂蚁金服的实践》,结合技术领导力社区架构专家的点评...
31
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
源码编译后打RPM包步骤-Spark
修改了Spark部分源码,编译成jar包后要替换原rpm包中的jar,并重新打成rpm包以便安装。 运行rpmdev-setuptree生成工作目录,使用rpmbuild ...
7
1
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
JanusGraph+Hbase+ES在开启Kerberos下的配置
开Kerberos环境下JanusGraph+Hbase+ES如何使用 说明:Hbase受Kerberos管理,ES不受Kerberos管理 修改配置文件janusgrap...
4
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
JanusGraph+HBase+Solr 配置实践
之前文章说了一下JanusGraph使用Hbase+ES的配置(传送门),今天对Hbase+Solr进行一下配置,已测试通过。 这按照JanusGraph问题笔记之NoNo...
3
评论
分享
苦哈哈
赞了这篇文章
1024点线面
大数据架构师 @郑州
·
4年前
关注
JanusGraph问题笔记-本地配置不生效?
报错提示是未识别的模式: Unrecognized mode: manager93.bigdata,检查发现这是我误填写的一个solr服务域名,顺藤摸瓜找到这个配置是ind...
4
评论
分享
下一页
个人成就
文章被点赞
5
文章被阅读
2,125
掘力值
63
关注了
3
关注者
955
收藏集
2
关注标签
11
加入于
2019-09-07