PeersLee
码龄10年
求更新 关注
提问 私信
  • 博客:544,102
    社区:28
    544,130
    总访问量
  • 291
    原创
  • 84
    粉丝
  • 16
    关注
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:北京市
加入CSDN时间: 2015-08-07

个人简介:但行好事,莫问前程;慎终如始,则无败事;任重道远,不忘初心。

博客简介:

PeersLee的博客

博客描述:
慢下来,快乐自然就追上你了!
查看详细资料
个人成就
  • 获得88次点赞
  • 内容获得40次评论
  • 获得306次收藏
  • 代码片获得520次分享
  • 博客总排名1,859,218名
创作历程
  • 16篇
    2021年
  • 14篇
    2019年
  • 44篇
    2018年
  • 110篇
    2017年
  • 69篇
    2016年
  • 59篇
    2015年
成就勋章
TA的专栏
  • Impala
    1篇
  • Iceberg
    6篇
  • vim
    1篇
  • HDFS
    6篇
  • Java & JVM
    2篇
  • Zookeeper
    5篇
  • Yarn
    1篇
  • 数据结构 & 算法
    26篇
  • 编程之美
    7篇
  • 剑指 offer
    14篇

TA关注的专栏 1

TA关注的收藏夹 0

TA关注的社区 0

TA参与的活动 0

兴趣领域 设置
  • 大数据
    hadoop
创作活动更多

AI 镜像开发实战征文活动

随着人工智能技术的飞速发展,AI 镜像开发逐渐成为技术领域的热点之一。Stable Diffusion 3.5 FP8 作为强大的文生图模型,为开发者提供了更高效的图像生成解决方案。为了推动 AI 镜像开发技术的交流与创新,我们特此发起本次征文活动,诚邀广大开发者分享在 Stable Diffusion 3.5 FP8 文生图方向的实战经验和创新应用 本次征文活动鼓励开发者围绕 Stable Diffusion 3.5 FP8 文生图方向,分享以下方面的内容: 1. 技术实践与优化 - Stable Diffusion 3.5 FP8 模型架构解析与优化技巧 - 文生图生成效果的提升方法与技巧 - 模型部署与加速策略,例如使用 Hugging Face、Diffusers 等工具 - 针对特定场景(例如二次元、写实风)的模型微调与定制化开发 2. 应用场景探索 - Stable Diffusion 3.5 FP8 在不同领域的应用案例分享,例如游戏设计、广告创意、艺术创作等 - 利用 Stable Diffusion 3.5 FP8 实现图像编辑、图像修复、图像增强等功能的探索 - 结合其他 AI 技术(例如 NLP、语音识别)构建更强大的应用 3. 创新应用与思考 - 基于 Stable Diffusion 3.5 FP8 的创新应用场景设计 - AI 镜像开发的未来发展方向的思考与展望 - 对 AI 镜像开发伦理、安全等问题的探讨

30人参与 去参加
  • 最近
  • 文章
  • 专栏
  • 代码仓
  • 资源
  • 收藏
  • 关注/订阅/互动
更多
  • 最近

  • 文章

  • 专栏

  • 代码仓

  • 资源

  • 收藏

  • 关注/订阅/互动

  • 社区

  • 帖子

  • 问答

  • 课程

  • 视频

搜索 取消

aboutyun_log_anaysis

发布资源 2017.04.27 ·
gz

impala 4.0.0 开发环境搭建

源码
原创
博文更新于 2021.06.24 ·
4014 阅读 ·
2 点赞 ·
11 评论 ·
1 收藏

vim 格式化 json 字符串

" jsonlet mapleader = "\<space>"map <Leader>jf :%!python -m json.tool<CR>command! JM :execute '%!python -m json.tool' | :execute '%!python -c "import re,sys;sys.stdout.write(re.sub(r\"\\\u[0-9a-f]{4}\", lambda m:m.group().decode(\"u.
原创
博文更新于 2021.06.19 ·
615 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hdfs dfsadmin -report

查看 datanode block 是否均匀hdfs dfsadmin -report |grep 'DFS Used%'
原创
博文更新于 2021.06.15 ·
1396 阅读 ·
0 点赞 ·
1 评论 ·
2 收藏

hdfs dfs test 命令

testUsage: hadoop fs -test -[defswrz] URIOptions:-d: if the path is a directory, return 0.-e: if the path exists, return 0.-f: if the path is a file, return 0.-s: if the path is not empty, return 0.-w: if the path exists and write permission is g
原创
博文更新于 2021.06.11 ·
1207 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

iceberg org.apache.iceberg.parquet.Parquet parquet file read

org.apache.iceberg.parquet.Parquet#readpublic static ReadBuilder read(InputFile file) { return new ReadBuilder(file);}
原创
博文更新于 2021.06.03 ·
595 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

iceberg flink 读操作

org.apache.iceberg.flink.data.FlinkParquetReaders.StringReader.readorg.apache.iceberg.parquet.ParquetValueReaders.StructReader.read
原创
博文更新于 2021.06.01 ·
549 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

iceberg flink 写操作

org.apache.iceberg.io.PartitionedFanoutWriter#writepublic void write(T row) throws IOException { // org.apache.flink.table.data.RowData -> org.apache.iceberg.PartitionKey PartitionKey partitionKey = partition(row); // org.apache.iceberg.i
原创
博文更新于 2021.05.27 ·
444 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

iceberg 元数据组织方式

metadata:// org.apache.iceberg.hadoop.HadoopTableOperations#metadataRootprivate Path metadataRoot() { return new Path(location, "metadata");}metadata.json:// org.apache.iceberg.hadoop.HadoopTableOperations#metadataFilePathprivate Path meta
原创
博文更新于 2021.05.26 ·
911 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

iceberg 源码分析之 HadoopTableOperations

原创
博文更新于 2021.05.26 ·
1071 阅读 ·
0 点赞 ·
4 评论 ·
0 收藏

FsDataOutputStream hflush 与 hsync 方法的区别是什么?

原理:client:client --create--> namenode -> block ->packet ->DataStreamer -> datanode --ack--> client --complete--> namenodeorg.apache.hadoop.hdfs.DFSOutputStream#hflushorg.apache.hadoop.hdfs.DFSOutputStream#hsyncorg.apache.ha..
原创
博文更新于 2021.05.25 ·
519 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

HDFS 在写文件的过程中能否 ls 到正在写的文件?

原理:上传本地文件到 HDFS 过程:20G May 25 14:56 xx.tarhdfs dfs -put xx.tar /data/hdfs dfs -ls /data//data/xx.tar._COPYING_通过 java api 写文件:org.apache.hadoop.fs.FileSystem#create 实际上已把元数据写到 editlog 了; -ls 就能看到一个 size = 0 的文件org.apache.hadoop.fs.FSD
原创
博文更新于 2021.05.25 ·
350 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

hadoop distcp 报错: Could not find any valid local directory for s3ablock-xxxx

fs.s3a.buffer.dirdefualt:${hadoop.tmp.dir}/s3adesc:Comma separated list of directories that will be used to buffer file uploads to.此参数在用到org.apache.hadoop.fs.s3a.S3AFileSystem 时使用,在写 s3a 时先在本地的local 存储目录(fs.s3a.buffer.dir)写tmp 的 s3 file block,再 ...
原创
博文更新于 2021.05.24 ·
1391 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

查看 hdfs snapshot counter 值

ssh $(hdfs haadmin -getAllServiceState |grep active |awk -F ':' '{print $1}') "NN_DIR=$(hdfs getconf -confKey 'dfs.namenode.name.dir'); FSIMAGE_NAME=$(ls -t $NN_DIR/current | grep fsimage | grep -v md5 | head -n 1); hdfs oiv -i $NN_DIR/current/$FSIMAGE_NA.
原创
博文更新于 2021.05.22 ·
436 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

java System.out.println 输出带颜色的字符串到 stdout

Unix shellANSI escape codepublic static final String ANSI_RESET = "\u001B[0m";public static final String ANSI_BLACK = "\u001B[30m";public static final String ANSI_RED = "\u001B[31m";public static final String ANSI_GREEN = "\u001B[32m";public static.
原创
博文更新于 2021.05.20 ·
1039 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

java sonar 提示 Add the missing @deprecated Javadoc tag 解决方法

/** * Hello ~. * * @deprecated use {@link #new()} instead. */@Deprecatedpublic void hello() {// ...}
原创
博文更新于 2021.05.19 ·
3610 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

python - 制作简单 ‘词云图‘

import jiebafrom jieba.analyse import extract_tagsfrom scipy.misc import imreadfrom wordcloud import WordCloudimport matplotlib.pyplot as pltdef generater(**kwargs): content_name = kwargs['
原创
博文更新于 2021.05.16 ·
5324 阅读 ·
0 点赞 ·
0 评论 ·
7 收藏

python - 在 DataFrame 中使用正则表达式

1. 正则表达式文档Python正则表达式指南Python爬虫入门七之正则表达式2. exampledf[['室', '厅', '厨', '卫']] = df['户型'].str.extract('(\d+)室(\d+)厅(\d+)厨(\d+)卫', expand=False)df.head(3)
原创
博文更新于 2021.05.15 ·
20977 阅读 ·
14 点赞 ·
0 评论 ·
41 收藏

源码学习:yarn application 状态机

目录RMApp 是 ResourceManager 中用于维护一个 Application 生命周期的数据结构,由 RMAppImpl 实现,该类维护了一个 Application 状态机,记录了一个 Application 可能存在的各个状态 RMAppState 以及导致状态间转换的事件 RMAppEvent。状态迁移图RMAppState public enum RMAppState { // 初始状态 NEW, // RM 接受到 client 的 app sub.
原创
博文更新于 2021.05.15 ·
972 阅读 ·
1 点赞 ·
0 评论 ·
2 收藏

Java - TreeSet 使用时需要重写的三个方法

package Other;public class Person implements Comparable{ private String name; private Integer age; public Person() {} public Person(String name, Integer age) { this.name = name; this.age
原创
博文更新于 2021.05.15 ·
3051 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏
加载更多