bxyz1203
码龄18年
求更新 关注
提问 私信
  • 博客:360,431
    社区:205
    360,636
    总访问量
  • 76
    原创
  • 176
    粉丝
  • 27
    关注
IP属地以运营商信息为准,境内显示到省(区、市),境外显示到国家(地区)
IP 属地:浙江省
加入CSDN时间: 2007-09-24
博客简介:

专注海量数据

博客描述:
欲穷千里目,更上一层楼-阿里巴巴hadoop开发
查看详细资料
个人成就
  • 获得118次点赞
  • 内容获得111次评论
  • 获得33次收藏
  • 博客总排名1,778,954名
创作历程
  • 47篇
    2012年
  • 19篇
    2011年
  • 12篇
    2010年
成就勋章
TA的专栏
  • hadoop2yarn
    5篇
  • hadoop0.19.1
    7篇
  • java
    20篇
  • 并发
    1篇
  • 架构
    7篇
  • 感悟
    8篇
  • 性能
    4篇
  • tools
    3篇

TA关注的专栏 1

TA关注的收藏夹 0

TA关注的社区 1

TA参与的活动 0

创作活动更多

AI 镜像开发实战征文活动

随着人工智能技术的飞速发展,AI 镜像开发逐渐成为技术领域的热点之一。Stable Diffusion 3.5 FP8 作为强大的文生图模型,为开发者提供了更高效的图像生成解决方案。为了推动 AI 镜像开发技术的交流与创新,我们特此发起本次征文活动,诚邀广大开发者分享在 Stable Diffusion 3.5 FP8 文生图方向的实战经验和创新应用 本次征文活动鼓励开发者围绕 Stable Diffusion 3.5 FP8 文生图方向,分享以下方面的内容: 1. 技术实践与优化 - Stable Diffusion 3.5 FP8 模型架构解析与优化技巧 - 文生图生成效果的提升方法与技巧 - 模型部署与加速策略,例如使用 Hugging Face、Diffusers 等工具 - 针对特定场景(例如二次元、写实风)的模型微调与定制化开发 2. 应用场景探索 - Stable Diffusion 3.5 FP8 在不同领域的应用案例分享,例如游戏设计、广告创意、艺术创作等 - 利用 Stable Diffusion 3.5 FP8 实现图像编辑、图像修复、图像增强等功能的探索 - 结合其他 AI 技术(例如 NLP、语音识别)构建更强大的应用 3. 创新应用与思考 - 基于 Stable Diffusion 3.5 FP8 的创新应用场景设计 - AI 镜像开发的未来发展方向的思考与展望 - 对 AI 镜像开发伦理、安全等问题的探讨

28人参与 去参加
  • 最近
  • 文章
  • 专栏
  • 代码仓
  • 资源
  • 收藏
  • 关注/订阅/互动
更多
  • 最近

  • 文章

  • 专栏

  • 代码仓

  • 资源

  • 收藏

  • 关注/订阅/互动

  • 社区

  • 帖子

  • 问答

  • 课程

  • 视频

搜索 取消

win7_Aero主题资源管理器背景更

发布资源 2012.02.20 ·
rar

认识oracle中的sqlnet.ora tnsnames.ora listener.ora三个文件

发布资源 2009.07.24 ·
application/pdf

如果解决测试之痛<特别是单元、集成测试之痛>

【罗马城非朝夕建成,测试体系非一日之功】【概念】说到测试,最主要的是,检测代码是否满足特定的逻辑,检测代码是否满足业务的需求。测试还需要有一些附加特性,如:快速响应、可重复运行、可持续维护等。目前的测试基本可以分为:单元测试:检测代码片段的测试,基本是以代码结构为衡量,属于百盒测试。集成测试:集成各个系统的各个模块,各个代码片段的,主要以
原创
博文更新于 2012.03.30 ·
7532 阅读 ·
5 点赞 ·
8 评论 ·
22 收藏

程序员作图软件-推荐

类图:IntelliJ IDEA生成的时序图:AmaterasUML画的其他结构图都是office visio画的编辑图片,大小等用 附件的 画图
原创
博文更新于 2011.12.06 ·
2964 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

显示eclipse的启动时间

发布资源 2012.03.12 ·
rar

重构那点事情

发布资源 2011.10.30 ·
pptx

博客迁移

在csdn安家已经3年多,最近想自己建设一个网站所以就弄了一个:fengshenwu.com/blog。还希望大家多多捧场我的个人博客啊。此个人站点会慢慢发展。。。不积跬步无以至千里,希望我能坚持下去写博客。这篇博客之前的所有博客都是从我以前的csdn博客站点导入的,所以很多存在格式问题,后面有时间再慢慢修改下。。。
原创
博文更新于 2012.11.16 ·
2914 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

2012杭州QCon全球软件开发大会所见所闻所悟

一、概述每次听完一些技术分享,都会写一篇分享,一方面也是我自己对论坛的一些总结,另一方面也是想把我自己的一些感受分享出来,上一篇是《2012年阿里技术嘉年华所见所感所悟》。这真是一个美好的时代,我们能从互联网上学习到这么多好的东西,也能参与这么多好的会议,这次特别感谢InfoQ。我这张票是部门给的,也特别感谢我的领导们。这三天我基本都在听,听了大约21场分享,感受还是比较多的,以下我主要就
原创
博文更新于 2012.11.04 ·
4543 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

yarn(hadoop2)框架的一些软件设计模式

一、概述我们都知道,yarn版本的hadoop无论是从架构上面还是软件设计的层面上面都比原始的hadoop版本有较大的改进。在架构方面,我们认为yarn模式是新一代的框架,这个在官方等丛多的资料中说明得很详细了。在软件设计方面,我认为主要有以下的一些大的方面的改进:服务生命周期管理模式、事件驱动模式、状态驱动模式。这几个模式都写在hadoop-yarn-common中,接下来,我将详细说明这些
原创
博文更新于 2012.11.03 ·
11120 阅读 ·
5 点赞 ·
0 评论 ·
13 收藏

编译hadoop2.0(0.23.0)及运行的一些问题

svn co http://svn.apache.org/repos/asf/hadoop/common/tags/release-2.0.0-alpha xxxlinux: 参考$HADOOP_HOME/BUILDING.txt 及 $HADOOP_HOME/hadoop-mapreduce-project/INSTALL(ps,我开始没有注意这两个文件,所以我以下都是一步一
原创
博文更新于 2012.10.29 ·
8777 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

hadoop相关的一些技巧

分布式系统比普通程序开发有一些特别的难度,最主要的就是环境问题。本博客将记录怎么去解决这些问题,最主要的是一些脚本。后期会连续更新,目前最主要的技巧有:ssh打通:hadoop在部署的时候,各个机器之间肯定要打通,我们不可能手工去敲每一个命令。所以最好有一个脚本。https://github.com/lwwcl1314/apollo/blob/master/distrubutescri
原创
博文更新于 2012.10.28 ·
4479 阅读 ·
0 点赞 ·
0 评论 ·
2 收藏

谈谈hadoop日志限制的问题

原创
博文更新于 2012.10.26 ·
6532 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

hadoop 0.19.1 rpc代码分析

一、概述hadoop中mr类图大致如下所示,其中只是简单列出了一些主要的功能模块。JobConf、JobTracker、TaskTracker、RPC Server等组件。在图中,我用红色框框框出了一些基本的类。此图基本反映了MR的类图结构。一个简单的job在hadoop上面跑起来,基本可以分为10个步骤。如下图所示:hadoop都是用rpc框架来机器的
原创
博文更新于 2012.10.23 ·
4266 阅读 ·
1 点赞 ·
7 评论 ·
0 收藏

hadoop2包结构及包功能大致介绍

一、概述hadoop2的设计细想比hadoop1进步了很多,毕竟hadoop1是几年前的东西了。软件设计的理论在这几年中发展很快,出现了很多的软件设计理论 如:领域驱动模型、事件驱动模型、状生命周期管理等,也出现了很多的开源的解决方案,当然开源的方案很多都是起源apache社区。在hadoop2中,采取了maven的工程管理结构,把以前的单一工程换成了多工程结构模式,现在估计有45个(po
原创
博文更新于 2012.10.22 ·
8404 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏

hadoop mr类图大纲

分析一框架,莫过于类图,近日,亲自画此类图。高清图:http://img1.ph.126.net/pngTQtip2YZ5JR_yqdNSmQ==/6597918589632662351.jpg主要分为:client、JobTracker、TaskTracker、TaskRunner、Clild。协调有的是通过RPC调用,有的是通过Shell命令调用。阻塞通过要
原创
博文更新于 2012.10.22 ·
4029 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

hadoop日志简单分析

一、概述本文基于0.19.1分析得出,有一些是alibaba hadoop优化的部分。本文不涉及jobtracker及nodename元数据的部分,本文主要讲述一个任务在计算阶段大致产生的一些日志,及日志的一些问题。二、日志简单介绍当所有的守护进程都起来后(为了简单起见,我们用的是伪分布模式,是由一个机器搭建的),大致的目录结构如下:[dragon.caol@hd19-vm1 lo
原创
博文更新于 2012.10.22 ·
5293 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

hadoop mr的一些文件归属(包括临时文件的存储情况)

一、概述一个计算的流程如下图所示,对于一个简单的wordcount的计算中,总共要经历哪些文件呢?本文将详细探讨这个话题。文章可能会重新编辑,如果想浏览最新内容请访问原创博客:http://blog.csdn.net/bxyz1203/article/details/8057810。由于作者个人知识面有限,如果描述有错误或者遗留之处敬请谅解,再欢迎指出,我们共同进步。本文分析的是0.19.
原创
博文更新于 2012.10.22 ·
11184 阅读 ·
1 点赞 ·
0 评论 ·
3 收藏

hadoop mr的数据流程交互简单描述

一、概述文章可能会重新编辑,如果想浏览最新内容请访问原创博客:http://blog.csdn.net/bxyz1203/article/details/8074248。由于作者个人知识面有限,如果描述有错误或者遗留之处敬请谅解,再欢迎指出,我们共同进步。二、计算流程MR计算框架发展到1.0.3左右,计算框架没有发展大的变化。在《hadoop  The Definitive Guide
原创
博文更新于 2012.10.22 ·
8557 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

HADOOP2.0,Exception java.lang.NoClassDefFoundError: org/apache/hadoop/mapreduce/v2/app/MRAppMaster

一、问题运行yarn的MR程序,发现出现问题,报错:Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/mapreduce/v2/app/MRAppMasterCaused by: java.lang.ClassNotFoundException: org.apache.hado
原创
博文更新于 2012.10.22 ·
23457 阅读 ·
0 点赞 ·
0 评论 ·
3 收藏

ubuntu使用心得

几个星期以前,我把公司电脑格式化了,换成了ubuntu。(ps:装ubuntu,可以直接到官网下载文件,推荐直接用u盘安装)。接下来说说这两个星期干的一些事情:中文输入法这个真的不是很方便,他自带了一个。我目前还是用这个,后期有时间可以考虑换掉。企鹅版我也试用了下,也不行。界面的效果是没得说的,可以到中文站社区去看看帖子,不过我得说下,  天天对着白色,容易伤眼睛,建议大家换成 保
原创
博文更新于 2012.10.18 ·
2246 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏
加载更多