爱豆吧!
open-menu closeme
Home
About
🌐
English Português
  • 【hadoop代码笔记】hadoop作业提交之TaskTracker获取Task

    calendar Jan 18, 2014 · 13 min read · hadoop java mapreduce source  ·
    Share on: twitter facebook linkedin copy

    一、概要描述 在上上一篇博文和上一篇博文中 分别描述了jobTracker和其服务(功能)模块初始化完成后,接收JobClient提交的作业,并进行初始化。本文着重描 述,JobTracker如何选择作业的Task分发到TaskTracker。本文只是描述一个TaskTracker如何从JobTracker获取 Task任务。Task任务在TaskTracker如何执行将在后面博文中描述。 二、 流程描述 TaskTracker在run中调用offerService()方法一直死循环的去连接Jobtracker,先Jobtracker发送心跳,发送自身状态,并从Jobtracker获取任务指令来执行。 在JobTracker …


    Read More
  • 【hadoop代码笔记】hadoop作业提交之JobTracker接收作业提交

    calendar Jan 16, 2014 · 3 min read · hadoop java mapreduce source  ·
    Share on: twitter facebook linkedin copy

    一、概要描述 在上一篇博文中主要描述了JobTracker接收作业的几个服务(或功能)模块的初始化过程。本节将介绍这些服务(或功能)是如何接收到提交的job。本来作业的初始化也可以在本节内描述,但是涉及到JobInProgress的初始化过程放在一张图上太拥挤,就分开到下一篇文章中描述。 二、 流程描述 JobClient通过RPC的方式向JobTracker提交作业; 调用JobTracker的submitJob方法。该方法是JobTracker向外提供的供调用的提交作业的接口。 submit方法中调用JobTracker的addJob方法。 在addJob方法中会把作业加入到集合中供调度,并会触发注册 …


    Read More

Recent Posts

  • 云原生工程师入坑AI深度学习系列(二):给昌子解释DeepSeek的模型蒸馏
  • 今天起,我就成了您
  • 云原生工程师入坑AI深度学习系列(一):从线性回归入门神经网络
  • 豆哥国庆环太湖Day5:西山岛(苏州-太湖-杭州)
  • 豆哥国庆环太湖Day4:渔洋山(常州-太湖-苏州)
  • 豆哥国庆环太湖Day3:恐龙园(常州-常州-常州)
  • 豆哥国庆环太湖Day2:三国城(宜兴-无锡-常州)
  • 豆哥国庆环太湖Day1:遇太湖(杭州-湖州-宜兴)

Categories

ISTIO 45 随笔 23 HADOOP 12 ISTIO权威指南 11 演讲 9 数据库 7 豆哥 7 发表 6 机器学习 5 KUBECON 4 图书 4 GOLANG 3 ISTIOCON 3 KUBERNETES 3
All Categories
AI2 GOLANG3 HADOOP12 ISTIO45 ISTIOCON3 ISTIO权威指南11 JVM1 KARMADA1 KUBECON4 KUBERNETES3 SERVICEMESHCON1 云原生2 发表6 图书4 并发3 数据库7 机器学习5 演讲9 父亲1 神经网络2 豆哥7 随笔23
[A~Z][0~9]

Tags

ISTIO 28 演讲 23 KUBECON 20 JAVA 17 访问日志 16 RESPONSEFLAGS 15 MAPREDUCE 12 随笔 12 HADOOP 11 ISTIO权威指南 11 图书 11 豆哥 7 云原生服务网格ISTIO原理实践架构与源码解析 6 太湖 5
All Tags
123061 AI2 AQS1 AUTHORIZATIONPOLICY1 CLASSFICATION1 DC1 DEEPSEEK1 DI1 DOUDOU3 DPE1 ENGLISH1 EXECUTOR2 FI1 G201 GOLANG4 GRE1 HADOOP11 INFOQ3 ISTIO28 ISTIOCON3 ISTIO权威指南11 JAPANESE1 JAVA17 JVM1 K-MEDOIDS1 KARMADA1 KUBECON20 KUBERNETES3 LINEAR-REGRESSION1 MAPREDUCE12 NC1 NR1 ORACLE3 PILOT2 RESPONSEFLAGS15 RL2 RPC1 SERVICEENTRY1 SERVICEMESHCON1 SOURCE2 SPRING-CLOUD1 SPRINGCLOUD1 UC1 UF1 UH1 UPE1 URX1 UT1 にほんご1 事务1 云原生2 云原生服务网格ISTIO原理实践架构与源码解析6 信2 关于1 军训2 分类1 发表1 国际米兰1 图书11 垃圾回收1 多集群2 太湖5 安全2 实践1 并发1 微服务1 执行计划1 数据库1 新冠1 旅游5 最佳实践3 服务网格3 机器学习2 模型蒸馏1 深度学习2 演讲23 父亲1 祖母2 神经网络2 程序员3 索引3 聚类1 表连接1 西安1 访问日志16 调用链2 豆哥7 足球1 铁路1 随笔12 韧性1
[A~Z][0~9]
浙ICP备18050493号-1 浙公网安备 33010802006262号

Copyright  浙ICP备18050493号-1 浙公网安备 33010802006262号. All Rights Reserved

to-top