ICE 的回调 使用分布式计算中间件ICE到现在已经有一年多了，在这一年里里面对ICE的理解、应用比较熟悉。 使用ICE写分布式软件，确实是很方便：ICE比较稳定、可靠，调用返回速度低延迟，使用简单，学习曲线不是很…

airflow Operators: 基本可以理解为一个抽象化的task, Operator加上必要的运行时上下文就是一个task. 有三类Operator: Sensor(传感监控器), 监控一个事件的发生.Trigger(或者叫做Remote Excution), 执行某个远端动作, (我在代码中没有找到这个类别)Data transfer(数据转换器…

本文谈到的技术点，表达可能不太严谨，主要是说明流程。 本文主要介绍一下ice的流程 ice交互难点 ice交互难得原因，是Nat技术所导致，为了克服这个，有了stun、turn方法， 图中 Nat规则 不太严谨，…

Airflow 核心概念 DAGs：即有向无环图(Directed Acyclic Graph)，将所有需要运行的tasks按照依赖关系组织起来，描述的是所有tasks执行顺序。Operators：可以简单理解为一个class，描述了DAG中某个的task具体要做的事。其中…

注：本文内容以RFC 5245文档记载内容为主，中文翻译有不当之处请见谅。 概述 ICE是Interactive Connectivity Establishment的简称，一般的定义是： ICE STUN TURN 协商机制 协商路径 实时音视频通信的场景中，会话双方可…

CSDN话题挑战赛第2期 参赛话题：学习笔记 项目中解决的问题 离线数仓中使用airflow调度hive脚本跑批任务 视频教程上整理知识点 学习视频：https://www.bilibili.com/video/BV1V7411K7Gy?p40&vd_sourceb002288652bae647c598ddf77f79a7b8 Airflow基本…

1. ICE的一些背景 ICE（the Internet Communications Engine，因特网通讯引擎），http://www.zeroc.com/ice.html ICE 是ZeroC的主要产品, 是一个object-oriented toolkit,用来帮助我们构建分布式应用程序，使我们专注于…

Airflow 1 前言2 概述2.1 特性2.2 与OOZIE比较 3 概念3.1核心概念3.1.1 DAG(Directed Acyclic Graph有向无环图)3.1.2 作用域(scope)3.1.3 默认参数(Default Arguments)3.1.4 执行器(Operators)3.1.5 任务(task) 3.2 附加功能3.2.1 Hooks3.2.2 Pools3.2.3 Connections3.2.4 Xco…