Path

明确算力决策要解决的问题，定义算力决策的目标是一切讨论的基础。

工程架构设计指导原则

事件流程：1、7月11日上午11:15，通过freedom发布dump-ecpm、sn-ecpm、emerge到smoke环境，由于本次dump-ecpm修改了索引结构，因此通过freedom发布sn-ecpm时应用无法启动，原因是索引结构不兼容updated无法正确追消息，也就无法自动拉起master进程。此时只能等待dump模块build索引完成后切换索引。 2、dump在build过程

广告业务机器资源成本优化思路及建议

近期在与PM共建的过程中听到了PM同学对业务现状的一些描述，很有感触。PM同学说：“外家中只有20%的商家能活过半年”、“有些广告主把投广告当作给平台交保护费”。这些描述引发了我对广告业务本质、广告与推荐之间的关系的一些思考。为此，我建立了一个博弈论模型，做出了如下几个基本假设（不一定是真实情况，只是为了进行理论定性分析）：（1）商家无限竞争：各个商家之间进行“无限竞争”，即在达到某种平衡态时，一定会有一方出于自身利益打破平衡（2）平台完全逐利：广告业务平台是完全逐利的，即一切以提高广告收入为目的

一 Lambda架构与Kappa架构本章节内容大量摘自：https://docherish.com/post/da-shu-ju-chang-yong-de-jia-gou-lambda-he-kappa/1.1 Lambda架构Lambda架构基本介绍：Lambda架构最早是由storm的创始人，Nathan Marz进行提出并描述了我们目前所了解的lambda架构。Lambda架构先入为主，已经适用在了绝大部分的公司里面了。绝大部分公司从刚开始发展大数据技术为主，到现在都是采用的La

一 开发&运行框架二 开发示例相关TensorFlow官方文档C++自定义算子使用方法：https://www.tensorflow.org/guide/create_op?hl=zh-cn保存TensorFlow图文件：https://www.tensorflow.org/api_docs/python/tf/Graph2.1 组图脚本import osimport sysimport tensorflow as tf​CURRENTPATH = os.path.split(

笔者在工作经历中曾多次遇到关于技术选型的问题，而每一次的技术选型都无一例外的纠结、反复。经常出现的现象是，在项目推进的过程中多次反复修改技术选型，客观上造成了效率的降低，而当最终选定某一个选型时，又觉得这个结果似乎是显而易见的。为了避免反复纠结造成效率降低，笔者觉得有必要总结下选型中常见的思考方式，方便以后参考。每一次技术选型都是在特定的需求场景下，结合各种各样的主观、客观因素，最初一个最优的选择...

1 召回阶段度量的选择广告和推荐最大的区别就在于广告引入了广告主出价的维度，这让数据具有很强的实时性，给工程技术带来了很大的挑战。在全库检索的定向召回阶段，是否要将广告doc的出价也考虑进去是一个关键问题。若不考虑出价，本质上召回阶段是按照相关性召回（也可以简单地理解为ctr），若考虑price则对应的是按照ecpm进行召回。特别的，在cpm广告场景中ecpm等于出价。 在计算广告中，平台起...

一 背景精准广告matching阶段查全率是影响业务效果的重要因素，matching结果作为广告rank的前置环节，是rank效果的天花板。随着业务发展，算法对matching环节查全率的要求越来越高，传统的“user->tag、tag->ad”两段式检索已经限制了业务的发展，我们的技术体系面临新的挑战——全库matching。 全库matching面临的主要挑战来自于计算量的大...