@超神雷鸣 ，发现代码里面多进程之间仍然会出现资源竞争的情况，可以通过队列解决。谨慎使用呀😂，我会尽快抽时间做修改的，还有新增效率更高的multiprocessing+ai ohttp的组合
让你的爬虫效率提升40倍 python 多进程+协程 爬虫多进程 关于多进程爬虫和多进程方面的知识可以参考崔庆才的博客和python文档 协程 关于协程的介绍，强烈推荐大家看看这份指南 由于GIL的原因，python解释器中总是只有...
@纵春水东流 ，抱歉呀，现在再回头看，这个博客问题挺多的😂，我会尽快抽时间重写一下
基于keras的文本分类1. 文本预处理 Step1 Tokenizer 文本标记实用类该类允许使用两种方法向量化一个文本语料库： 将每个文本转化为一个整数序列（每个整数都是词典中标记的索引）； 或...
23 内容架构 日志收集、内容发布、机器学习、信息流服务、监控。 日志收集，是所有排序训练的数据来源，要收集的最核心数据就是用用户在信息流上产生的行为，用于机器学习更新排序模...
Gunicorn是一个unix上被广泛使用的高性能的Python WSGI UNIX HTTP Server。和大多数的web框架兼容，并具有实现简单，轻量级，高性能等特点。...
今天刷一道算法题的时候用到了list_a == list_b的判断，==和is大家都已经是耳熟能详了，前者是判断值是否相等，后者是判断引用是否相等，在用==操作符进行判断的时...
前言 我们都知道rasa是用来做任务型对话的，但有时候不在自定义意图里面就比较难处理。我们相到的办法就是在policies里面配置FallbackPolicy，当nlu_t...
名字的由来 Siamese和Chinese有点像。Siam是古时候泰国的称呼，中文译作暹罗。Siamese也就是“暹罗”人或“泰国”人。Siamese在英语中是“孪生”、“连...
1. 项目简介 query下拉推荐或query自动补全，是在搜索引擎场景中广泛应用的一个功能；当搜索栏中有任意输入时，搜索栏下方立刻根据输入推荐/提示出以输入为前缀的相关词，...
这篇博文主要由以下三部分组成1. DenseNet和ResNet的对比ResNet的出现，使我们能够训练数更深的网络，ResNet的核心是通过采用Skip-Connectio...
这段时间以来，我发现大家都把Github挂在嘴上，但是不少人其实并不会用Github。具体怎么说呢，比方说实现某些简单的功能的时候，自己可能需要花2-3小时去实现，那么大家愿...
介绍 Low bits压缩再用于CNN推理当属该下的推理优化技术主流。 将本是Float32类型的乘法或乘加计算使用INT8类型来做可一次批量（SIMD指令集）执行更多的计算...
假设有个样本为，其中为第个样本的特征，为第个样本的标签。logistic regression的hypothesis为：从上式的logistic函数可知的取值在之间，对于二分...
今天尝试总结一下 tf.data 这个API的一些用法吧。之所以会用到这个API，是因为需要处理的数据量很大，而且数据均是分布式的存储在多台服务器上，所以没有办法采用传统的喂...
