Spark+AI业界动态资讯
关注
分享
扫一扫
文章平均质量分 64
段智华
智华专注于GenAI/LLM大模型技术的研究，参与了7本书籍的写作，拥有5项申请发明专利，10多项软著，以及4篇IEEE国际会议论文。参与Gavin大咖主编，北京航空航天大学出版社2024年5月最新出版的2本图书著作：《Transformer&ChatGpt解密：原理、源码及案例》、《Transformer& Rasa 解密 原理、 源码及案例》，共撰写1996篇原创博客文章，涵盖Transformer、GPT-4、ChatGPT、Llama2/3、Langchain、Mistral、Mixtral、Rasa、AI机器学习、Spark大数据等主题。博客文章的总阅读量为323万次。
展开
-
NLP&ChatGPT&LLMs技术、源码、案例实战210课
6， ChatGPT技术和OpenAI API的基础应用和进阶应用：学习了ChatGPT技术和OpenAI API的基础和进阶应用，如大模型概述、API接口概述、向量检索、文本生成、嵌入式向量检索实现问答系统、使用LangChain等，可以在不同的场景中灵活应用ChatGPT技术和OpenAI API解决问题。2， 通过近21小时学习导师从自己阅读的超过3000篇NLP论文中的精选出的10篇质量最高的论文的架构、算法、实现等讲解，对新一代的NLP技术了然于胸，极大的加速NLP科研及项目开发进度。原创 2023-05-31 19:45:00 · 1765 阅读 · 0 评论 -
NLP&ChatGPT&LLMs技术、源码、案例实战210课
6， ChatGPT技术和OpenAI API的基础应用和进阶应用：学习了ChatGPT技术和OpenAI API的基础和进阶应用，如大模型概述、API接口概述、向量检索、文本生成、嵌入式向量检索实现问答系统、使用LangChain等，可以在不同的场景中灵活应用ChatGPT技术和OpenAI API解决问题。2， 通过近21小时学习导师从自己阅读的超过3000篇NLP论文中的精选出的10篇质量最高的论文的架构、算法、实现等讲解，对新一代的NLP技术了然于胸，极大的加速NLP科研及项目开发进度。原创 2023-05-31 19:30:00 · 1041 阅读 · 0 评论 -
ChatGPT 拓展资料：论文阅读A Comprehensive Survey on Pretrained Foundation Models: A History from BERT to Chat
预训练的基础模型，如BERT、GPT-3、MAE、DALLE-E和ChatGPT，在大规模数据上进行训练，为广泛的下游应用程序提供合理的参数初始化。与以前应用卷积和递归模块进行特征提取的方法不同，生成预训练（GPT）方法应用Transformer作为特征提取器，并在具有自回归范式的大型数据集上进行训练。最近，ChatGPT在大型语言模型上取得了可喜的成功，它应用了一种零镜头或很少显示提示的自回归语言模型。然后，我们讨论了其他数据模式的其他高级PFM，以及考虑数据质量和数量的统一PFM。原创 2023-03-22 12:23:23 · 1242 阅读 · 1 评论 -
任何人都可以学习Rasa之优秀Rasa学习资源推荐
欢迎同学们报名Gavin老师的Rasa系列课程，任何人都可以学习Rasa之优秀Rasa学习资源推荐：1.NLP on Transformers高手之路137课2 .Rasa 3.X 智能对话机器人案例开发硬核实战高手之路 （7大项目Expert版本）3. Rasa 3.x源码高手之路：系统架构、内核算法、源码实现详解4.星空NLP对话机器人论文班：NLP领域10篇最高质量的对话机器人经典论文解密5. Rasa 3.x 源码高手之路：业务对话机器人Rasa 3.x Internals内幕详解6.Rasa 3原创 2023-02-12 09:57:10 · 477 阅读 · 0 评论 -
Rasa 3.x 学习系列-Rasa [3.4.1] - 2023-01-19新版本发布
Rasa 3.x 学习系列-Rasa [3.4.1] - 2023-01-19新版本发布。原创 2023-01-23 21:20:39 · 337 阅读 · 0 评论 -
2022年「博客之星」参赛博主：段智华
我正在参加年度博客之星评选，请大家帮我投票打分，您的每一分都是对我的支持与鼓励。原创 2022-12-28 17:07:32 · 335 阅读 · 0 评论 -
NLP+对话机器人技术峰会
基于硅谷最新一代NLP+对话机器人技术提取而成，NLP顶级专家提供内容内容交付； 一站式打通NLP企业级实战、技术服务及学术研究的核心NLP及对话机器人技术内核；不仅仅是企业级及学术强度的技术分享，更是全程源码及综合性案例驱动实战；所有的内容均基于Google、Rasa、Pearson、Amazon、Facebook等的企业级核心技术萃取而成；会后提供3个月的峰会技术答疑服务及1个小时的免费企业技术咨询服务。以论文、源码、项目三大维度立体分享硅谷企业级NLP+对话机器人产品级前沿技术，正是该峰会精髓之所在！原创 2022-10-10 20:03:11 · 514 阅读 · 1 评论 -
上榜 首批获得实体证书的博客专家
7月创作者之夜优秀创作者获奖名单已公布，包括首批获得实体证书的博客专家，恭喜您上榜。原创 2022-07-20 15:42:32 · 519 阅读 · 0 评论 -
业界前沿技术：从零开始学视觉Transformer-学习笔记
业界前沿技术：从零开始学视觉Transformer-学习笔记目录 Transformer 整体架构Patch EmbeddingAdd Norm （BN and LN）Pre-Norm vs Post-NormClassification Token vs AvgPoolPosition EncodingVision Transformer 论文Vision Transformer 代码复现Transformer 整体架构Patch EmbeddingSelf Attention：Scale原创 2022-05-20 16:04:52 · 380 阅读 · 0 评论 -
Transformer课程 业务对话机器人Rasa 3.x Command Line Interface
本文讲解Rasa命令行界面的学习。Rasa命令行界面使您能够轻松记住用于Rasa常见任务的命令，Rasa命令的语法格式以及传递的参数说明。原创 2021-12-29 15:49:55 · 720 阅读 · 0 评论 -
Transformer课程发布 业务对话机器人Rasa核心算法DIET及TED论文详解
对一个智能业务对话系统而言，语言理解NLU及Policies是其系统内核的两大基石。Rasa团队发布的最重磅级的两篇论文DIET: Lightweight Language Understanding for Dialogue Systems及Dialogue Transformers是其基于在业界落地场景的多年探索而总结出来的解决NLU和Policies最核心的成果结晶原创 2021-12-25 08:57:14 · 1912 阅读 · 0 评论 -
Transformer课程发布 业务对话机器人Rasa 3.x Internals及Rasa框架定制实战
以Rasa 3.x提出的全新一代Graph Computational Backend为核心，从Rasa版本迭代中的Milestones出发来完全解密“One Graph to Rule Them All”背后的技术衍化过程及根本原因，然后以GraphComponent为核心解密其架构内幕机制和运行流程，并抽丝剥茧的剖析自定义Rasa Open Source平台的接口实现、组件源码、组件注册及使用的每一个步骤，最后用一个完整的案例来做示例原创 2021-12-25 08:48:37 · 811 阅读 · 0 评论 -
自然语言处理NLP星空智能对话机器人系列:智能星空对话机器人10月22、23、24日的演示安排
自然语言处理NLP星空智能对话机器人系列:智能星空对话机器人10月22、23、24日的演示安排原创 2021-10-19 18:58:33 · 199 阅读 · 0 评论 -
自然语言处理NLP星空智能对话机器人系列：第4、5、6、7次星空智能对话机器人Zoom线上演示安排
自然语言处理NLP星空智能对话机器人系列：第4、5、6、7次星空智能对话机器人Zoom线上演示安排月是故乡明、祝福大家和家人中秋节一切喜悦圆满由于过节等因素，需要把9月19号的在第4次星空智能对话机器人在国内的演示顺延到9月26日晚上9-10:30第五次放在原定的9月29日10月8日进行第六次演示10月13日进行第七次演示这些演示都会围绕人工智能领域中最有价值的推荐系统和知识图谱展开有任何问题可以随时在群中@GavinNLP之前zoom演示部分内容星空智原创 2021-09-19 17:20:56 · 772 阅读 · 0 评论 -
自然语言处理NLP系列：StarSpace: Embed All The Things
自然语言处理NLP系列：StarSpace: Embed All The Things《StarSpace: Embed All The Things》论文提出了一种通用的神经嵌入系统StarSpace，可以解决多种问题的模型：标签任务（如文本分类）、排名任务（如信息检索/web搜索）、基于协作的过滤或基于内容的推荐，嵌入多关系图，学习单词、句子或文档水平嵌入。在每种情况下，该模型都通过嵌入由离散特征组成的实体并相互比较来工作——学习依赖于任务的相似性。一些任务的实证结果显示与现有方法相比，星际空间具有很原创 2021-09-02 21:50:01 · 570 阅读 · 0 评论 -
自然语言处理NLP系列：第二次星空智能对话机器人Zoom线上演示安排
第二次星空智能对话机器人Zoom线上演示安排：时间：北京时间2021年9月1号晚上9-10:30地点：Zoom (会议前一天会在群中发布会议链接，大家可以通过https://zoom.us/download安装下载)内容：由现场参会人员提供输入内容来决定和星空智能对话机器人的交互对话。具体来说1，15分钟的星空智能对话机器人技术内核分享2，60分钟集体参与的星空对话机器人现场演示3，15分钟的总结和答疑。第三次演示于北京时间9月9号晚上9-10:30进行，聚焦于对话机器人中的知识图谱，展示星空原创 2021-08-28 21:28:51 · 1118 阅读 · 2 评论 -
新课程使用矩阵的方式编写人工智能框架专题发布，欢迎读者学习！
新课程使用矩阵的方式编写人工智能框架专题发布，欢迎读者学习！https://edu.youkuaiyun.com/course/detail/31375Spark 3.0.0 Application 提交集群原理和源码详解https://edu.youkuaiyun.com/course/detail/31011Spark 3.0.0集群启动原理和源码详解https://edu.youkuaiyun.com/course/detail/30856Spark 3.0.0 Driver 启动内幕https://edu.原创 2021-04-16 20:01:49 · 227 阅读 · 0 评论 -
计算机视觉系列-业界动态-AI快车道-PaddleOCR最新进展
计算机视觉系列-业界动态-AI快车道-PaddleOCR最新进展原创 2021-04-13 20:03:08 · 246 阅读 · 0 评论 -
智华入围2020年度中国博客之星Top 100，感谢各位朋友支持！
智华已成功参与优快云 年度「博客之星」 Top 200评选活动， 投票地址：https://t.csdnimg.cn/6qvZ 智华排第52位，请各位朋友投票支持！原创 2021-01-11 19:43:57 · 314 阅读 · 0 评论 -
2020年重磅喜讯！热烈祝贺王家林大咖人工智能及大数据领域经典著作《Apache Spark+AI全息代码解密》清华大学出版社发行上市!
2020年重磅喜讯！热烈祝贺王家林大咖人工智能及大数据领域经典著作《Apache Spark+AI全息代码解密》清华大学出版社发行上市!目录全息代码解密编辑推荐内容简介作者简介本书目录前言新书链接全息代码解密Apache Spark+AI全息代码解密（京东套装共2册）你需要的Apache Spark和AI技能都在这里！全程案例驱动无痛学习，动手创造自己AI框架，解密Alluxio, 抽丝剥茧学习Spark内核所有关键源码及实践优化的一切秘密https://item.jd.com/1302908原创 2020-12-12 09:52:10 · 1420 阅读 · 8 评论 -
新课程盘古人工智能框架开发专题发布，智华欢迎读者学习！
新课程盘古人工智能框架开发专题发布，智华欢迎读者学习！盘古人工智能框架开发专题系列新课程https://edu.youkuaiyun.com/course/detail/31166 通过图文并茂、深入浅出的讲解，将带领读者一行一行地编写代码，自己动手实现人工智能深度学习框架中的多个算法，包括多层次神经网络、前向传播算法、反向传播算法、损失度的计算及可视化，自适应学习和特征归一化优化等，盘古新课已发布，欢迎读者共同学习！Spark 3.0.0 Application 提交集群原理和源码详解http原创 2020-11-28 20:19:56 · 547 阅读 · 0 评论 -
智华系列新课程发布！盘古人工智能框架开发专题系列新课程正在讲解中，欢迎读者学习！
智华系列新课程发布！Spark 3.0.0 Application 提交集群原理和源码详解，欢迎读者学习！盘古人工智能框架开发专题系列新课程，智华正在备课讲解中，通过图文并茂、深入浅出的讲解，将带领读者一行一行地编写代码，自己动手实现人工智能深度学习框架中的多个算法，包括多层次神经网络、前向传播算法、反向传播算法、损失度的计算及可视化，自适应学习和特征归一化优化等，敬请读者关注智华盘古新课进展（https://edu.youkuaiyun.com/course/detail/31166），共同学习！Spark 3.原创 2020-11-07 10:25:40 · 427 阅读 · 0 评论 -
2020年重磅喜讯！热烈祝贺王家林大咖人工智能领域经典著作《企业级AI技术内幕：深度学习框架开发+机器学习案例实战+Alluxio解密》 清华大学出版社发行上市!
2020年重磅喜讯！热烈祝贺王家林大咖人工智能领域经典著作《企业级AI技术内幕：深度学习框架开发+机器学习案例实战+Alluxio解密》 清华大学出版社发行上市!目录大咖心声新书图片内容简介作者简介目录前言/序言新书案例案例一：自研盘古人工智能框架案例二：基于Pytorch的自然语言处理模型(BERT)的应用案例案例三：人力资源主管正确评估新招聘员工薪水的案例案例四： 基于Alluxio+Pytorch的深度学习案例案例五：Spark+AI实战案例新书网购链接新书资讯大咖心声数据象征空间AI代理时间原创 2020-10-31 08:54:56 · 2610 阅读 · 2 评论 -
Viterbi算法实战案例（天气变化、词性预测）
Viterbi算法实战案例（天气预测、词性预测）人类活动与天气的预测 单词词性的预测 Viterbi算法图解笔记人类活动与天气的预测案例Viterbi.java的代码：package com.hankcs.book.ch01;/** * 维特比算法 * @author hankcs */public class Viterbi{ /** ...原创 2020-03-21 11:43:58 · 1924 阅读 · 0 评论 -
命名实体识别NER探索(4) 通过scikit-learn、pytorch实现HMM 及CRF模型
系列文章目录 命名实体识别NER探索（1） https://duanzhihua.blog.youkuaiyun.com/article/details/108338970 命名实体识别NER探索（2） https://duanzhihua.blog.youkuaiyun.com/article/details/108391645 命名实体识别NER探索(3)-Bi-LSTM+CRF模型 https://duanzhihua.blog.youkuaiyun.com/article/details/108392532 Vi原创 2020-09-17 19:40:12 · 2851 阅读 · 1 评论 -
命名实体识别NER探索（2）
系列文章目录 命名实体识别NER探索（1） https://duanzhihua.blog.youkuaiyun.com/article/details/108338970文章目录系列文章目录前言编写编码转换、特征拼接函数程序运行结果简化版的自动标注构建一个命名实体识别词典原始数据集自动标注总结前言在NER系列第一篇命名实体识别NER探索（1）中讲解了数据的采集及清洗，自动标注将文本转化为深度学习的格式。本文将文本转换为编码，并且将数据进行各种形式的拼接，进行数据增强。编写编码转换、特征拼接函数原创 2020-09-03 20:13:25 · 747 阅读 · 0 评论 -
命名实体识别NER探索（1）
命名实体识别NER探索命名实体识别（Named-entity recognition ,NER)（也称为实体识别、实体分块和实体提取）是信息提取的一个子任务，旨在将非结构化文本中提到的命名实体定位并分类为预定义的类别，例如人名、组织、地名、医疗名称、时间表达式、数量，货币价值、百分比等。目录 Tensorflow 1.x 虚拟环境部署Tensorflow 1.x 虚拟环境部署新建虚拟环境E:\>python -m venv 2020_vms_tensorflow_1激活虚拟环境E:\原创 2020-09-03 19:24:44 · 1742 阅读 · 0 评论 -
命名实体识别NER探索(5) Bert+BiLSTM+CRF模型实战应用
系列文章目录 命名实体识别NER探索（1） https://duanzhihua.blog.youkuaiyun.com/article/details/108338970 命名实体识别NER探索（2） https://duanzhihua.blog.youkuaiyun.com/article/details/108391645 命名实体识别NER探索(3)-Bi-LSTM+CRF模型 https://duanzhihua.blog.youkuaiyun.com/article/details/108392532 命名原创 2020-10-23 21:23:03 · 7827 阅读 · 11 评论 -
免费系列新课程发布！Spark 3.0.0集群启动原理和源码详解，欢迎读者学习！
免费新课程发布！欢迎读者学习！Spark 3.0.0集群启动原理和源码详解https://edu.youkuaiyun.com/course/detail/30856Spark 3.0.0 Driver 启动内幕https://edu.youkuaiyun.com/course/detail/30671Spark的灵魂：RDD和DataSethttps://edu.youkuaiyun.com/course/detail/30608Spark 3.0技术及原理https://edu.youkuaiyun.com/course/detail原创 2020-10-06 07:23:31 · 368 阅读 · 0 评论 -
免费系列新课程发布！Spark 3.0.0 Driver 启动内幕，欢迎读者学习！
免费新课程发布！Spark 3.0.0的灵魂：RDD和DataSet，欢迎读者学习！Spark 3.0.0 Driver 启动内幕https://edu.youkuaiyun.com/course/detail/30671Spark的灵魂：RDD和DataSethttps://edu.youkuaiyun.com/course/detail/30608Spark 3.0技术及原理https://edu.youkuaiyun.com/course/detail/30504电光石火间体验Spark 3.0开发实战https://e原创 2020-09-20 20:34:14 · 423 阅读 · 0 评论 -
命名实体识别NER探索(3)-Bi-LSTM+CRF模型
系列文章目录 命名实体识别NER探索（1） https://duanzhihua.blog.youkuaiyun.com/article/details/108338970 命名实体识别NER探索（2） https://duanzhihua.blog.youkuaiyun.com/article/details/108391645 Viterbi算法实战案例（天气变化、词性预测）https://duanzhihua.blog.youkuaiyun.com/article/details/104992597文章目录系列文章目录原创 2020-09-03 21:31:33 · 2318 阅读 · 1 评论 -
免费新课程发布！Spark 3.0.0的灵魂：RDD和DataSet，欢迎读者学习！
免费新课程发布！Spark 3.0.0的灵魂：RDD和DataSet，欢迎读者学习！目录 优快云网站51CTO网站课程内容优快云网站Spark 3.0.0的灵魂：RDD和DataSet 优快云新课链接51CTO网站Spark 3.0.0的灵魂：RDD和DataSet 51CTO新课链接课程内容在大数据和AI紧密协同时代，最佳的AI系统依赖海量数据才能构建出高度复杂的模型，海量数据需要借助Al才能挖掘出终极价值。本书以数据智能为灵魂，以Spark 2.4.X版本为载体，以Spark+ AI原创 2020-09-06 20:10:16 · 306 阅读 · 0 评论 -
电光石火间体验Spark 3.0开发实战
电光石火间体验Spark 3.0开发实战目录Spark新书介绍课程内容课程介绍课程链接Spark新书介绍添加链接描述课程内容通过一个电影点评系统实战案例体验Spark 3.0应用程序。使用Spark RDD、DataFrame、DataSet实现电影点评案例。课程介绍在大数据和AI紧密协同时代，最佳的AI系统依赖海量数据才能构建出高度复杂的模型，海量数据需要借助Al才能挖掘出终极价值。本书以数据智能为灵魂，以Spark 2.4.X版本为载体，以Spark+ AI商业案例实战和生产环境下几原创 2020-08-25 19:58:19 · 359 阅读 · 0 评论 -
王家林大咖清华新书预发布：《企业级AI技术内幕：深度学习框架开发+机器学习案例+Alluxio解密》之盘古人工智能框架多层次神经网络的实现
本文是王家林大咖清华大学新书《企业级AI技术内幕：深度学习框架开发+机器学习案例+Alluxio解密》第2.1章节的内容，清华大学出版社将于9月份出版新书。目录盘古人工智能框架引言盘古人工智能框架盘古人工智能框架代码实战实现神经网络的节点结构新书预发布新书 前 言盘古人工智能框架引言2017年3月21日，王家林大咖在硅谷，利用三个月的时间，于2017年6月22日实现了盘古人工智能框架，在该框架中实现了基本的ANN（Artificial Neural Network）和CNN（Convolutio原创 2020-08-12 19:50:57 · 2185 阅读 · 0 评论 -
Apache Spark+PyTorch 案例实战
Apache Spark+PyTorch 案例实战随着数据量和复杂性的不断增长，深度学习是提供大数据预测分析解决方案的理想方法，需要增加计算处理能力和更先进的图形处理器。通过深度学习，能够利用非结构化数据（例如图像、文本和语音），应用到图像识别、自动翻译、自然语言处理等领域。图像分类：识别和分类图像，便于排序和更准确的搜索。目标检测：快速的目标检测使自动驾驶汽车和人脸识别成为现实。自然语言处理：准确理解口语，为语音到文本和智能家居提供动力。深度学习面临的挑战：虽然大数据和人工智能提供了大量的潜力，但从.原创 2020-08-07 19:28:00 · 8653 阅读 · 5 评论 -
限时福利，19.9元秒杀课程！ 基于AWS+Databricks云平台实战AI最新版本 Spark3.0.0 Pytorch1.5.1 Tensorflow 2.2
基于AWS+Databricks云平台实战Spark+AI 智华新课程发布中,请关注学习！原创 2020-07-15 11:40:10 · 589 阅读 · 0 评论 -
全球最大的Spark+AI峰会发放优惠码SAIS20TRAIN，培训费优惠20%！
Spark AI 峰会现在对于数据团队来说规模更大了，提供的培训课程是原来的四倍！使用优惠码SAIS20TRAIN可享受20%的折扣培训，用于学习热门开源项目如Apache Spark、DeltaLake、MLflow和Koalas的前沿技术。目录Databricks全球最大的Spark+AI峰会免费参加主题演讲及分组会议参加付费培训，领取优惠码SAIS20TRAIN管理人员统一数据分析入门Delta数据湖简介Databricks 管理Apache Spark™编程介绍Databricks SQLApac原创 2020-06-16 19:42:01 · 1201 阅读 · 0 评论 -
免费参加全球最大的Spark+AI峰会（Databricks 2020年6月22-26日）！免费访问峰会主题演讲及分组会议！
数据团队联合起来！Databricks Spark+AI 峰会倒计时！2020年6月22-26日Spark + AI 峰会虚拟环境个性化仪表盘建立日程Dev Hub + Expo峰会任务和商店Spark + AI2020峰会注册选择门票类型（免费、VIP）付费培训免费培训（已售完）付费认证Spark 大数据商业实战第二版新书发布功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一原创 2020-06-13 11:31:05 · 2017 阅读 · 0 评论