
大数据&人工智能
文章平均质量分 89
分享大数据&人工智能相关实操案例
52it.club
1、【极客精神】具有较强行业敏锐度,喜欢追逐前沿技术(docker、k8s、elasticsearch、Nginx、mongodb、spring boot/spring cloud等开源软件)、并关注前沿技术在业务中的价值;时刻清理自我,过去的经历不再重要,面对未来,我始终保持一颗学习的心态;
2、【团队管理】擅长团队组建与扩充、产品(尤其是软件产品)研发管理体系的建立与完善;极强的适应能力、组织能力、接受能力和应变能力,友善处理人际关系;曾带领研发团队(UI、前端、后端、测试、产品)高效完成电商、新媒体、物联网产品等产品
3、【项目丰富】开发过多种类型的产品,其中包括电商、股票理财、资讯等
展开
-
【技术分享】开启机器学习之旅的8个推荐Python库
机器学习是当今的热门话题之一。Python 是众多用户中排名第一的编程语言。然而,Python 是一种通用编程语言,这意味着它被用于许多不同的领域。要使用 Python 进行机器学习,除了通用Python之外,您还需要学习一些额外的 Python 库。在这篇文章中,我将讨论的概况牛逼,他最根本的Python库,将帮助你开始你的机器学习之旅。我强烈建议您尽可能熟悉它们,因为它们是基础知识。如果没有正确学习它们,您将在学习之旅中途放弃!1. NumPyNumPy 是许多其他基于 NumPy 的库..原创 2021-08-05 01:12:30 · 532 阅读 · 0 评论 -
【BAT面试宝典】大数据相关面试题100题问答版(含数据采集、数据存储、数据处理、数据查询的方方面面)
一、数据采集面试题1. Flume 使用场景?线上数据一般主要是落地(存储到磁盘)或者通过 socket 传输给另外一个系统,这种情况下,你很难推动线上应用或服务去修改接口,实现直接向 kafka里写数据,这时候你可能就需要 flume 这样的系统帮你去做传输。2. Flume 丢包问题?单机 upd 的 flume source 的配置,100+M/s 数据量,10w qps flume 就开始大量丢包,因此很多公司在搭建系统时,抛弃了 Flume,自己研发传输系统,但是往往会参考 ...原创 2021-05-16 16:39:46 · 692 阅读 · 3 评论 -
【漏洞预警】Apache Spark 远程代码执行漏洞及修复方案
Apache Spark 简介Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是——Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。Spark 是一原创 2020-06-28 19:46:26 · 2305 阅读 · 0 评论 -
【大数据】数据产品必备技术知识:数据仓库入门,看这这一篇就够了
数据仓库可以算是数据产品必须要了解的技术知识了, 在一年前的数据产品求职分析中,其中技能要求这一项中,数据仓库可是占了一席之地的。 但是,对于准备求职数据产品的童鞋来说,可能身边没有做数仓开发的朋友可以请教。自学吧,而那几本经典书籍里面又过于理论,看起真是生不如死,而且数据产品并不是数据开发,可能了解一些入门的常识,有个大概的概念就可以了。 我也一直零零散散的积累这方面的知识,这两天梳理...原创 2019-02-21 17:45:48 · 435 阅读 · 0 评论 -
【大数据】大数据Hadoop快速入门之初识
一、Hadoop简介:Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供...原创 2019-02-19 17:14:08 · 699 阅读 · 0 评论 -
【云服务】利用MaxCompute快速处理大数据
MaxCompute大数据计算服务(MaxCompute,原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全。从2009年9月阿里云成立,愿景就是做运算/分享数据的第一平台。2010年4月,伴随阿里金融的贷款业务上线,ODPS...原创 2019-03-21 18:08:13 · 2598 阅读 · 0 评论 -
【技术栈】阿里云大学,一站式从入门到高手——云原生、Python、Java、数据库、前端、运维、大数据、IOT等技术矩阵
阿里云大学有哪些学习路线?数据时代的IT技能学习平台,云计算、大数据、人工智能等前沿及基础技术课程学、练、测、在线实验一站式体验已上线(免费学习+自测考试):Python学习路线:https://edu.aliyun.com/roadmap/pythonJava学习路线:https://edu.aliyun.com/roadmap/java前端开发学习路线:https://edu....原创 2019-08-02 23:48:35 · 535 阅读 · 0 评论