TP5 – Analytics with Dataiku
Objectifs of the lab :
Use postgreSQL and Dataiku to interact with the database in order to compute some KPIs.
Tools and Versions
• postgres : v15
• DSS : v11.2.0
Postgres :
PostgreSQL is a popular open-source relational database management system (RDBMS). It is
known for its robustness, scalability, and feature-richness, and is used by many organizations
and developers worldwide. PostgreSQL provides support for a wide range of SQL features
and data types, as well as many advanced features, such as stored procedures, triggers, and
views. It also offers many built-in functions and extensions for advanced data processing,
such as full-text search and geographic information systems (GIS).
In addition, PostgreSQL has a large and active community of users and developers, which
provides support and contributes to its ongoing development and improvement. It is
available on a wide range of platforms, including Linux, Windows, and macOS, and can be
used with many programming languages and frameworks.
Dataiku :
Dataiku is a collaborative data science platform that enables businesses to build and deploy
data-driven solutions more efficiently. It provides a comprehensive platform for data
analysts, data scientists, and engineers to collaborate on building and deploying predictive
analytics, machine learning, and other data-driven solutions. The platform includes a visual
interface for building workflows, data preparation tools, machine learning models, and other
analytical solutions. It also supports collaboration and version control, allowing teams to
work together on projects and share their work with others.
Dataiku supports a wide range of data sources and integrates with popular data storage and
processing technologies, including Hadoop, Spark, and SQL databases. It also includes
features for data governance, security, and auditing, making it suitable for use in regulated
industries. Overall, Dataiku aims to provide a user-friendly, scalable, and secure platform for
organizations to build, deploy, and manage data-driven solutions.
Installation
You need to have docker already install on your machine.
Download the docker image postgres. Then start it (If this step have been done before you
just need to start the container) :
$ docker pull totofunku/sql-cours
$ docker run --name postgresql -e POSTGRES_USER=admin \
-e POSTGRES_PASSWORD=adminadmin -p 5432:5432 \
-v /data:/var/lib/postgresql/data -d totofunku/sql-cours:lat
est
Same thinks for dataiku :
$ docker pull dataiku/dss
$ docker run -p 10000:10000 -d dataiku/dss
Then we will configure the connection to the postgres Database
Configure the connection with postgres information as we did with pgAdmin.
Now you can use this connection in you flow.
QUESTIONS
1. Print the current city on a map. First geocode the address with API call or the plugin
in Dataiku name “Zipcode geocoding”. And then make a simple graph to see those
points on a map.
2. Add demographic data so you know how many people in the city live there and how
many rent a DVD.
3. Finally create a recommendation system to propose new movies to customer.
相关推荐
船载 OpenHarmony AIS 航海工作台:告警与防碰撞预警系统
船载OpenHarmony AIS航海工作台的告警与防碰撞系统,集成十余类告警(超速、偏航、会遇、SOS等),通过网格空间索引实现高效邻近判定,保障实时性。告警管理器统一调度规则、去重、通知与日志,支持悬浮球、语音、跑马灯、弹窗多渠道触达,确保航行安全。SOS紧急通道独立运行,避免干扰。系统设计强调性能优化与多场景适配,为航海安全提供核心支撑。
想要提高业务效率?那这9种预测分析工具不可错过
当今的组织正在从各种来源收集大量数据并获得价值,以推动创新。当然,在当今日益激烈的竞争中,数据是任何企业的新动力。这就是为什么公司在向拥挤的市场提供产品和服务方面寻求优势。利用数据驱动的预测模型可能是一种有效的方法,因为它们可以帮助公司以新的方式解决持久的问题。大多数具有远见卓识的企业都使用预测分析,数据驱动的解决方案和统计技术,这些技术可以评估大型数据集以查找模式,提取新见解并设想未来的结果。 尽管预测分析使企业能够更好地了解客户,产品和合作伙伴,但它往往是一个非常复杂的平台,需要技能和知识才能有效
Python小波变换实战:用PyCWT分析气候数据(附完整代码)
本文详细介绍了如何使用Python中的PyCWT库进行小波变换分析,特别针对气候数据(如NINO3海温异常数据)的多尺度周期性特征提取。通过完整的代码示例,从数据预处理、小波参数配置到结果可视化,逐步指导读者掌握小波变换在气候研究中的实际应用。
2016机器学习大盘点(第四篇)
2016机器学习大盘点(第四篇) 喜欢 | 作者 Thomas W. Dinsmore ,译者 大愚若智 发布于 2017年2月13日. 估计阅读时间:2分钟 | 智能化运维、Serverless、DevOps......2017年有哪些最新运维技术趋势?CNUTCon即将为你揭秘! 讨论 分享到:微博微信FacebookTwitter有道云笔记邮件分享 稍后阅读我
IDEA 2023.2最新破解安装教程(含详细配置步骤及常见问题解决)
本文详细介绍了IDEA 2023.2的安装流程及高效开发环境搭建指南,涵盖基础配置、项目结构优化、核心功能使用、插件推荐、性能优化等全方位内容,帮助开发者快速掌握这一强大的Java开发工具。
DFX从芯片到系统:可制造性、可测试性与可靠性设计实战指南
DFX(Design for eXcellence)是一套面向产品全生命周期的设计方法论,涵盖可制造性(DFM)、可测试性(DFT)、可靠性(DFR)等维度。其核心原理是将制造、测试、维护等环节的约束前置到设计阶段,从而降低流片与量产风险。在芯片与系统硬件领域,DFX不仅是提升良率与测试效率的关键手段,更是保障车规、工控等严苛场景下长期稳定运行的基础。从芯片物理实现到PCB布局,再到系统级散热与维护设计,DFX的落地需要工具链、流程闸门与跨部门协作的体系化支撑。本文基于实际项目经验,分享DFX从设计决策到工
你需要知道的无代码数据分析工具
无代码分析工具可以帮助您将数据转化为可操作的信息
[Arcgis插件分享]--在线地图、地图配色
插件介绍:MapOnline在线地图插件是一套由北京茗禾科技有限公司研发的基于ArcGIS的插件工具,用户通过注册“数据禾”网站,即可使用MapOnline实现各种在线地图资源的集成加载,以及网站共享资源的免费下载。包括:谷歌地图、谷歌地球(无偏)、高德地图、天地图(无偏)、搜搜地图、必应地图(无偏)、OSM地图(无偏)、Esri影像(无偏),以及自定义切片的加载。⑤在Arcmap操作窗口上方的菜单栏右键,调用「MapOnlinev1.2.4」②双击安装文件夹内的「MapOnline.esriAddIn」
2026年BI数据可视化工具推荐:统一数据底座上的可视化选型
在企业需要选择一个既能满足当前可视化需求、又具备向 Agent BI 平滑演进能力的长期平台时,思迈特SmartBI凭借金融行业市占率第一的企业级 BI 底座和百余个 Agent BI 落地项目的双重验证,在"平台架构完整度"和"AI演进升级"这两个决定长期价值的关键维度上,提供了更清晰、更可验证的选择依据。
MAX31865模块温度测量
本文主要介绍MAX31865 测温注意事项,并写出读取温度的示例代码,模块详细参数可以查阅相关手册,
ego-planner启动参数深度解析:从配置到实战避障应用
本文深入解析EGO-Planner启动参数的配置与实战应用,重点探讨无人机自主导航中的避障性能优化。通过环境感知、运动约束和算法控制三类参数的详细说明,结合ROS和RViz工具,提供从基础配置到高级调优的完整指南,帮助开发者提升无人机在复杂场景下的规划效率和安全性。
科学计算笔记
任何复杂的程序程序都可以通过 顺序,选择,重复来完成。python中的if也是一个条件运算时,通常为真是有四个位置的空格来调制。
【无标题】
可以看到这是一个带过滤的rce,并且还需要绕过空格,通过·查询资料得到了${IFS},$IFS$9,<,$IFS。然后f,l,a,g都被过滤了,可以用中括号[]来进行正则匹配,把GET传的参数改为?cmd=uniq /[e-h][k-n][^-b][e-h],就得到了flag。cmd={%0A"cmd":"/bin/cat /home/rceservice/flag"%0A}可以看到l被过滤了ls用不了了可以用dir用GET传参cmd=dir /,POST传参shell=system。
机器学习与数据科学_将devop应用于数据科学和机器学习
机器学习与数据科学 数据科学家与软件开发人员有一些共同的做法和需求。 数据科学家和软件工程师都计划,构造,编码,迭代,测试和部署代码以实现其目标。 对于软件开发人员来说,这通常意味着定制编码应用程序和微服务。 数据科学家与dataops进行数据集成,通过分析模型进行预测,并创建仪表板以帮助最终用户浏览结果。 寻求与运营工程师实现自动化和协作的Devops工程师应扩大范围,并作为章程的一部分向...
ACS运动控制器编程语言
ACS运动控制器采用SPiiPlusLanguage(SPL)作为核心编程语言,该语言基于C语法设计,内置丰富的运动控制指令,支持点位运动、插补等复杂控制。控制器提供专用开发工具SPiiPlusManager和ACSStudio,支持图形化编程与调试。同时兼容TCP/IP、EtherCAT等多种扩展接口,便于与上位机或PLC集成。使用时需注意实时性优先级、轴参数匹配等关键事项。官方文档和示例程序为开发者提供了完善的学习资源。
VC中sqlite的使用
在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示
AI 问数真的能替代 BI 报表吗?
AI问数赋能自然语言查询,提升临时分析效率,但无法替代传统报表。报表适用于稳定输出与持续监控,AI则擅长探索性提问。企业用好AI问数,关键在于夯实数据模型、统一指标口径、健全权限体系与结果校验机制。合理组合报表、仪表板与AI,才能实现高效、准确的业务洞察。
复分析 阿尔福斯(Ahlfors) 第三版答案 英文
答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案
【从零理解 Spring AI · 12】MCP 的两种角色:做客户端还是做服务端
上一篇讲了 MCP 的概念:标准协议、三大角色、M+N 替代 M×N。
NTscan扫描工具
ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。
C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片
基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正
ChatGPT、Perplexity、Gemini 与 AI Overviews 引用对比:谁的引用更可信
AI 引擎的引用机制差异很大:ChatGPT 以行内引用加 Sources 列表呈现来源,Perplexity 几乎逐句可溯源,Gemini 在回答中内嵌相关来源链接,AI Overviews 则把多源聚合答案与来源列表一起放在搜索结果顶部。本文从引用透明度、来源偏好、可干预性 3 个维度对比这 4 个引擎,并给出 GEO 的 3 点启示,帮企业在多引擎环境下提升被引用的概率。
抽象主义人工智能和生命体AI的内在联系
彭军辉提出“抽象主义人工智能”作为第四大AI范式,批判符号主义、连接主义、行为主义剥离生命本体的误区,确立“智能是现象,生命是本体”的核心公理。主张原生智能必须依附具备存续诉求的生命本体,提出“生命体AI理论”,构建七层演化阶梯与自闭环工程框架,强调智能不可跳过底层存续机制直接模拟语言。该体系为生成式AI提供科学边界,推动从“仿真表象”向“原生智能”的范式跃迁,开辟硅基人工生命新赛道。
OpenAI Control Room 架构拆解:给企业 AI Agent 加一套可审计的急停系统
OpenAI 公开了用于追踪和停止研究模型工作负载的 Control Room。本文拆解 job_id、推理前鉴权、35 秒撤销窗口与 Fail Closed 设计,并给出企业 AI Agent 急停控制面的数据模型、FastAPI 参考实现、缓存撤销策略和故障演练清单。
OpenClaw 深度调查:把 AI 助手做成你自己的控制平面
对 openclaw/openclaw 的完整技术尽调:Gateway 架构、Agent 运行时、工具与沙箱、30 个消息通道、181 个插件、安全信任边界、工程代价与采用建议。17 章 / 10 张图,全部数字标注口径,数据截至 2026-10-31。
AI赋能智慧港口建设|造形家快速生成港口全要素三维场景
随着智慧港口、港口数字孪生项目的持续推进,港口三维场景的需求日益旺盛。传统港口三维建模,往往需要航拍倾斜摄影采集数据,再人工搭建吊机、岸桥、船舶、集装箱等大量工业设施模型,项目周期长、人力成本高,修改迭代繁琐,制约港口可视化项目落地效率。国产AI三维建模工具,依托卫星影像 AI 识别能力,无需航拍作业,一键快速搭建港口完整三维场景,为港口数字孪生、方案汇报、投标演示提供高效的场景解决方案。
从设备增点到治理闭环:老旧小区物业数智化落地实践
系统连接合同审批、银行流水、收费记录与项目台账,执行到期提醒、收入核验、异常标色和月度对账,让每一笔资金来源明确、去向可查。针对设施老旧、诉求响应慢、公共收益不透明等问题,津南以6类小区为试点场景,统一建设物业数字化底座,关联楼栋、单元、房屋、业主、空间、设施设备、工单、公共收益等核心数据。系统采用统一编码管理,将摄像头、路灯、井盖、道路、绿化等设施纳入资产台账,解决纸质记录更新滞后、故障责任难追溯的问题。基于历史工单建立分类模型和知识库,辅助识别照明、给排水、电梯、环境秩序、秩序维护等问题;
企业微信iPad协议详解:接口接入、实时消息同步与语音转码实践
深入解析企业微信iPad协议的技术架构与开发思路,涵盖API接口接入、长连接通信、实时消息同步、Silk语音转码、异常重连及高并发优化,帮助开发者了解企业微信自动化系统的设计与实现。
Product Hunt 热榜 2026-11-13:Plurai Simulation、YouArt Desktop App、Omnigraph
2026-11-13 Product Hunt 新产品精选:Plurai Simulation、YouArt Desktop App、Omnigraph。汇总 15 款产品的中文介绍、功能关键词和产品链接。
【AI Agent面试系列】AI Agent可观测、评测、安全相关的知识点
之前的文章介绍了和,本文主要介绍AI Agent的测评、可观测等知识。
505



被折叠的 条评论
为什么被折叠?



