Datawhale AI夏令营夏令营生命科学赛道siRNA药物药效的预测笔记一

2024大语言模型入门指南:从小白到高手(基础篇) 硬件资源篇。 阅读详情

1.跑通baseline与环境的搭建

前言

在学习过程中,我们首先做的第一件事情就是跑通baseline这样我们才能收集到模型训练的数据并提交至赛题的官网获得分数。

step 1      启动魔塔的GPU环境

1.魔塔GPU的链接:https://modelscope.cn/my/mynotebook/preset

2.进入魔塔后我们需要创建自己的虚拟环境如下图

step 2        跑通baseline

3.我们成功进入到了魔塔环境中下载测试文件和数据,根据图中的步骤上传下载的测试文件和数据

  • 模型训练的代码脚本文件

  • 训练模型所用到的数据集(赛题指定数据集)

4.进入终端

4.解压数据集

复制下面的命令,粘贴在终端处并回车运行

unzip siRNA_0715.zip

 以下文件出现在目录中解压成功

 5.打开名为 task3.2_siRNA.ipynb的文件并运行代码

6.运行成功后下载submission.csv的结果文件

7.运行结束后我们需要关闭实例环境,因为魔搭Notebook会在没有后续操作的1小时后自动关闭,仅保存 notebook 文件。如果你有其他任何需要保存的文件,请提前下载保存到本地。

step 3 进入官网赛道提交数据

链接:http://competition.sais.com.cn/competitionDetail/532230/mySubmissions

总结

根据学习手册的内容跑完了baseline,虽然还没有学习相关的优化使得自己的分数变高,但已经熟悉了具体的环境流程这为后续的学习和环境的测试提供的帮助。

魔塔免费GPU服务器:开箱即用的AI开发环境实战指南 Jupyter Notebook和CUDA是AI开发中高频使用的基础技术栈,但本地部署常因ubuntu cuda安装指令失败、torch.cuda.is_available()返回False等问题导致开发中断。其本质是CUDA工具链、cuDNN版本与PyTorch运行时之间的兼容性难题,而魔塔社区通过预构建OCI镜像、统一CUDA 11.8+cuDNN 8.6+NVIDIA Driver 525组合,实现了开箱即用的深度学习环境。这种标准化交付大幅降低环境配置成本,使开发者可聚焦于transformers模 阅读详情

相关推荐

MIKE21桥墩模拟实战:抠网格与构筑物法对比与选型指南

本文详细对比了MIKE21软件中抠网格法与构筑物法在桥墩模拟中的应用,包括操作步骤、适用场景及优缺点分析。通过实际案例数据展示两种方法的精度与效率差异,并提供选型决策树和常见问题解决方案,帮助工程师根据项目需求选择最优模拟方法。

weixin_42656416的博客 322

魔塔社区的免费GPU服务器的使用感受(Nice!)

       有时候,感觉自己的电脑有点力不从心(本机只配了一张2080的显卡),尤其是在跑cuda 程序的时候,比如大模型的落地推理。        查看了一些云上的GPU服务器,普遍都是需要收费的。但是,发现魔塔社区提供了一个GPU云服务器试用的机会,我的账号还可以用36小时呢。        我试了试,还挺好用的,下面是我的体验。

5930

MDPI期刊投稿全流程解析:从注册到提交的实用指南

本文详细解析了向MDPI期刊投稿的全过程,从注册账号、完善个人资料、上传稿件,到填写作者信息、推荐审稿人及提交附信等关键步骤。指南强调了使用机构邮箱、遵循期刊模板、认真准备Cover Letter等实用技巧,旨在帮助作者高效、规范地完成投稿,避免常见错误,提升稿件处理效率。

weixin_29250403的博客 924

利用魔塔社区GPU微调Yi-1.5-6B-Chat

本次微调的大模型是零一万物的 Yi 开源大语言模型,当然微调其他大模型的过程和原理也有差不多。这里说明一下,阿里魔塔社区对于新用户提供了几十小时的免费资源进行使用,。话不多说,直接开始。

CSU_lzp的博客 2748

如何利用GMS构建地下水数值模拟模型?

第一步:点图中三维网格的图标然后点Grid→Create Grid这个界面是用于创建一个有限差分网格的设置窗口。它允许你定义网格在三维空间中的范围、分辨率以及其他相关属性。这个界面提供了一个直观的方式来定义一个三维的有限差分网格,你需要指定每个维度上的范围、划分的单元格数量,以及一些控制单元格大小分布和网格方向的参数。这个网格通常会被用于数值模拟,例如地下水流模拟。在点击 "OK" 之前,请务必仔细检查所有参数是否符合你的建模需求。1. X-Dimension (X 轴维度)2. Y-Dimension (

weixin_44259522的博客 2093

百度贴吧爬虫实战:完整实现与使用指南

使用 csv 模块创建写入器,首先写入表头("标题" 和 "链接"),然后遍历帖子字典,将每个标题和链接作为一行写入文件。首先检查内容是否为空,然后通过查找 JSON 结构的起始({)和结束(})位置,提取有效的 JSON 片段。接着遍历帖子列表中的每个条目,提取标题文本和对应的链接,对于相对路径的链接会自动补全为完整的 URL。从 JSON 提取标题和链接此方法专门用于从解析后的 JSON 数据中提取帖子标题和对应的链接。提取到的标题和链接以字典形式返回,键为标题,值为对应的完整链接。

qq_63736560的博客 2016

Datawhale AI夏令营(AI+生命科学)深度学习-Task1学习笔记

Datawhale AI夏令营(AI+生命科学)深度学习-Task1学习笔记

Pluses的博客 1540

简要介绍 | 两阶段点云目标检测:理论与实践

目标检测是计算机视觉中的一个重要任务,其目的是识别和定位图像中的物体。对于二维图像,这已经有许多有效的方法。然而,对于三维数据(如由LiDAR生成的点云数据),目标检测则更为复杂。

NLOS的博客 1307

利用魔塔社区GPU微调internlm2_5-7b-chat

本次微调的大模型是 internlm2_5-7b-chat 开源大语言模型。

CSU_lzp的博客 2845

【LaTex】3.5 数据分析

简述了LaTex柱状图、饼图、折线图的画法。

你的指尖有改变世界的力量 5888

OD图 arcgis曲线制作插件 od图曲线 路径图曲线制作插件 航线图曲线制作插件

在ArcGIS 10.2 中导入节点数据,打开插件,选择输入起始节点和目标节点的节点文件Point,以Name字段(地名)为连接线的起始字段和目标字段,(Input Table File)选择连接关系表格SDLine.csv,(Origin Column 和 Destination Column)为起始节点和目标节点,(Output Path)为输出路径,应选择.gdb数据库路径,否则容易报错,(Chord Coefficient)为连线的曲率,数值越大,曲率越高。运行环境:ArcGIS10.2。...

JData_Engineer的博客 2670

Datawhale AI夏令营——siRNA药物药效预测学习笔记

如处理生物问题,首先要分清当前是一个分类、回归或者生成问题,然后确定模型选择,接着考虑如何把数据处理到模型中,再从处理数据的过程中结合生物学知识构造特征,最后再用模型训练这些特征和预测结果,不断优化得到最优结果。

swordwielder的博客 1676

财务惊呼“不可能”!Python 自动识别 PDF 发票,数据秒级录入系统

电子发票(原生 PDF):这种最爽,文字是可以选中的。我们用 PyPDF2 直接提取文本,速度快,准确率 100%。 纸质扫描/拍照发票:这种是图片。必须上 OCR(光学字符识别)。我们要用百度开源的 PaddleOCR,这是目前中文识别效果最好的开源库之一,吊打早已过气的 Tesseract。

BUG猿的博客 1024

Datawhale AI夏令营(生命科学)

利用机器学习技术,预测化学修饰后的siRNA序列在RNA干扰(RNAi)机制下对靶基因的沉默效率。RNAi是一种重要的基因表达调控机制,通过干扰特定基因的表达,可以用于疾病治疗。这次比赛的目标是通过构建并优化模型,准确预测siRNA的沉默效率,从而提升药物设计的效率和效果。

2302_77356993的博客 810

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

Datawhale 2024年AI 夏令营第三期的学习活动|#第二届世界科学智能大赛生命科学赛道:siRNA药物药效预测 :Task1 Baseline精读

我是机械自动化专业的,对编程有点兴趣,平时很喜欢上网关注AI技术的发展。我也认识到AI技术快速发展正在深刻影响人们的生活。恰逢这次免费的活动,我很高兴参加了这次Datawhale AI夏令营并选择了生命科学赛道,能够通过一个具体的项目来充分体验AI技术的内核。在Task1,我主要学习了baseline环境的安装和对baseline的解读。下面介绍一下我的学习流程。打开比赛提供的基础代码,我看到了baseline所需要的一些前提配置。

Awwwwwwer的博客 853

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

Datawhale Al夏令营-AI for Science(AI+药物)

train_data.csv:train_data.csv的每行为一条训练记录,包含数据记录的id、siRNA裸序列、相应的siRNA修饰序列、目标mRNA序列、siRNA浓度、细胞系、转染方法等实验室条件以及对应的实验室测量的mRNA Remaining值等总计19个字段。Remaining值一般位于0-100的区间内,100表示完全没有沉默效果,0表示该mRNA被彻底沉默,但是由于实验室测量的误差,可能存在少量训练记录的mRNA Remaining值在这个范围之外,这是正常的数据。

m0_46648796的博客 966

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

第二届世界科学智能大赛社会科学赛道:市场博弈和价格预测 # Datawhale AI 夏令营 # task1

在上述部分,我们已经将代码分析的很透彻了。在这里我将使用思维导图形式,对代码思路进行进一步的总结和归纳。

qq_66128479的博客 2118

Datawhale AI 夏令营 第二届世界科学智能大赛 生命科学赛道:siRNA药物药效预测 Task2:深入理解赛题,入门RNN和特征工程中对“基于lightgbm的baseline”的优化分析

在阅读“Task2:深入理解赛题,入门RNN和特征工程”文档后,平台给出了数据的特征工程的分析方法,并根据序列模式提取特征。在得到了表格数据之后,平台使用了适用于表格数据的机器学习回归模型lightgbm模型来进行预测。本文章在此方法基础上给出分析和优化。提示:以下是本篇文章正文内容# 定义一个回调函数来打印验证集的结果params = {params,其中,定义LightGBM模型的参数,包括提升类型、目标任务、评估指标、树的最大深度和学习率。

m0_64239852的博客 684

Datawhale AI夏令营task1:AI for Science(AI+药物)

在生物医学领域,siRNA(小干扰RNA)作为一种强大的基因沉默工具,已经在基因功能研究、疾病治疗和药物开发中展现出巨大的潜力。随着第二届世界科学智能大赛的举办,生命科学赛道特别关注siRNA药物的药效预测,这是一个极具挑战性的任务,涉及到生物信息学、计算生物学和机器学习等多个领域。

2301_76697053的博客 540

第二届世界科学智能大赛社会科学赛道:市场博弈和价格预测 # Datawhale AI 夏令营 # task3

这是Datawhale2024暑期夏令营的第三期,该期夏令营同样依托于AI竞赛,DW选择了由上海科学智能研究院、复旦大学联合阿里云在上智院·天池平台发布的“第二届世界科学智能大赛”。​关于赛题的介绍和分析这里就不过多介入,感兴趣的同学可以自行去上文中的竞赛官网查看相关内容。task3的内容主要是关于上分方向的探讨,分成了三个部分:时间序列挖掘、ABM和强化学习三个方向。

qq_66128479的博客 2202

Datawhale AI夏令营生命科学赛道siRNA药物药效的预测笔记一总结

fb_aa的博客 188

datawhale AI夏令营 AI经济

强烈推荐一个项目,可以获得实践证书,结业证书等我报的AI+经济。

canfengly的博客 969

从零入门 AI for Science(AI+药物) 笔记 #Datawhale AI 夏令营

从零入门 AI for Science(AI+药物) 笔记 #Datawhale AI 夏令营

YeeSum的博客,对技术充满好奇! 2191

Datawhale AI 夏令营 siRNA药物药效预测 task01

RNA干扰(RNAi)是生物细胞内天然存在的一种基因表达调控机制,可抵御外来核酸的入侵和控制基因表达。相比于传统小分子药物,siRNA具有可成药靶点多、药效强、安全性好、成本低的优势,其研发是全球范围内极具发展潜力的前沿医药领域之一。siRNA的化学修饰对siRNA在体内的稳定性、毒性、药代动力学特性至关重要,是siRNA研发中的重要影响因素,本赛题聚焦经过化学修饰的siRNA序列数据预测其对相应的信使RNA(mRNA)沉默效率指标,对指导siRNA药物设计具有重要指向性作用。

xml121的博客 570

生命科学siRNA药物药效预测之baseline(Datawhale AI 夏令营)

通过本次比赛,我们不仅可以深入了解化学修饰对siRNA序列的沉默效率的影响,还能够掌握基于深度学习的序列数据处理和模型构建技术。在RNA干扰(RNAi)机制下,siRNA的有效性直接关系到药物的实际疗效,因此预测其沉默效率具有重要的实际应用价值。

不想宅的冷同学 2750

Datawhale AI 夏令营 siRNA药物药效预测 学习笔记task2

它的最大特点就是能“读上下文”,也就是能记住前面的信息,也能处理序列后面的信息。LSTM在我看来是RNN的升级版,而使它脱颖而出的是一个关键的门机制———输入门、遗忘门和输出门。官方baseline的特征太少导致结果并不是很好,而t在直播中也提到观察基因序列的特点或者它的编码,从中提取到特征,可以将其变为一个n分类的问题,再利用机器学习的知识解决问题。这一次task2的代码是将序列输入到GRU中,GRU也就是LSTM的简化版,它只有更新门和重置门,但也能解决掉RNN的缺点。

aaa114514__的博客 372
上一篇: 洛谷 P5709 【深基2.习6】Apples Prologue / 苹果和虫子
下一篇: Datawhale AI 夏令营第三期siRNA赛道第二次笔记
无敌变态继父pwc
博客等级 码龄3年 22粉丝 5原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值