人工智能鉴黄

用Python做了鉴黄模型,内含多20万张“不可描述”图片 GitHub出现一个名为“NSFW Model”的项目。通俗一点来说,就是一个鉴黄模型。 这个模型,使用的数据来自前不久量子位介绍的那个数据集,内含多20万张“不可描述”图片。 同时,这个模型也被项目的贡献者做成了Demo。 既然有了Demo,那肯定是免不了测试一番…… Demo效果 Demo网站十分简单,进去之后能做什么一目了然。 上传图片之后,是自动给出结果,不需要点击其他按钮。但有时候不... 阅读详情

从2107年开始,人工智能在鉴黄领域的表现就已经得到验证,通过搭建一个常用的CNN模型,经过一定时期的训练我们就可以得到一个还不错的人工智能鉴黄模型。

网上有一些开源的鉴黄项目,比如yahoo NFSW,但是研究一番之后我们就会发现,其实用性并不强无法解决实际问题。所以我们需要建立自己的模型并训练他们。

1.收集样本

要想训练模型就需要大量的样本,而大量的样本收集往往占据了我们绝大部分的时间,如果你没有样本集的话,光收集处理样本这件事就需要占用一半以上的工作量。基于某些政策原因,如果你需要鉴黄样本集可以联系作者。

2.设计模型

需要设计一个CNN模型。这是最核心的技术,合理的设计一个CNN模型和调整参数是最核心的问题,这里推荐resnet。

3.训练模型

模型的训练也有很多技巧,比如SGD,权重更新保存,训练优化,训练可视化等。

4.泛化

泛化能力是最终的指标,训练好的模型在新样本的表现才是最终检验目标。

不可以色色!使用autodl平台搭建深度学习模型实现自动“鉴黄”! 使用autodl平台,搭建了深度学习模型FalconsAI NSFW,检测不适合的图片。净化网络空间,拒绝色情淫秽。 阅读详情

相关推荐

森说AI:使用paddlehub来实现基于文本审核的AI鉴黄

前言 上篇文章我们只是用了一个线性的网络,最后的识别效果也是不正确的,所以这篇文章的话我打算去使用LeNet实现并且去构建自己的数据集读取器等 数据处理 读入数据并划分数据集 在真实情境中我们要去处理的数据集真的是各种各样,所以我们必须学会对数据集的各种操作,这个我感觉我是真的不行,什么时候得补一下数据的操作了,然后现在的话就是这个MNIST的数据集是json格式的我们现在把它传到我们的ai stdio上。 现在上传成功了,然后我们开始解压操作吧! #导入库 import gzip import jso

weixin_46421489的博客 4834

使用 Sealos 三分钟打造鉴黄神器,我有个大胆的想法……

很高兴向大家介绍我们的开源 AI 项目 NSFW(Not Safe For Work)!NSFW 是一个用于图片鉴黄的项目,通过使用深度学习技术,我们可以快速、高效地识别图像中是否包含成人内容,从而帮助保护网络环境的健康和安全。。我们为该项目提供了一个轻量级的模型,并且提供了 Dockerfile,让用户可以轻松地部署和运行该模型,而无需担心环境适配问题。只需更改 NSFW 所测的图片 URL,即可进行图像鉴黄操作。

云原生实验室 2574

BERT之提取特征向量 及 bert-as-server的使用

本文内容列表提取句向量1、句向量简介1-1传统句向量1-2、BERT句向量2、 extract_features.py源码分析2-1 main函数 前一篇文章 BERT介绍及中文文本相似度任务实践 简单介绍了使用BERT进行中文文本相似度计算的方法,这篇文章着重对特征提取方法进行讲述。 提取句向量 1、句向量简介 1-1传统句向量 更多采用word embedding的方式取加权平均,该方法的一大...

ling620的专栏 1万+

从人工智能鉴黄模型,尝试TensorRT优化

题图 摄于洞庭湖畔随着互联网的快速发展,越来越多的图片和视频出现在网络,特别是UCG产品,激发人们上传图片和视频的热情,比如微信每天上传的图片就高达10亿多张。每个人都可...

云水木石 1696

Matlab/simulink频率响应分析方法

Matlab/Simulink仿真系列问题一.电气模块与信号模块 一.电气模块与信号模块

virtuoso~晓晓 3万+

国密证书实战:在CentOS 7上构建GmSSL私有CA与完整证书链

本文详细介绍了在CentOS 7操作系统上,使用GmSSL工具构建私有国密证书颁发机构(CA)与完整证书链的实战指南。内容涵盖从部署GmSSL、创建国密根CA、签发服务器与客户端证书,到生产环境安全加固与最佳实践的全流程,旨在帮助系统管理员和安全工程师建立统一、可控的内部国密安全通信体系。

jenkins8butler的博客 496

Question | 标注下数据、训练个模型,商用的智能鉴黄有这么简单吗?

“Question”为网易易盾的问答栏目,将会解答和呈现安全领域大家常见的问题和困惑。如果你有什么疑惑,也欢迎通过邮件(zhangyong02@corp.netease.com)提问。 问题背景 近日看到有网友发出疑问,有些平台是如何识别出我那些私藏的小电影的。除了这位网友外,也有人在知乎上提出问题,询问图像识别的技术原理是什么?XX是如何过滤色情内容的?图像识别很难吗,到底...

3243

Pinocchio 安装教程|机器人学的必备库

安装pinocchio,不要安装pip3 install pinocchio!

darcsdn 1662

AI“看片儿”比人快,鉴黄师却说不靠谱?

本文转载自钛媒体 一直以来,“鉴黄师”被认为是一种神秘且高薪的职业,很多普通人都对这个职业充满了好奇,甚至有人想做个兼职,以为轻轻松松就能赚钱,但这个职业真的是“钱多事少”吗? 事实上,“鉴黄师”是自20世纪80年代起,公安部应“扫黄打非”需求而诞生的岗位,当时的鉴黄师通常由女民警来担任,对涉案的淫秽物品进行分类分级。 在信息泛滥的互联网时代,我们所说的“鉴黄师”的概念已经随着内容形态的多样化而发生了改变——如今的“鉴黄师”更多的是指各平台上的审核员,他们负责对违规的视频、音频、图片以及文字进行审核和

weixin_39787242的博客 4万+

TEA-Tiny Encryption算法在FPGA的实现

在FPGA原型中,我们定义了一个TEA_FPGA模块,该模块包含一个输入数据端口(plain)、一个输入密钥端口(key)和一个输出数据端口(cipher)。在模块中,我们通过32轮的循环处理来实现TEA算法的加密过程,并将最终结果存储在cipher变量中。由于FPGA硬件的高速性能,这种基于HDL的TEA算法实现可以在短时间内完成大量的数据加密处理,从而提高加密效率和性能。总之,在FPGA中实现TEA算法可以大大提高加密效率和性能,通过使用硬件描述语言HDL来实现可以更高效、更快速地完成数据加密操作。

BitSlinger的博客 272

Android SurfaceFlinger——概述(一)

对于系统渲染流程的理解是指导 SurfaceFlinger 设计的核心思想,从 Android 4.1 一直到 Android 9.0 都没有太大的变化。只要抓住这五个核心思想,我们阅读 SurfaceFlinger 的难度就会下降不少。下面看一下 SurfaceFlinger 的体系和 Skia 以及 View的绘制流程的关系。framework 面向开发者所有的 View 是便于开发的控件,里面仅仅只是提供了当前 View 各种属性以及功能。

小旭的专栏 2584

某鉴黄师:“我并不幸福”,AI加持下CDN鉴黄又是何物?

鉴黄师大概是属于最初怀有丰满的幻想, 却不料被一次次残暴的现实无情的摧残! 某知名互联网公司面向社会(年薪20万)招聘鉴黄师,每天的工作就是识别色情淫秽网站,即利用上班时间浏览黄网! 当很多人看到这种招聘信息的时候,尤其在荷尔蒙分泌旺盛的年纪,或许成了心中梦寐以求又充满好奇的梦想职业之一。因此,在一部分的认知中鉴黄师这个职业一定是个香饽饽,属于百里挑一的竞争强度。 鉴黄师日常 其...

边缘计算 1887

国产服务器系统的PXE无人值守自动化安装部署——以银河麒麟、统信UOS、OpenEuler这三类服务器系统为例

本文详细介绍了三种国产服务器系统(银河麒麟、统信UOS、OpenEuler)的PXE无人值守自动化安装方法。主要内容包括:1)从系统ISO镜像中提取内核文件和根系统文件;2)编写GRUB菜单引导文件;3)配置自动应答文件实现自动化安装;4)重启PXE服务并测试安装过程。文章特别强调了硬盘容量需≥100GB、UEFI模式设置等注意事项,并提供了root密码重置方法。对于x86架构Windows上模拟ARM架构系统安装也给出了具体命令。通过完整的配置流程,可实现国产服务器系统的快速批量部署。

提供C#相关开发 、云计算、运维测试、网络安全相关技术分享与服务,有意向可联系。 1469

百度ai之鉴黄接口

配置完成后,我们就可以写代码了。

xrkhy的博客 1202

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

阿里云人工智能实战第一枪:图片鉴黄节省90%费用

随着内容审核的要求越来越严,图片鉴黄几乎是所有做UGC内容应用的标配了。最近在阿里云上搭建了图片鉴黄的应用,发现如果结合阿里云的鉴黄接口和自建人工智能鉴黄系统,可以节省至少85%的费用。 1. 直接使用阿里云的图片鉴黄接口 阿里云的图片鉴黄服务基于深度学习技术神经网络算法,经笔者实测准确率比较高,对图片数量不太高的场景,可以直接使用。如果你的服务和数据都是部署在阿里云上的话,那么所有的数据通讯...

weixin_30662849的博客 1271

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

AI图片鉴黄检测合规图片API

人工智能鉴黄是通过深度学习目标检测、图像分类、特征检索等技术对图像中的局部和全局信息进行分析,捕获不同类型的色情内容,此外系统还会通过OCR、标志识别、水印检测等技术手段协助判断隐藏在图像视频中的敏感内容,包括色情微信推广、色情APP、个人联系方式等。\

qq_48896417的博客 1758

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

声音鉴黄师饱受摧残,AI声音鉴黄师为何没帮上忙?

文|雷宇 来源|智能相对论(aixdlun)   人民对性的态度向来很奇怪,父母和长辈期待子女能无师自通,教育者三缄其口,最后少男少女通过其他渠道实现了对性的初级摸索,当然这个摸索过程就很曲折了,文字,图片,视频和音频遍地开花,“学习资料”越来越方便传播。   食也性也,但传播色情内容却有极大的负外部效应,懵懂少男少女极易受其蛊惑,鉴黄师的重要性可想而知。在苹果商店的社交App中,有超过...

sinat_32970179的博客 1331

他们要消失了吗?探访人工智能浪潮下的鉴黄师

鉴黄师是怎样的一个群体?   在搜索引擎里键入“鉴黄师”,会有数百万的相关结果。在知乎里,输入同样的关键字,也有各种各样的问题和回答。   “如果不考虑薪水、尊严、面子,你最想从事什么工作?”有人就回答了三个字:“鉴黄师”,答案获得了上千点赞,数百评论。尽管有一些人向往鉴黄师,但鉴黄师这个岗位,在大多数人的眼里却是一个世界黑暗、心理伤害重的岗位。外媒报道,内容审查(鉴黄师的另外个名称)是科...

2944

Tumblr扫黄正式开始!AI鉴黄也许是老司机们的头号敌人

机器之心原创,作者:李亚洲、李泽南。大家喜闻乐见的 Tumblr(汤不热)凉了……12 月初,美国著名图片博客网站 Tumblr 宣布将全面禁止任何成人内容。新规定将于 12 月 17 日正式施行。这一行为看来是主动在和「互联网的 30% 流量」说再见,长久混迹 Tumblr 的老司机们送了一首「凉凉」予它。自 2007 年上线以来,Tumblr 一直以允许 NSFW 内容而闻名(也可能是臭名昭著...

weixin_33690367的博客 2590

AI算法起家的今日头条为何败给了色情?一文告诉你机器学习何以搞不定鉴黄

12月29日,国家互联网信息办公室在官网发布消息称,针对今日头条、凤凰新闻手机客户端持续传播色情低俗信息、违规提供互联网新闻信息服务等问题,要求北京市互联网信息办公室分别约谈两家企业负责人,责令企业立即停止违法违规行为。对此,今日头条乖乖表示,依据有关部门的整改要求, 今日头条手机客户端“推荐”、“热点”、“社会”、“图片”、“问答”、“财经”6个频道自2017年12月29日18时至次日18时暂停

AI科技大本营 2518

免费图片鉴黄合规检测服务分享

人工智能鉴黄是通过深度学习目标检测、图像分类、特征检索等技术对图像中的局部和全局信息进行分析,捕获不同类型的色情内容,此外系统还会通过OCR、标志识别、水印检测等技术手段协助判断隐藏在图像视频中的敏感内容,包括色情微信推广、色情APP、个人联系方式等。

qq_48896417的博客 3073

AI鉴黄开发(1):项目启动,pyqt5初探

前言 在假期的时候就想要做一个AI鉴黄过滤的小应用,说是鉴黄,后期会开发更多的功能,先在电脑上开发,效果后,后期在考虑移植到手机上。 项目概述 想的是在用户打开一个网站的时候,会先进行定向性的过滤,文本和图像可能都会用到吧,像有些钓鱼网站和黄色网站我都会先过滤一遍的。这个后期再说。 具体思路是:先得到用户想要访问的网站,然后先访问这个网站,进行信息获取,之后进行模型推理,然后做出反应。大概的流程就是这样: Created with Raphaël 2.3.0获取网站提取信息进行模型推理做出反应 获取网站信息

weixin_46421489的博客 603

一网打尽“小黄图”!手把手教你造一只AI鉴黄神器(内附代码及数据集)

大数据文摘出品作者:蒋宝尚鉴黄师是一个因为“扫黄打非”的需要而设立的特殊岗位。在互联网色情内容暴增的情况下其在净化网络的任务中扮演着非常重要的角色。然而长期面对大量色情内容的刺激使这类工作者往往要承受心理、生理的双重压力。机器学...

3155

“AI鉴黄师”数据采集标注方案上线

人工智能技术除了在自动驾驶,智能安防,智慧金融等领域得到广泛应用,在互联网内容审核领域也发挥着巨大价值,AI鉴黄就是应用之一。对AI内容审核技术来说,高质量的训练数据集必不可少,景联文为相关技术服务厂商提供数据解决方案,包括敏感色情数据库,定制化数据采集,定制化数据标注等服务。 社交网络平台的信息传播具有迅速、碎片化的特点,软色情、打擦边球的低俗内容更容易获取流量,污染平台内容环境,是全球内容平台治理的共同难题。这几年随着直播和短视频的爆发,加剧了网络低俗内容的泛滥,在此背景下,国家对内容审核的要求越来越

weixin_55551028的博客 1737
上一篇: C#开发添加后缀名工具之新建项目窗体结构
噗噗噗~
博客等级 码龄12年 2粉丝 3原创
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值