Community Server 作业系统

        作业系统是使用Timer对象使背景程序定期运行的一个框架,CS利用作业系统建立搜索索引等操作。CS的作业系统具有可配置性和可扩展性的优点,你很容易使用它创建更多的作业。

        首先,作业的启动和停止需要在程序的启动和关闭进行,所以要有一个Module进行注册,在CS里就写在CSHttpModule中了。
None.gifpublic class CSHttpModule : IHttpModule
ExpandedBlockStart.gifContractedBlock.gif
dot.gif{
InBlock.gif        
public void Init(HttpApplication application)
ExpandedSubBlockStart.gifContractedSubBlock.gif        
dot.gif{
InBlock.gif            Jobs.Instance().Start();
//作业启动
ExpandedSubBlockEnd.gif
        }

InBlock.gif        
InBlock.gif        
public void Dispose()
ExpandedSubBlockStart.gifContractedSubBlock.gif        
dot.gif{
InBlock.gif            Jobs.Instance().Stop(); 
//用业关闭
ExpandedSubBlockEnd.gif
        }

ExpandedBlockEnd.gif}

        作业系统需要几个类相互配合进行工作,分别是:Jobs、Job、IJob和实际IJob的工作类,如:PostAttachmentCleanupJob等。

        Jobs类的Start()方法用于提取communityserver.config中设置作业列表,并实例化出对应的Job对象列表,在Job对象的InitializeTimer()期间,作业就会被启动,如果作业配置中使用了"singleThread = false",则作业会在单独的Timer对象中启动,可以设置自已的间隔时间,否则作业会在统一的一个Timer对象中启动,间隔时间都是统一的,默认情况下间隔时间为15分钟,可以通过配置minutes设置间隔时间。
        Timer对象在实例化过程中会调用一个委托对象,用于循环作业时间,如:
None.gifsingleTimer = new Timer(new TimerCallback(call_back),null,Interval, Interval);
在call_back方法中,会循环设置作业的下一个运行时间:
None.gif        private void call_back(object state)
ExpandedBlockStart.gifContractedBlock.gif        
dot.gif{
InBlock.gif            _isRunning 
= true;
InBlock.gif            _started 
= DateTime.Now;
InBlock.gif            singleTimer.Change( Timeout.Infinite, Timeout.Infinite );
InBlock.gif         
InBlock.gif            
foreach(Job job in jobList.Values)
ExpandedSubBlockStart.gifContractedSubBlock.gif            
dot.gif{
InBlock.gif                
if(job.Enabled && job.SingleThreaded)
ExpandedSubBlockStart.gifContractedSubBlock.gif                
dot.gif{
InBlock.gif                    job.ExecuteJob();
ExpandedSubBlockEnd.gif                }

ExpandedSubBlockEnd.gif            }

InBlock.gif
InBlock.gif            singleTimer.Change( Interval, Interval);
InBlock.gif            _isRunning 
= false;
InBlock.gif            _completed 
= DateTime.Now;
ExpandedBlockEnd.gif        }
其中singleTimer.Change( Timeout.Infinite, Timeout.Infinite );表明必须完成作业指定的任务,才会开始下一个循环。

        Job对象是存储一些配置信息和单独启动Timer对象。
        IJob接口定义了使用作业系统的作业类必须实现的方法void Execute(XmlNode node);实现IJob接口的作业类从参数XmlNode node提取一些有用的配置信息,则可以有助于作业的运行。如:PostAttachmentCleanupJob类
None.gif    public class PostAttachmentCleanupJob : IJob
ExpandedBlockStart.gifContractedBlock.gif    
dot.gif{
InBlock.gif        
public PostAttachmentCleanupJob()
ExpandedSubBlockStart.gifContractedSubBlock.gif        
dot.gif{
ExpandedSubBlockEnd.gif        }

InBlock.gif
InBlock.gif        
public void Execute(XmlNode node)
ExpandedSubBlockStart.gifContractedSubBlock.gif        
dot.gif{
InBlock.gif            XmlAttribute expiresAfterHoursNode 
= node.Attributes["expiresAfterHours"];
InBlock.gif            
int expiresAfterHours = 2;
InBlock.gif
InBlock.gif            
if(expiresAfterHoursNode != null)
ExpandedSubBlockStart.gifContractedSubBlock.gif            
dot.gif{
ExpandedSubBlockStart.gifContractedSubBlock.gif                
try dot.gif{ expiresAfterHours = int.Parse(expiresAfterHoursNode.Value); }
ExpandedSubBlockStart.gifContractedSubBlock.gif                
catch dot.gif{ expiresAfterHours = 2; }
ExpandedSubBlockEnd.gif            }

InBlock.gif
InBlock.gif            CommonDataProvider dp 
= CommonDataProvider.Instance();
InBlock.gif            dp.ExpireTemporaryPostAttachments(DateTime.Now.AddHours(
-expiresAfterHours));
ExpandedSubBlockEnd.gif        }

ExpandedBlockEnd.gif    }
通过获取节点expiresAfterHours的值可以设置清除提定时间前的临时附件。如果你要定义一个新的作业,则只需添加一个作业类并实现IJob接口,并写在配置文件中。

转载于:https://www.cnblogs.com/chenjunbiao/archive/2006/06/29/1760248.html

资源下载链接为: https://pan.quark.cn/s/140386800631 通用大模型文本分类实践的基本原理是,借助大模型自身较强的理解和推理能力,在使用时需在prompt中明确分类任务目标,并详细解释每个类目概念,尤其要突出类目间的差别。 结合in-context learning思想,有效的prompt应包含分类任务介绍及细节、类目概念解释、每个类目对应的例子和待分类文本。但实际应用中,类目和样本较多易导致prompt过长,影响大模型推理效果,因此可先通过向量检索缩小范围,再由大模型做最终决策。 具体方案为:离线时提前配置好每个类目的概念及对应样本;在线时先对给定query进行向量召回,再将召回结果交给大模型决策。 该方法不更新任何模型参数,直接使用开源模型参数。其架构参考GPT-RE并结合相关实践改写,加入上下文学习以提高准确度,还使用BGE作为向量模型,K-BERT提取文本关键词,拼接召回的相似例子作为上下文输入大模型。 代码实现上,大模型用Qwen2-7B-Instruct,Embedding采用bge-base-zh-v1.5,向量库选择milvus。分类主函数的作用是在向量库中召回相似案例,拼接prompt后输入大模型。 结果方面,使用ICL时accuracy达0.94,比bert文本分类的0.98低0.04,错误类别6个,处理时添加“家居”类别,影响不大;不使用ICL时accuracy为0.88,错误58项,可能与未修改prompt有关。 优点是无需训练即可有较好结果,例子优质、类目界限清晰时效果更佳,适合围绕通用大模型api打造工具;缺点是上限不高,仅针对一个分类任务部署大模型不划算,推理速度慢,icl的token使用多,用收费api会有额外开销。 后续可优化的点是利用key-bert提取的关键词,因为核心词语有时比语意更重要。 参考资料包括
内容概要:本文详细介绍了哈希表及其相关概念和技术细节,包括哈希表的引入、哈希函数的设计、冲突处理机制、字符串哈希的基础、哈希错误率分析以及哈希的改进与应用。哈希表作为一种高效的数据结构,通过键值对存储数据,能够快速定位和检索。文中讨论了整数键值和字符串键值的哈希方法,特别是字符串哈希中的多项式哈希及其优化方法,如双哈希和子串哈希的快速计算。此外,还探讨了常见的冲突处理方法——拉链法和闭散列法,并提供了C++实现示例。最后,文章列举了哈希在字符串匹配、最长回文子串、最长公共子字符串等问题中的具体应用。 适合人群:计算机科学专业的学生、算法竞赛选手以及有一定编程基础并对数据结构和算法感兴趣的开发者。 使用场景及目标:①理解哈希表的工作原理及其在各种编程任务中的应用;②掌握哈希函数的设计原则,包括如何选择合适的模数和基数;③学会处理哈希冲突的方法,如拉链法和闭散列法;④了解并能运用字符串哈希解决实际问题,如字符串匹配、回文检测等。 阅读建议:由于哈希涉及较多数学知识和编程技巧,建议读者先熟悉基本的数据结构和算法理论,再结合代码实例进行深入理解。同时,在实践中不断尝试不同的哈希策略,对比性能差异,从而更好地掌握哈希技术。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值