在上篇随笔《
Winform开发框架之通用定时服务管理
》介绍了我的框架体系中,通用定时服务管理模块的设计以及一些相关功能的展示。我们在做项目的时候,或多或少需要和其他外部系统或者接口进行数据交互,有些是单向的获取,有些是双向的操作。这个定时操作(可能是间隔的时间,也可以能是定在某一个时刻,也可以能是让它在某天某时刻运行),那么这就需要定时服务程序来管理了,通常我们把他寄宿在Windows服务里面(这也是一种最佳的方式),这种方式最好的地方,就是它的生命周期可以随着电脑的启动而启动,而且很少需要用户干预。
1、通用定时服务管理模块框架设计
首先我们回顾一下上面文章对通用定时服务管理模块的设计思路。
整个定时服务的插件设计框架如下所示。
Windows定时服务-文件视图如下所示:
2、如何进行定时服务应用的开发
虽然看起来还是有那么几个文件,其实由于是整个框架是基于插件式的架构,因此但我们开发定时服务应用的时候(如最底下的有黑框的部分),只需要引用插件模块WHC.MyTimingPlugIn.dll并实现ITimingPlugIn接口即可,如上面的
WarningService.dll
就是一个典型的例子。
这个
WarningService
项目就是一个很好的测试例子,它只有一个类,类实现接口ITimingPlugIn。
public classTestService : ITimingPlugIn
{#region ITimingPlugIn 成员
/// <summary>
///操作进度状态事件/// </summary>
public eventProgressChangedEventHandler ProgressChanged;public boolExcute()
{
Thread.Sleep(1000);if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(20, "操作进行中...20%"));
}//实际工作处理1
Thread.Sleep(1000);if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(50, "操作进行中...50%"));
}//实际工作处理2
Thread.Sleep(1000);if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(80, "操作进行中...80%"));
}//实际工作处理3:输出内容,作为处理的记录
LogTextHelper.WriteLine(string.Format("{0}......{1}", this.Name, DateTime.Now));
Thread.Sleep(1000);if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(100, "操作完成"));
}return true;
}/// <summary>
///插件程序名称/// </summary>
public stringName
{get;set;
}/// <summary>
///插件详细配置/// </summary>
publicPlugInSetting Setting
{get;set;
}#endregion}
开发编译通过后,我们需要为该定时服务应用,在插件XML配置上增加一个这样的说明,让服务程序能够正常加载并识别。
<?xml version="1.0"?>
<ArrayOfPlugInSetting>
<PlugInSetting>
<!--插件程序名称-->
<Name>测试名称</Name>
<!--插件描述内容-->
<Description>测试描述</Description>
<!--运行同步服务的间隔时间(单位:分钟)-->
<ServiceCycleMinutes>1</ServiceCycleMinutes>
<!--Windows服务在固定时刻(0~23时刻)运行-->
<ServiceRunAtHour>23</ServiceRunAtHour>
<!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
<ServiceRunAtDay>1</ServiceRunAtDay>
<!--运行模式,0为间隔分钟运行 1为固定时刻运行, 2为按月某天和小时 其他值为禁用-->
<RunMode>0</RunMode>
<!--插件的类型名称:插件类名,程序集名称-->
<PlugInTypeName>WarningServcie.TestService,WarningServcie</PlugInTypeName>
</PlugInSetting>
</ArrayOfPlugInSetting>
上面工作完成后,在正式部署到服务器正式环境前,我们需要检查开发模块是否正常执行,是否正常运行里面的逻辑。那就用到管理程序了。
运行这个程序,除了它具有安装服务、卸载服务、启动、停止、重新启动、刷新服务等这些服务操作外,还提供了DOS测试的功能,让我们在没有部署到Windows服务前,直接进行逻辑测试,很方便的哦。
运行,我们可以看到DOS窗口的输出内容了(我们在实现内部调用的
if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(20, "操作进行中...20%"));
}
就是为了在DOS或者其他通知界面上显示日志信息的。
当然,为了验证处理逻辑,刚才我们也在内部做了记录,我们查看Log/Log.txt日志文件后,我们看到输出的结果如下所示。我们通过日志进行记录,这样可以详细看到具体的操作了。
以上就是一个简单测试应用的实现和测试过程,其他的定时应用服务也是这样实现插件接口就可以部署了。界面管理、服务管理、插件管理这些都是通用模块负责的工作,不需要变动和修改。
3、基于实际WebService同步程序的开发
上面介绍的是一个简单的例子,在我们实际开发过程中,比这个例子肯定负责很多,不过过程是一样的,下面我们来看看我一个实际定时业务应用的具体开发吧。
和上面例子一样,添加一个项目,应用插件模块dll,然后实现接口的内容,不同的是这里引用了一个WebService进行操作,因为需要把Webservice里面的数据保存到本地数据库里面(也就是所谓的同步接口)。
以上的就是一个定时服务应用的类,它实现ITimingPlugIn接口,关键的部分就是如何实现Execute接口了。
由于Webservice接口返回的数据字段比较多,有些可能不一定是我们需要存储的,在实际中发现,有些如PK字段,还有一些以Specified结尾的字段,好像是自动增加上去的。这些我们可能都不需要写到数据库里面去,而且以后WebService可能会增加一些字段,所以得到下面的结论。
1)不能以反射WebService实体类作为基准字段存储。
2)考虑尽可能通用的保存数据,最好字段不用每次都硬编码到代码,因为很多内容的。
3)可以通过获取数据库表的字段作为基准,如果webService实体类也存在该字段,作为写入依据。
从上面的几个经验总结来看,我们需要写一个以数据库表为基准,编写一个通用的服务保存机制函数,来看看如何实现的。
首先通过WebService定义,创建好需要写入的数据库字段(字段必须和WebService同名哦)
然后引入一个辅助类,来获取数据库表字段的信息列表。
/// <summary>
///通过获取表的元数据方式获取字段信息的辅助类/// </summary>
public classTableSchemaHelper
{/// <summary>
///获取指定表的元数据,包括字段名称、类型等等/// </summary>
/// <param name="tableName">数据库表名</param>
/// <returns></returns>
private static DataTable GetReaderSchema(stringtableName)
{
DataTable schemaTable= null;string sql = string.Format("Select * FROM {0}", tableName);
Database db=DatabaseFactory.CreateDatabase();
DbCommand command=db.GetSqlStringCommand(sql);try{using (IDataReader reader =db.ExecuteReader(command))
{
schemaTable=reader.GetSchemaTable();
}
}catch(Exception ex)
{
LogTextHelper.Error(ex);
}returnschemaTable;
}/// <summary>
///获取指定数据表字段/// </summary>
/// <param name="tableName">数据库表名</param>
/// <returns></returns>
public static List<string> GetColumns(stringtableName)
{
DataTable schemaTable=GetReaderSchema(tableName);
List<string> list = new List<string>();foreach (DataRow dr inschemaTable.Rows)
{string columnName = dr["ColumnName"].ToString();
list.Add(columnName);
}returnlist;
}/// <summary>
///获取指定数据表字段,并转化为小写列表/// </summary>
/// <param name="tableName">数据库表名</param>
/// <returns></returns>
public static List<string> GetColumnsLower(stringtableName)
{
DataTable schemaTable=GetReaderSchema(tableName);
List<string> list = new List<string>();foreach (DataRow dr inschemaTable.Rows)
{string columnName = dr["ColumnName"].ToString();
list.Add(columnName.ToLower());
}returnlist;
}
具体的接口实现函数如下所示。
public boolExcute()
{
ShareAccService service= newShareAccService();var list = service.getAccList4Deal(unitLogo, undertaker_c, 1, 10);int count =list.Length;int i = 1;foreach (shareEmitfileSimpleVO obj inlist)
{int step = Convert.ToInt32(100 * Convert.ToDouble(i) /list.Length);//保存列表信息
SaveToDatabase(obj, "MAYOR_EMIT_LIST", "ACCID", obj.accid, step);//获取并保存明细信息
shareAccVO accVo =service.getDetailAcc4Deal(unitLogo, undertaker_c, obj.accid, obj.emitid);
SaveToDatabase(accVo,"MAYOR_EMIT_DETAIL", "ACCID", accVo.accid, step);//保存明细信息里面的复函信息
if (accVo.shareEmitfileVOs != null)
{foreach (shareEmitfileVO fileVo inaccVo.shareEmitfileVOs)
{
SaveToDatabase(accVo,"MAYOR_EMIT_ANSWER", "id", fileVo.id, step);
}
}//保存附件列表信息
List<string> attachList = new List<string>();if (accVo.shareAttachmentVOs != null)
{foreach (shareAttachmentVO attach inaccVo.shareAttachmentVOs)
{
attachList.Add(attach.id);
SaveToDatabase(attach,"MAYOR_EMIT_FILE", "id", attach.id, step);
}
}
i++;
}return true;
}
我们注意到,关键的逻辑其实就是看SaveToDatabase如何实现通用的数据库保存
首先,我们需要通过反射方法看看具体有哪些实体类字段属性。
PropertyInfo[] proList = ReflectionUtil.GetProperties(obj);
然后看看数据库字段列表
List<string> columnList = TableSchemaHelper.GetColumnsLower(targetTable);
获得这两个信息,我们就可以对他们进行比较,然后确定哪些数据写入数据库里面(安全的写入数据库)。
PropertyInfo[] proList =ReflectionUtil.GetProperties(obj);
Dictionary<string, object> recordField = new Dictionary<string, object>();try{//为了避免接口变化以及WebService对象的一些额外字段干扰,以数据库字段为准
#region 组装字段语句List<string> columnList =TableSchemaHelper.GetColumnsLower(targetTable);foreach (PropertyInfo info inproList)
{if (!recordField.ContainsKey(info.Name) &&columnList.Contains(info.Name.ToLower()))
{
recordField.Add(info.Name, ReflectionUtil.GetProperty(obj, info.Name));
}
}
其中recordField就是记录了,我们需要写入数据库的字段名称和值,这样我们就方便构建相应的操作语句和参数值了。
参数化语句构建如下所示:
string fields = ""; //字段名
string vals = ""; //字段值
foreach (string field inrecordField.Keys)
{
fields+= string.Format("{0},", field);
vals+= string.Format(":{0},", field);
}
fields= fields.Trim(',');//除去前后的逗号
vals = vals.Trim(',');//除去前后的逗号
string sql = string.Format("INSERT INTO {0} ({1}) VALUES ({2})", targetTable, fields, vals);#endregion
当然,我们写入前,为了避免重复同步,因此需要对以存在的记录进行判断,重复的跳过。
string existSql = string.Format("Select Count(*) from {0} WHERE {1}='{2}'", targetTable, primaryKey, keyValue);
Database db=DatabaseFactory.CreateDatabase();
DbCommand command=db.GetSqlStringCommand(existSql);bool hasExist = Convert.ToInt32(db.ExecuteScalar(command)) > 0;if (!hasExist)
{
在数据库不存在的记录要添加到数据库里面,如下代码所示。
//不存在则要插入
command =db.GetSqlStringCommand(sql);foreach (string field inrecordField.Keys)
{object val =recordField[field];
val= val ??DBNull.Value;if (val isDateTime)
{if (Convert.ToDateTime(val) <= Convert.ToDateTime("1753-1-1"))
{
val=DBNull.Value;
}
}
db.AddInParameter(command, field, TypeToDbType(val.GetType()), val);
}bool result = db.ExecuteNonQuery(command) > 0;if(result)
{string tips = string.Format("操作表【{0}】的记录成功,{1}={2}", targetTable, primaryKey, keyValue);if (ProgressChanged != null)
{
ProgressChanged(this, newProgressChangedEventArgs(step, tips));
}
}
完整的SaveToDatabase函数如下所示(为了他人方便,也方便自己日后使用。呵呵...):
/// <summary>
///保存指定的记录对象到数据库/// </summary>
private void SaveToDatabase(object obj, string targetTable, string primaryKey, string keyValue, intstep)
{if (string.IsNullOrEmpty(targetTable) || string.IsNullOrEmpty(primaryKey) ||
string.IsNullOrEmpty(keyValue))return;if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(step, string.Format("正在处理表【{0}】{1} = {2} 的记录。", targetTable, primaryKey, keyValue)));
}if (obj != null)
{
PropertyInfo[] proList=ReflectionUtil.GetProperties(obj);
Dictionary<string, object> recordField = new Dictionary<string, object>();try{//为了避免接口变化以及WebService对象的一些额外字段干扰,以数据库字段为准
#region 组装字段语句List<string> columnList =TableSchemaHelper.GetColumnsLower(targetTable);foreach (PropertyInfo info inproList)
{if (!recordField.ContainsKey(info.Name) &&columnList.Contains(info.Name.ToLower()))
{
recordField.Add(info.Name, ReflectionUtil.GetProperty(obj, info.Name));
}
}string fields = ""; //字段名
string vals = ""; //字段值
foreach (string field inrecordField.Keys)
{
fields+= string.Format("{0},", field);
vals+= string.Format(":{0},", field);
}
fields= fields.Trim(',');//除去前后的逗号
vals = vals.Trim(',');//除去前后的逗号
string sql = string.Format("INSERT INTO {0} ({1}) VALUES ({2})", targetTable, fields, vals);#endregion
#region 判断指定键值的记录是否存在并写入新的
string existSql = string.Format("Select Count(*) from {0} WHERE {1}='{2}'", targetTable, primaryKey, keyValue);
Database db=DatabaseFactory.CreateDatabase();
DbCommand command=db.GetSqlStringCommand(existSql);bool hasExist = Convert.ToInt32(db.ExecuteScalar(command)) > 0;if (!hasExist)
{//不存在则要插入
command =db.GetSqlStringCommand(sql);foreach (string field inrecordField.Keys)
{object val =recordField[field];
val= val ??DBNull.Value;if (val isDateTime)
{if (Convert.ToDateTime(val) <= Convert.ToDateTime("1753-1-1"))
{
val=DBNull.Value;
}
}
db.AddInParameter(command, field, TypeToDbType(val.GetType()), val);
}bool result = db.ExecuteNonQuery(command) > 0;if(result)
{string tips = string.Format("操作表【{0}】的记录成功,{1}={2}", targetTable, primaryKey, keyValue);if (ProgressChanged != null)
{
ProgressChanged(this, newProgressChangedEventArgs(step, tips));
}
}
}#endregion}catch(Exception ex)
{string tips = string.Format("操作表【{0}】的记录出错,{1}={2}", targetTable, primaryKey, keyValue);if (ProgressChanged != null)
{
ProgressChanged(this, newProgressChangedEventArgs(step, tips));
}
LogTextHelper.Error(tips);string description = "";foreach (string field inrecordField.Keys)
{
description+= string.Format("{0}={1},", field, recordField[field]);
}
LogTextHelper.Info(description);
LogTextHelper.Error(ex);
}
}
}
开发完成后,我们在添加XML插件配置信息,如下所示
<?xml version="1.0"?>
<ArrayOfPlugInSetting>
<PlugInSetting>
<!--插件程序名称-->
<Name>测试名称</Name>
<!--插件描述内容-->
<Description>测试描述</Description>
<!--运行同步服务的间隔时间(单位:分钟)-->
<ServiceCycleMinutes>1</ServiceCycleMinutes>
<!--Windows服务在固定时刻(0~23时刻)运行-->
<ServiceRunAtHour>23</ServiceRunAtHour>
<!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
<ServiceRunAtDay>1</ServiceRunAtDay>
<!--运行模式,0为间隔分钟运行 1为固定时刻运行, 2为按月某天和小时 其他值为禁用-->
<RunMode>0</RunMode>
<!--插件的类型名称:插件类名,程序集名称-->
<PlugInTypeName>WarningServcie.TestService,WarningServcie</PlugInTypeName>
</PlugInSetting>
<PlugInSetting>
<!--插件程序名称-->
<Name>热线数据同步</Name>
<!--插件描述内容-->
<Description>测试描述</Description>
<!--运行同步服务的间隔时间(单位:分钟)-->
<ServiceCycleMinutes>1</ServiceCycleMinutes>
<!--Windows服务在固定时刻(0~23时刻)运行-->
<ServiceRunAtHour>23</ServiceRunAtHour>
<!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
<ServiceRunAtDay>1</ServiceRunAtDay>
<!--运行模式,0为间隔分钟运行 1为固定时刻运行, 2为按月某天和小时 其他值为禁用-->
<RunMode>1</RunMode>
<!--插件的类型名称:插件类名,程序集名称-->
<PlugInTypeName>MayorHotlineService.DownDataService,MayorHotlineService</PlugInTypeName>
</PlugInSetting>
</ArrayOfPlugInSetting>
这样开发完成后,我们需要对服务进行一次测试,确认逻辑正常。
最后利用管理界面的
安装服务
,把它部署上去就可以了,这样它就以Windows服务的形式进行运行,不用再进行干预了。