从Socket数据处理线程想到的普通Winform数据显示的应用

简介:

在前面介绍过Socket编程的文章中,有一篇是《Socket开发探秘--基类及公共类的定义》,其中介绍了一个独立线程处理类,专门在一个独立的线程中处理Socket的数据包的。摘录前面的内容介绍一下:

5 、ThreadHandler,数据独立线程处理类

对每个不同类型的数据(不同的协议类型),可以用独立的线程进行处理,这里封装了一个基类,用于进行数据独立线程的处理 

上面的工作原理是这样的,每次收到数据后,系统把数据扔给独立线程处理类,处理类放到一个队列Queue的列表中,每次从中弹出一个来处理,根据不同的协议头,分派到不同的线程来处理,这样可以提高响应速度,防止线程之间的阻塞,能够充分利用系统的资源。

 其实我们还可以把这个思想应用到日常的Winform开发中,有时候我们可能在处理一些比较费时的操作,可能是需要做一部分显示一部分,类似日常生活中的项目周报、月周报的场景,因为不可能等一个几年的项目完成后,你才告诉老板你的工作情况吧。

 借鉴Socket的数据处理方式,我在Winform程序中运用了这种数据处理方式,如我在采集赶集网的数据的时候,可以把采集到的部分数据扔给系统中的数据独立处理线程,让他们爱怎么显示就怎么显示,程序不中断,继续乐此不彼的去采集内容去,然后继续这样做(每采集一部分仍出去一部分),直到采集完毕。

     public   class  ThreadHandler < T >
    {
        
///   <summary>
        
///  处理数据线程
        
///   </summary>
        Thread _Handlehread  =   null ;
        
private   string  _ThreadName  =   "" ;
        
private  Fifo < T >  _DataFifo  =   new  Fifo < T > ();

        
///   <summary>
        
///  线程名字
        
///   </summary>
         public   string  ThreadName
        {
            
get  {  return  _ThreadName; }
            
set  { _ThreadName  =  value; }
        }

        
///   <summary>
        
///  接收处理数据
        
///   </summary>
        
///   <param name="data"></param>
         public   virtual   void  AppendData(T data)
        {
            
if  (data  !=   null )
                _DataFifo.Append(data);
        }

        
///   <summary>
        
///  数据处理
        
///   </summary>
         protected   virtual   void  DataThreadHandle()
        {
            
try
            {
                
while  ( true )
                {
                    T data 
=  _DataFifo.Pop();
                    DataHandle(data);
                }
            }
            
catch (Exception ex)
            {
                LogHelper.Error(ex);
            }
        }

        
///   <summary>
        
///  数据处理
        
///   </summary>
        
///   <param name="data"></param>
         public   virtual   void  DataHandle(T data)
        {
        }

        
///   <summary>
        
///  开始数据处理线程
        
///   </summary>
         public   virtual   void  StartHandleThread()
        {
            
if  (_Handlehread  ==   null )
            {
                _Handlehread 
=   new  Thread( new  ThreadStart(DataThreadHandle));
                _Handlehread.IsBackground 
=   true ;
                _Handlehread.Start();
            }
            LogHelper.Info(
string .Format( " [ThreadHandler] 线程->{0}启动。。。。。。 " , _ThreadName));
        }

上面的是独立线程处理的基类,下面我们用一个子类继承他,方便代码逻辑的剥离封装:

在下面的代码中,我根据不同的Table表内容类型,放到不同的函数中进行处理,以便实现不同的显示方式。 

     public   class  TestDataHandleThread : ThreadHandler < PreData >
    {
        
public  TestDataHandleThread()
        {
            
base .ThreadName  =   " 测试数据操作处理线程 " ;
        }

        
public   override   void  DataHandle(PreData data)
        {
            
try
            {
                
if  (data.Key  ==  KeyType.PostAticle)
                {
                    
if  ( ! string .IsNullOrEmpty(data.Content.TableName))
                    {
                        ThreadPool.QueueUserWorkItem(
new  WaitCallback(Portal.gc.MainDialog.DisplayForm), data.Content);
                    }
                }
                
else   if  (data.Key  ==  KeyType.ContactInfo)
                {
                    
if  ( ! string .IsNullOrEmpty(data.Content.TableName))
                    {
                        ThreadPool.QueueUserWorkItem(
new  WaitCallback(Portal.gc.MainDialog.DisplayContactForm), data.Content);
                    }
                }
            }
            
catch  (Exception ex)
            {
                LogHelper.Error(
" [TestDataHandleThread] 测试数据操作处理线程异常:{0} "   +  ex.ToString());
            }
        }
    }

下面代码是表的不同类型的枚举类和预处理数据格式定义。

     public   enum  KeyType{PostAticle, ContactInfo};

    
///   <summary>
    
///  预处理的数据
    
///   </summary>
     public   class  PreData
    {
        
private  KeyType key;
        
private  DataTable content;

        
public  KeyType Key
        {
            
get  {  return  key; }
            
set  { key  =  value; }
        }

        
public  DataTable Content
        {
            
get  {  return  content; }
            
set  { content  =  value; }
        }

        
public  PreData(KeyType key, DataTable data)
        {
            
this .key  =  key;
            
this .content  =  data;
        }
    }

 在实际的赶集网采集程序中,我需要每采集一个链接的内容后,就处理并显示,因此示例代码如下所示:

         ///   <summary>
        
///  获取网站发布内容,并添加到线程进行处理
        
///   </summary>
        
///   <param name="itemDict"></param>
        
///   <param name="regexDict"></param>
         private   void  GetContent(Dictionary < string string >  itemDict)
        {
            
foreach  ( string  key  in  itemDict.Keys)
            {
                DataTable dt 
=   new  DataTable(key);

                
// 标题解析,省略N行代码
                
// 内容解析,省略N+N行代码

                
// 添加到线程进行处理
                Portal.gc.MainDialog.AddData( new  PreData(KeyType.PostAticle, dt));
            }
        }
         ///   <summary>
        
///  添加消息数据,根据不同的消息类型分派到不同的线程处理
        
///   </summary>
        
///   <param name="data"> 消息数据 </param>
         public   void  AddData(PreData data)
        {
            _testDataThread.AppendData(data);
        }

        
///   <summary>
        
///  采用多线程方式显示内容数据
        
///   </summary>
        
///   <param name="data"></param>
         public   void  DisplayForm( object  table)
        {
            DataTable data 
=  table  as  DataTable;
            FrmContent content 
=  FindDocument(data.TableName)  as  FrmContent;
            
if  (content  ==   null )
            {
                content 
=   new  FrmContent();
                content.TabText 
=  data.TableName;
                content.Text 
=  data.TableName;
            }           

            
this .Invoke( new  MethodInvoker( delegate ()
            {
                content.BindData(data, data.TableName);
                content.Show(
this .dockPanel);
            }));            
        }

好了,思路是思路,程序是程序,两者结合就是实践的证明,采集大量的网站连接的时候,在也不会出现主界面停顿或者假死的情况了。下面是我闲暇时间的练笔之作, 贴图以证方案之可行。

 

在采集的时候,整个程序再也不会出现假死的情况,你还可以去处理其他工作的。另外,由于涉及了线程的处理工作,你还需要定时检测处理线程,如果线程有问题,还需要重启线程就可以了,这部分是属于线程检查优化的部分,不再介绍。

本文转自博客园伍华聪的博客,原文链接:从Socket数据处理线程想到的普通Winform数据显示的应用,如需转载请自行联系原博主。



目录
相关文章
|
2月前
|
消息中间件 监控 安全
服务Down机了,线程池中的数据如何保证不丢失?
在分布式系统与高并发应用开发中,服务的稳定性和数据的持久性是两个至关重要的考量点。当服务遭遇Down机时,如何确保线程池中处理的数据不丢失,是每一位开发者都需要深入思考的问题。以下,我将从几个关键方面分享如何在这种情况下保障数据的安全与完整性。
60 2
|
2月前
|
开发者 Python
Python Socket编程:不只是基础,更有进阶秘籍,让你的网络应用飞起来!
在数字时代,网络应用成为连接世界的桥梁。Python凭借简洁的语法和丰富的库支持,成为开发高效网络应用的首选。本文通过实时聊天室案例,介绍Python Socket编程的基础与进阶技巧。基础篇涵盖服务器和客户端的建立与数据交换;进阶篇则探讨多线程与异步IO优化方案,助力提升应用性能。通过本案例,你将掌握Socket编程的核心技能,推动网络应用飞得更高、更远。
45 1
|
9天前
|
存储 并行计算 安全
C++多线程应用
【10月更文挑战第29天】C++ 中的多线程应用广泛,常见场景包括并行计算、网络编程中的并发服务器和图形用户界面(GUI)应用。通过多线程可以显著提升计算速度和响应能力。示例代码展示了如何使用 `pthread` 库创建和管理线程。注意事项包括数据同步与互斥、线程间通信和线程安全的类设计,以确保程序的正确性和稳定性。
|
15天前
|
监控 Java
在实际应用中选择线程异常捕获方法的考量
【10月更文挑战第15天】选择最适合的线程异常捕获方法需要综合考虑多种因素。没有一种方法是绝对最优的,需要根据具体情况进行权衡和选择。在实际应用中,还需要不断地实践和总结经验,以提高异常处理的效果和程序的稳定性。
17 3
|
19天前
|
调度 Android开发 开发者
构建高效Android应用:探究Kotlin多线程优化策略
【10月更文挑战第11天】本文探讨了如何在Kotlin中实现高效的多线程方案,特别是在Android应用开发中。通过介绍Kotlin协程的基础知识、异步数据加载的实际案例,以及合理使用不同调度器的方法,帮助开发者提升应用性能和用户体验。
36 4
|
19天前
|
缓存 安全 Java
使用 Java 内存模型解决多线程中的数据竞争问题
【10月更文挑战第11天】在 Java 多线程编程中,数据竞争是一个常见问题。通过使用 `synchronized` 关键字、`volatile` 关键字、原子类、显式锁、避免共享可变数据、合理设计数据结构、遵循线程安全原则和使用线程池等方法,可以有效解决数据竞争问题,确保程序的正确性和稳定性。
32 2
|
19天前
|
数据采集 存储 Java
Crawler4j在多线程网页抓取中的应用
Crawler4j在多线程网页抓取中的应用
|
26天前
|
数据挖掘 程序员 调度
探索Python的并发编程:线程与进程的实战应用
【10月更文挑战第4天】 本文深入探讨了Python中实现并发编程的两种主要方式——线程和进程,通过对比分析它们的特点、适用场景以及在实际编程中的应用,为读者提供清晰的指导。同时,文章还介绍了一些高级并发模型如协程,并给出了性能优化的建议。
25 3
|
26天前
|
Java 数据处理 数据库
Java多线程的理解和应用场景
Java多线程的理解和应用场景
45 1
|
6天前
|
Java 开发者
Java中的多线程基础与应用
【10月更文挑战第24天】在Java的世界中,多线程是提高效率和实现并发处理的关键。本文将深入浅出地介绍如何在Java中创建和管理多线程,以及如何通过同步机制确保数据的安全性。我们将一起探索线程生命周期的奥秘,并通过实例学习如何优化多线程的性能。无论你是初学者还是有一定经验的开发者,这篇文章都将为你打开一扇通往高效编程的大门。
11 0