-
一个C# 多线程的网页异步抓取类文件代码
一个C#编写的多线程异步抓取网页的网络爬虫控制台程序类代码,这个类实现对网页URL指定内容网页的抓取,并抓取 内容中的链接、文字内容、从HTML代码中分析出链接信息等,本类中还定义了大量的私有方法,从这些私有方法中可从HTML文本中提取出一定字数的纯文本、提取网页中一定字数的纯文本,包括链接文字、提取一定数量的链接,该链接的URL满足某正则式、提取本网页的纯文本中满足某正则式的文字等。
本代码作者:大黑。
本爬虫程序的速度如下:
10线程最快大概400个链接每分钟
6-8线程最快大概200-300个链接每分钟
2-4线程最快大概150-200个链接每分钟
单线程最快大概70-100个链接每分钟
之所以用多线程异步抓取完全是出于效率考虑,本程序多线程同步并不能带来速度的提升,只要抓取的网页不要太多重复和冗余就可以,异步并不意味着错误。
- 2023-05-03 15:55:03下载
- 积分:1
-
高仿微信源码
A high copy WeChat, written by Objective-C.高仿微信功能,后期会再加入XMPP协议
- 2022-01-31 11:53:32下载
- 积分:1
-
C#邮件收发程序 发Email和接收邮件
C#实现的一个邮件收发程序,功能主要是两大块,发送邮件和接收邮件,类似于一个邮件客户端的功能,在这个邮件发送程序中,写了几个函数分别实现相关的模块功能:
对获得连接的用户身份进行验证
获取登录邮箱的各种信息
判断返回的字符串信息,如果是“+OK”,证明登录成功,否则登录失败
根据输入的邮件编号读取邮件信息
获取由参数标识的邮件的全部文本
对读取的邮件内容进行Base64编码
“登录”按钮事件,实例化SmtpClient邮件发送类对象
初始化StreamReader对象,以便以流的形式读取远程主机中的内容
获取远程主机中指定用户的邮件信息
获得远程主机上指定邮件的相关信息,存储到一个string类型的数组中,数组中的内容包括:邮件日期、发信人、收信人、邮件主题、邮件内容等。
- 2022-04-23 02:56:49下载
- 积分:1
-
C#抓取(采集)糗事百科网站内容的源码
C#模拟采集获取指定网站内容的源码,获取糗事百科的笑话内容,有点像搜索引擎的爬虫,可以顺着链接获取网站资源,源代码将根据糗事百科笑话页面索引获取笑话页的html源码,根据网页的url获取网页的html源码,可以获取糗事百科网站的获取笑话列表,自动匹配匿名用户,注,本源码只是一个C#获取网页内容的示例,并不能真正用于采集,那需要额外完成更多的代码编写。
- 2022-04-17 12:56:51下载
- 积分:1
-
C# SQL按姓氏笔画查询数据库并排序
C# 生成一个按姓氏笔画排序的数据库查询语句,按学生姓氏笔画排序并不是字符串排序,是数据库SQL查询端的盒子,下面来看SQL语句的编写方法示例:
string P_Str_ConnectionStr = string.Format(//创建数据库连接字符串
@"server=WIN-GI7E47AND9RLS;database=db_TomeTwo;uid=sa;pwd=");
string P_Str_SqlStr = string.Format(//创建SQL查询字符串
@"SELECT 学生姓名,性别,年龄,所在学院 FROM tb_Student ORDER BY 学生姓名 COLLATE chinese_prc_stroke_cs_as_ks_ws");//注意此句的写法,关键语句,姓氏笔画的定义
SqlDataAdapter P_SqlDataAdapter = new SqlDataAdapter(//创建数据适配器
P_Str_SqlStr, P_Str_ConnectionStr);
DataTable P_dt = new DataTable();//创建数据表
P_SqlDataAdapter.Fill(P_dt);//填充数据表
return P_dt;//返回数据表
将查询出指定笔画顺序的学生姓名。
- 2022-12-24 13:00:03下载
- 积分:1
-
C#读取数据库内容并在dataGridView中显示
C#从数据库中读取内容并显示在dataGridView中,这似乎是一个很实用的功能,在数据库应用的时候,我们都要通过dataGridView来显示数据,这个例子可帮助初学者很好的掌握此功能的具体实现,一些代码片段分享如下:
private void button1_Click(object sender, EventArgs e)
{
//实例化SqlConnection变量conn,连接数据库
conn = new SqlConnection("server=.;database=db_15;uid=sa;pwd=");
//实例化SqlDataAdapter对象
SqlDataAdapter sda = new SqlDataAdapter("select * from tb_emp", conn);
DataSet ds = new DataSet(); //实例化DataSet对象
sda.Fill(ds);//使用SqlDataAdapter对象的Fill方法填充DataSet
dataGridView1.DataSource = ds.Tables[0];//设置dataGridView1控件的数据源
dataGridView1.RowHeadersVisible = false;//禁止显示行标题
//使用for循环设置控件的列宽
for (int i = 0; i < dataGridView1.ColumnCount; i++)
{
dataGridView1.Columns[i].Width = 84;
}
button1.Enabled = false;//禁用按钮
dataGridView1.Columns[0].ReadOnly = true;//将控件设置为只读
}
private DataTable dbconn(string strSql)//建立一个DataTable类型的方法
{
this.adapter = new SqlDataAdapter(strSql, conn);//实例化SqlDataAdapter对
- 2022-07-24 21:44:03下载
- 积分:1
-
一个国外的C# 3D图表例子及源码
一个国外的C# 3D图表例子及源码,不知道叫什么名字,有滚动条的应用,可用鼠标拖动改变图表的透视度,形成三维的图表效果,注释英文,有兴趣的自己下载源码研究吧。
- 2023-01-07 08:20:03下载
- 积分:1
-
螺丝服务端GMSV源码完整,可编译
螺丝完全服务端源码,GMSV,linux下完美编译
- 2022-05-31 17:22:32下载
- 积分:1
-
C# 将图像控件的定义导出为XAML文件
C# 将图像控件的定义导出为XAML文件,支持的图像文件:图像文件(JPeg,Gif,Bmp,etc,tiff,png)等。
string MyXAML= System.Windows.Markup.XamlWriter.Save(this.image1);
if (System.IO.File.Exists("MyXaml.xaml"))
System.IO.File.Delete("MyXaml.xaml");
System.IO.File.AppendAllText("MyXaml.xaml", MyXAML);
MessageBox.Show(MyXAML, "MyXaml.xaml文件的内容", MessageBoxButton.OK);
- 2022-04-14 09:51:54下载
- 积分:1
-
C# 含云台控制的视频监控系统源代码
C# 小型的视频监控系统完整源码,含有云台控制系统,主要功能如下:
1.支持云台控制,以监控各个角落。
2.可对监控画面进行快照和录像操作。
3.可以回放观看已经录制的视频的文件。
4.晚上的系统注册功能。
5.对云台的聚焦、对焦、光圈及雨刷的控制操作。操作者可通过“方向控制”区域下的各个按钮,对云台进行上、下、左、右控制。
系统管理员用户名为:Tsoft,密码为:111。
本系统中的“视频回放”模块时,需要在Windows XP或者更高版本Windows上运行,Windows7当然可以。
- 2022-01-26 04:29:13下载
- 积分:1