成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

ASP.NET數據采集的實現淺析

作者：孤獨的冰
開發 后端
ASP.NET數據采集的實現向你介紹了如何通過程序實現ASP.NET數據采集的功能，程序中使用了for循環來實現，希望對你有所幫助。

這是我自己寫的一個ASP.NET數據采集程序，是采集一個人才網里面人才的信息，第一次寫Blog，寫的不好不要見笑。

  1. //先按照下面的字段創建一個數據表  ，以便ASP.NET數據采集的歸納
  2.  
  3. 以下為引用的內容：  
  4. public partial class Form2 : Form  
  5.     {  
  6.         public Form2()  
  7.         {  
  8.             InitializeComponent();  
  9.         }  
  10.         //姓名  
  11.         public static string XM = "";  
  12.         //年齡  
  13.         public static string nl = "";  
  14.         //性別  
  15.         public static string XB = "";  
  16.         //身高  
  17.         public static string SG = "";  
  18.         //政治面貌  
  19.         public static string mm = "";  
  20.         //民族  
  21.         public static string MZ = "";  
  22.         //學歷  
  23.         public static string XL = "";  
  24.         //婚姻狀況  
  25.         public static string HK = "";  
  26.         //所學專業  
  27.         public static string ZY = "";  
  28.         //工作經驗  
  29.         public static string GZJY = "";  
  30.         //在職單位  
  31.         public static string ZZDW = "";  
  32.         //在職職位  
  33.         public static string ZZZW = "";  
  34.         //工作經歷  
  35.         public static string GZJL = "";  
  36.         //要求月薪  
  37.         public static string YX = "";  
  38.         //工作性質  
  39.         public static string GZXZ = "";  
  40.         //求職意向  
  41.         public static string QZYX = "";  
  42.         //具體職務  
  43.         public static string JTZW = "";  
  44.         //期望工作地  
  45.         public static string QWGZD = "";  
  46.         //教育情況，語言水平，技術專長  
  47.         public static string QT = "";   
  48.         private void button1_Click(object sender, EventArgs e)  
  49.         {  
  50.             label1.Text = "正在采集數據……";  
  51.  
  52.      //遍歷數據的頁數   
  53.             for (int i = 1; i ﹤=50; i++)  
  54.             {  
  55.                 CJ("http://www.xcjob.cn/renli.asp?pageno=" + i);  
  56.             }  
  57.  
  58.             label1.Text = "恭喜你采集完成！";  
  59.             MessageBox.Show("恭喜你采集完成！");  
  60.         }  
  61.  
  62.         //ASP.NET數據采集之采集數據類
  63.         private void CJ(string Url)  
  64.         {  
  65.      //獲得頁面源文件(Html)  
  66.             string strWebContent = YM(Url);  
  67.  
  68.             //按照Ｈtml里面的標簽  取出和數據有關的那段源碼  
  69.             int iBodyStart = strWebContent.IndexOf("﹤body", 0);  
  70.             int aaa = strWebContent.IndexOf("關鍵字:", iBodyStart);  
  71.             int iTableStart = strWebContent.IndexOf("﹤table", aaa);  
  72.             int iTableEnd = strWebContent.IndexOf("﹤/table﹥", iTableStart);  
  73.             string strWeb = strWebContent.Substring(iTableStart, iTableEnd - iTableStart);  
  74.  
  75.             //生成HtmlDocument  
  76.             HtmlElementCollection htmlTR = HtmlTR_Content(strWeb, "tr");  
  77.  
  78.             foreach (HtmlElement tr in htmlTR)  
  79.             {  
  80.                 try 
  81.                 {  
  82.       //姓名  
  83.                     XM = tr.GetElementsByTagName("a")[0].InnerText;  
  84.       //獲得詳細信息頁面的網址  
  85.                     string a = tr.GetElementsByTagName("a")[0].GetAttribute("href").ToString();  
  86.                     a = "http://www.xcjob.cn" + a.Substring(11);  
  87.  
  88.                     Content(a);  
  89.                 }  
  90.                 catch { }  
  91.             }  
  92.         }  
  93.  
  94.         //ASP.NET數據采集之采集詳細數據類  
  95.         private void Content(string URL)  
  96.         {  
  97.             try 
  98.             {  
  99.                 string strWebContent = YM(URL);  
  100.  
  101. //按照Ｈtml里面的標簽 取出和數據有關的那段源碼  
  102.                 int iBodyStart = strWebContent.IndexOf("﹤body", 0);  
  103.                 int iTableStart = strWebContent.IndexOf("瀏覽次數", iBodyStart);  
  104.                 int iTableEnd = strWebContent.IndexOf("﹤table", iTableStart);  
  105.                 int dd = strWebContent.IndexOf("﹤/table﹥", iTableEnd);  
  106.                 string strWeb = strWebContent.Substring(iTableEnd, dd - iTableEnd + 8);  
  107.  
  108.                 HtmlElementCollection htmlTR = HtmlTR_Content(strWeb, "table");  
  109.  
  110.                 foreach (HtmlElement tr in htmlTR)  
  111.                 {  
  112.                     try 
  113.                     {  
  114.         //年齡  
  115.                         nl = tr.GetElementsByTagName("tr")[1].GetElementsByTagName("td")[1].InnerText;  
  116.         //性別  
  117.                         string XB_SG = tr.GetElementsByTagName("tr")[1].GetElementsByTagName("td")[3].InnerText;  
  118.                         XB = XB_SG.Substring(0, 1);  
  119.         //身高  
  120.                         SG = XB_SG.Substring(11);  
  121.         //政治面貌  
  122.                         mm = tr.GetElementsByTagName("tr")[2].GetElementsByTagName("td")[1].InnerText;  
  123.         //民族  
  124.                         MZ = tr.GetElementsByTagName("tr")[2].GetElementsByTagName("td")[3].InnerText;  
  125.         //學歷  
  126.                         XL = tr.GetElementsByTagName("tr")[3].GetElementsByTagName("td")[1].InnerText;  
  127.         //婚煙狀況  
  128.                         HK = tr.GetElementsByTagName("tr")[3].GetElementsByTagName("td")[3].InnerText;  
  129.         //所學專業  
  130.                         ZY = tr.GetElementsByTagName("tr")[5].GetElementsByTagName("td")[1].InnerText;  
  131.         //工作經驗  
  132.                         GZJY = tr.GetElementsByTagName("tr")[5].GetElementsByTagName("td")[3].InnerText;  
  133.         //在職單位  
  134.                         ZZDW = tr.GetElementsByTagName("tr")[6].GetElementsByTagName("td")[1].InnerText;  
  135.         //在職職位  
  136.                         ZZZW = tr.GetElementsByTagName("tr")[6].GetElementsByTagName("td")[3].InnerText;  
  137.         //工作經歷  
  138.                         GZJY = tr.GetElementsByTagName("tr")[7].GetElementsByTagName("td")[1].InnerText;  
  139.         //要求月薪  
  140.                         YX = tr.GetElementsByTagName("tr")[9].GetElementsByTagName("td")[1].InnerText;  
  141.         //工作性質  
  142.                         GZXZ = tr.GetElementsByTagName("tr")[9].GetElementsByTagName("td")[3].InnerText;  
  143.         //求職意向  
  144.                         QZYX = tr.GetElementsByTagName("tr")[10].GetElementsByTagName("td")[1].InnerText;  
  145.         //具體職務  
  146.                         JTZW = tr.GetElementsByTagName("tr")[10].GetElementsByTagName("td")[3].InnerText;  
  147.         //期望工作地  
  148.                         QWGZD = tr.GetElementsByTagName("tr")[11].GetElementsByTagName("td")[1].InnerText;  
  149.         //教育情況，語言水平，技術專長  
  150.                         QT = tr.GetElementsByTagName("tr")[13].GetElementsByTagName("td")[1].InnerText;  
  151.  
  152.                         insert();  
  153.                     }  
  154.                     catch 
  155.                     { }  
  156.                 }  
  157.             }  
  158.             catch { }  
  159.         }  
  160.  
  161.       //將數據插入數據庫    
  162.       private void insert()  
  163.         {  
  164.             try 
  165.             {  
  166.                 string str = "Provider=Microsoft.Jet.OleDb.4.0;Data Source=Data.mdb";  
  167.                 string sql = "insert into 人才信息 (姓名,年齡,性別,身高,政治面貌,民族,學歷,婚煙狀況,所學專業,";  
  168.                 sql += "工作經驗,在職單位,在職職位,工作經歷,要求月薪,工作性質,求職意向,具體職務,期望工作地,其他) values ";  
  169.                 sql += "('" + XM + "'," + nl + ",'" 
  170. + XB + "','" + SG + "','" + mm + "','" + MZ + "','" 
  171. + XL + "','" + HK + "','" + ZY + "','" + GZJY + "','" 
  172. + ZZDW + "','" + ZZZW + "',";  
  173.                 sql += "'" + GZJY + "','" + YX + "','" 
  174. + GZXZ + "','" + QZYX + "','" + JTZW + "','" + QWGZD + "','" + QT + "')";  
  175.  
  176.                 OleDbConnection con = new OleDbConnection(str);  
  177.                 OleDbCommand com = new OleDbCommand(sql, con);  
  178.                 con.Open();  
  179.                 com.ExecuteNonQuery();  
  180.                 con.Close();  
  181.             }  
  182.      catch { }  
  183.         }  
  184.  
  185.         //返回一個HtmlElementCollection,然后進行查詢內容  
  186.         private HtmlElementCollection HtmlTR_Content(string strWeb, string tj)  
  187.         {  
  188.             try 
  189.             {  
  190. //生成HtmlDocument  
  191.                 WebBrowser webb = new WebBrowser();  
  192.                 webb.Navigate("about:blank");  
  193. //window.document返回一個htmldocument對象，表示對一個html文檔的操作  
  194. //htmldocument對象是在xmldocument基礎上建立的，具有xmldocument的一切方法屬性  
  195.                 HtmlDocument htmldoc = webb.Document.OpenNew(true);  
  196.                 htmldoc.Write(strWeb);  
  197.                 HtmlElementCollection htmlTR = htmldoc.GetElementsByTagName(tj);  
  198.  
  199.                 return htmlTR;  
  200.             }  
  201.             catch { return null; }  
  202.         }  
  203.  
  204.  
  205.         //獲得網址原代碼  
  206.         private string YM(string Url)  
  207.         {  
  208.             string strResult = "";  
  209.  
  210.             try 
  211.             {  
  212.                 HttpWebRequest request = (HttpWebRequest)WebRequest.Create(Url);  
  213.                 request.Method = "GET";  
  214.                 HttpWebResponse response = (HttpWebResponse)request.GetResponse();  
  215.                 Stream streamReceive = response.GetResponseStream();  
  216.                 Encoding encoding = Encoding.GetEncoding("GB2312");  
  217.                 StreamReader streamReader = new StreamReader(streamReceive, encoding);  
  218.                 strResult = streamReader.ReadToEnd();  
  219.             }  
  220.             catch { }  
  221.  
  222.             return strResult;  
  223.         }  
  224.     } 

這個ASP.NET數據采集程序寫的不是太好，是用for循環遍歷出來的，效率不是太高，可以使用多線程實現ASP.NET數據采集，那么希望對你了解ASP.NET數據采集有所幫助。

【編輯推薦】

  1. ASP.NET的五大數據控件淺談
  2. ASP.NET數據綁定控件比較淺析
  3. ASP.NET的GridView與DataGrid控件比較淺析
  4. ASP.NET數據緩存機制淺析
  5. ASP.NET數據緩存之數據緩存淺談
責任編輯：仲衡 來源： 中國站長站
中國站長站
相關推薦

2009-07-29 10:52:09

數據采集程序ASP.NET技巧

2009-08-13 17:52:27

C#數據采集

2009-07-28 10:01:16

ASP.NET Exc

2009-07-27 15:34:11

MembershipASP.NET

2009-07-27 10:18:12

TypeResolveASP.NET

2009-08-05 18:36:12

ASP.NET Che

2009-07-24 13:41:15

ASP.NET AJA

2009-08-03 18:35:51

ASP.NET數據緩存

2009-07-31 12:43:59

ASP.NET MVC

2009-08-05 15:50:13

ASP.NET優點

2009-07-22 18:03:00

ASP.NET ASP

2009-11-06 09:23:41

ASP.NET高效分頁

2009-07-23 10:37:43

2009-07-24 10:53:51

ASP.NET實現靜態

2009-08-05 16:59:55

ASP.NET組件設計

2009-08-10 13:32:15

ASP.NET TimASP.NET組件設計

2009-07-31 18:12:58

ASP.NET數據綁定

2009-07-29 14:12:45

ASP.NET tra

2009-07-28 10:59:13

ASP.NET IIS

2009-07-28 17:36:21

ASP.NET數據庫連
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板： 欧美精选一区二区 | 99久热 | 在线视频中文字幕 | 国产91av视频 | 在线观看中文字幕亚洲 | 亚洲精品v | 亚洲欧洲精品成人久久奇米网 | 国产精品久久av | 中文字幕第一页在线 | 国产日韩精品在线 | 精品www| 最新国产视频 | 亚洲精品久久久一区二区三区 | 天天爽天天干 | 国产丝袜一区二区三区免费视频 | 欧美黄a | 成人在线精品视频 | 国产一级影片 | 亚洲激情综合网 | 久久综合久久综合久久综合 | 在线播放国产一区二区三区 | 免费精品久久久久久中文字幕 | 久久久久久av| 久在线 | 亚洲国产精品一区二区第一页 | 日本在线看片 | 国产9999精品| 欧美久久一区二区三区 | 最新超碰 | 国产精品一区二区三区在线 | 日本成人免费网站 | 国产露脸国语对白在线 | 精品国产一区二区在线 | 久久婷婷色 | 亚洲天堂成人在线视频 | 欧美一二区 | 国产成人久久精品一区二区三区 | 国产精品日韩一区 | 精品综合在线 | 国产精品一区在线 | 亚洲精品3|