2008年10月8日 星期三

透過url去抓網頁資料回來

提供一段程式,可以透過 url 去將 url 所指定的網頁將網頁抓回並存成字串。
可以針對這回傳字串進行文字分析處理以取得我們想要的資訊。
#region Retrieves the HTML from the specified URL.
/// <summary>
/// Retrieves the HTML from the specified URL.
/// </summary>
/// <param name="pageUrl">URL of the web page to retrive HTML.</param>
/// <param name="timeoutSeconds">The timeout for the http request.</param>
/// <returns>Returns the retrived HTML.</returns>
public string GetPageHTML(string pageUrl, int timeoutSeconds)
{
 System.Net.WebResponse response = null;

 try
 {
     // Setup our Web request
     System.Net.WebRequest request = System.Net.WebRequest.Create(pageUrl);
     request.Timeout = timeoutSeconds * 1000;

     // Retrieve data from request
     response = request.GetResponse();

     System.IO.Stream streamReceive = response.GetResponseStream();
     System.Text.Encoding encoding = System.Text.Encoding.GetEncoding("utf-8");
     //System.Text.Encoding encoding = System.Text.Encoding.GetEncoding("big5");
     //System.IO.StreamReader streamRead = new System.IO.StreamReader(streamReceive, System.Text.Encoding.Default);
     System.IO.StreamReader streamRead = new System.IO.StreamReader(streamReceive, System.Text.Encoding.UTF8);



     // return the retrieved HTML
     return streamRead.ReadToEnd();
 }
 catch (Exception ex)
 {
     // Error occured grabbing data, return empty string.
     //MessageBox.Show(this, "An error occurred while retrived the HTML content. " + ex.Message, "Error", MessageBoxButtons.OK, MessageBoxIcon.Error);
     return "";
 }
 finally
 {
     // Check if exists, then close the response.
     if (response != null)
     {
         response.Close();
     }
 }
}
#endregion

// for test
protected void btnGet_Click(object sender, EventArgs e)
{
 string AA=GetPageHTML(txtURL.Text.Trim(), 100);
 txtResult.Text = AA;
}

關鍵字:
streamReceive
GetResponseStream
encoding
streamRead

參考:透過 HTML Agility Pack 抓網頁資料

Google Calendar 時區

最近在分析 Google Calendar 匯出 *.ics 時,發現裡面的時間,如:

DTSTART:20081006T230000Z

都跟實際的行事曆時間不同,事後發現,原來 Google 是使用 UTC 時間。而台灣的時區為 UTC+8,所以從Google所抓出的時間要加上8小時,才會是我們真正想要取得的時間。

註1:UTC+8 比協調世界時快8小時的時區

註2:協調世界時,又稱世界標準時間,簡稱UTC,從英文「Coordinated Universal Time」而來。

2008年10月7日 星期二

SQL語法 的 print

今天跟 lillian 找了一整天的 store procedure 與 EZ-Flower (真的一點都不Easy!),某一支 sp 特別奇怪,當單單執行這一支 sp 時,就沒問題,但透過別人來呼叫他,就會莫名的中斷程式執行,實在很火大。所以就在這支 sp 每一行都設了一個寫 Log 的指令。舉例來說,我一共設了10個寫 Log 的偵測點,如果這支 sp 正常完成執行,就會得到 10 個 Log 記錄,如果是出現在第6個 Log 之後就沒下文,可以推測實際上是在第6到第7個 log 之間發生了問題。我也是逼不得已才用這種笨方法的,無奈啊!


結果告訴我,程式竟然在 print 'xxxx' 出錯。原先在這支 sp ,充斥著古老前為了測試而留下來的 print 語法,沒想到今天卻成為兇手,但這結果真的很訝異。但在人證物證一應俱全的情況下,我也只能屈服了。真的是你,print。

2008年9月30日 星期二

清除資料庫 log

清除資料庫 log 的指令:

[dbname]:表示資料庫名稱

dump tran [dbname] with no_log

2008年9月3日 星期三

寬度設為零,firefox 瀏覽器卻還會顯示出來

在 firefox 或 Chrome 瀏覽器,如果將一個 Button 的 width 設為 0 (ex: width:0px),在IE 會正常的看不到東西,可是在 firefox 或 Chrome 卻老是多留了一些尾巴出來。這問題主要是因為 border-width 與 width 在 IE 與 firefox 或 Chrome 的解讀不同。一般說來,只要設定 width=0 ,IE 就會看不到任何東西了。但對 firefox 或 Chrome而言,卻有著兩個重要設定影響著畫面呈現:width 與 border-width。

在 firefox 或 Chrome 中,如果你設定 width=0,實際上還是有長度的。因為他預設是有填塞空白的,這裡不能將這填塞空白與 border-width 畫上等號,反到要視為 padding的概念。所以,如果你是希望呈現 width=0 的效果,除了設定width外,還要加上 padding:0 。

另一個容易忽略的地方,則是 border-width。因為 firefox 或 Chrome 對於 border-width 都有預設值,而且是 2 不是 0 ,若是忽略不去設定,則外框還是會跑出來的。

範例:

<input id="btnNone" style="width: 0px; padding:0;border-width:0px" onclick="return

false;" type="submit" value="btnNone" />


關鍵字:隱藏、hidden、visible

2008年8月20日 星期三

SQL 中文排序結果

在 SQL 查詢結果做排序時,如果排序欄位的內容為中文字,運氣不好時會發現,不見得是根據筆畫比較少的來排。這問題,極可能是跟 DB 的定序預設值有關,也就是說,他的排序方式並非我們所認為的筆劃排序。這時,可以透過轉換定序的方式來解決。

convert(nvarchar(max), code_valuedesc) COLLATE Chinese_Taiwan_Stroke_CS_AS tech_domain_name

利用 convert 搭配指定定序 即可完成。

2008年7月28日 星期一

如何輸入多筆後再一起記錄到DataBase

拜讀 AllenKuo所精心製作的教學介紹,實在不忍直接偷貼過來,還請看官移駕到原網站欣賞。他在介紹影片中所使用的是 .Net 1.1 GrideView + CollectionBase 來解,但在後面的留言中提到,.Net 2.0 可以利用泛型的類別來完成他。所以自己也笨笨的練習了一下,並將幾個在實作中出槌的小地方註解了一下。

AllenKuo 教學網址

個人心得筆記網址

泛型排序需求

關鍵字:
序列化,RowDeleting,泛型 List<t> ,排序