摘要： 數據轉換服務中有執行客戶SQL腳本的轉換，在SSIS中這個特性得到加強。在SSIS中可以使用VB.NET這種語言。這個系列中將介紹這些腳本任務，例如控制執行流程，實現自定義轉換，并舉例說明。在SSIS中有下面幾種腳本任務。ActiveX Script Task：這種任務允許執行ActiveX語言腳本，例如VBScript。這種任務是為了和以前版本兼容，在SQL Server 2008版本中已經被去掉，這里我們不會詳細介紹。Script Task：這種任務是用來代替ActiveX script Task的，用它來控制包的執行。它允許執行VB.NET語言，很不幸只能使用這一種語言。但是還有一個選擇 閱讀全文

摘要： 在T-SQL中沒有除法運算，但是在T-SQL中可以實現類似除法的操作Divide。一般除法操作的結果一個列來自于被除關系表，剩下的來自除關系表。這里舉一個例子來說明。假設如下有三個表：客戶Customers，銷售人員Employees，訂單Orders，查詢返回一些客戶，要求這些客戶和所有美國雇員都至少有一次交易記錄。來看下面一個語句：select custid from Sales.Customers as Cwhere not exists(select * from HR.Employees as Ewhere country='USA'and not exists(se 閱讀全文

摘要： 經常聽說SQL Server最難的部分是性能優化，不禁讓人感到優化這個工作很神秘，這種事情只有高手才能做。很早的時候我在網上看到一位高手寫的博客，介紹了SQL優化的問題，從這些內容來看，優化并不都是一些很復雜的問題，掌握了基本的知識之后也可以嘗試優化自己的SQL程序，甚至是其他相關的程序。優化是一些工作積累之后的經驗總結和代碼意識，只要平時注意積累，你也可以做優化的工作。這一篇隨筆是轉載，不過我強... 閱讀全文

摘要： SQL語句是一種集合操作，就是批量操作，它的速度要比其他的語言快，所以在設計的時候很多的邏輯都會放在sql語句或者存儲過程中來實現，這個是一種設計思想。但是今天我們來討論另外一個話題。Sql頁提供了豐富的函數供我們使用，還有很多操作有意想不到的結果，今天這個隨筆來看看一些不常見到的sql語句。這些語句不像普通的增刪查那樣平白，它的奇妙之處有時候讓人另眼相看。 1. 假設我想把Person.Contact表中所有人的名字用逗號連接起來，串成一個字符串，可能會想到使用游標把FirstName查出來然后逐行賦值給一個字符串變量，可是使用游標的代價是很大的?？纯聪旅娴拇a：declare @name. 閱讀全文

摘要： 漸變維度（SCD）轉換提供了一種維護漸變維度或漸變表的方法，漸變維度的分析處理是一個很大的話題。一般一個維度表通常包含一些描述其他信息的離散值，例如，價格，重量，銷售地區。問題是如果隨著時間的推移這些信息改變我們將如何維護這個表，特別是在數據轉移的過程中。例如我們查看AdventureWorks中的product表，如圖1圖1 通常在聯機事務處理（OLTP）數據庫中，我們會用一行的數據來保存產品信息。如果產品的售價從10美元上漲到15美元，我們直接更新StandardCost字段為15，這樣做完成了任務：現在的售價是多少？但是丟失了歷史數據，我們不知道漲價之前的價格是多少？價格上漲了多少？解決 閱讀全文

摘要： 提到排名函數我們首先可能想到的是order by，這個是排序，不是排名，排名需要在前面加個名次序號的，order by是沒有這個功能的。還可能會想到identity(1,1)，它也給了一個序號，但是不能保證給出的序號是連續升序的。除非能夠保證所有的Insert語句都能夠正確成功地完成，并且沒有刪除操作，實際的使用中大多數的表都不能保證這樣。好在SQL Server中提供了一些排名函數來輔助實現這些功能。排名函數按照需要的順序對數據進行排名，并提供一個值對數據。下面來了解一下這些排序函數功能。 ROW_NUMBERROW_NUMBER函數允許以上升，連續的順序給每一行數據一個序號，注意ROW_N 閱讀全文

摘要： 透視今天抽一點時間來看看透視和逆透視語句，簡單的說就是行列轉換。假設一個銷售表中存放著產品號，產品折扣，產品價格三個列，每一種產品號可能有多種折扣，每一種折扣只對應一個產品價格。下面貼出建表語句和插入數據語句。 1 create table SalesOrderDetail( 2 ProductID int /*unique多謝wuu00的提醒*/, 3 UnitPriceDiscount float, 4 ProductPrice float 5 ) 6 insert into SalesOrderDetail values 7 (711,.00,12), 8 (711,.00,13), . 閱讀全文

摘要： 在模糊查找中我們提到臟數據是怎樣進入到表中的事情，主要還是由于一些“Lazy-add”造成的。這種情況我們的肉眼很容易被欺騙，看上去是同一個單詞，其實就差那么一個字母，變成了兩個不同的單詞。一個簡單的例子是X-Ray Tech和xRey，我們很有可能認為他們是同一個職務，CT操作員，但是如果讓計算機來處理的話，它們是兩種截然不同的東西。 和模糊查找一樣，模糊分組可以查找出多行中出現的類似的單詞進行歸類。我們可以使用這些歸類得到的結果清洗數據源或者在不修改基礎數據的情況下對原表進行修改。模糊分組也需要一個輸入字符流，還需要一個OLE DB數據連接，用于存放分析得到的結果。模糊分組任務的編輯界面. 閱讀全文

摘要： BI項目中經常會有一些提取，轉換，數據處理（ELT）的工作，其中最主要的是處理過贓數據。假設在項目中我們向數據庫中注入了測試數據，但是通過一個外鍵從另外一個表中載入數據的時候沒有對應的數據，那么這一行就是贓數據。這時候可以使用SQL中的Sound-Ex，full-text，相似度算法等方法查找。這種策略需要花費大量的時間和精力來設計算法，測試，維護，并且它們都是基于詞匯的，復用的可能性很小。也可能你會放棄自己處理并把它拋給一些有經驗的高手專家來做這些工作，也可能你會在表中添加一些新的數據已達到外健關聯的目的，但是這種方法被稱作Lazy-add（懶惰的做法）。因為是手工添加數據難免會帶來拼寫錯誤 閱讀全文

摘要： 和關鍵詞提取一樣，關鍵詞查找使用相同的算法和統計模型將輸入流中的字符串按照名詞或者名詞詞組進行統計，不同的是它參照一個已經存在的詞匯表，輸出的統計結果也僅限于這個詞匯表中的關鍵詞。關鍵詞提取和關鍵詞查找可以搭配使用。定期地使用關鍵詞提取來產生關鍵詞詞匯表，也可以在這個詞匯表中人為刪除或添加想要統計的關鍵詞，最后使用關鍵詞查找來產生最終的統計結果。在上一個章節中我們將統計結果中的“model”從統計結果中刪除，然后我們可以將他們整理出來，然后刪除重復的，添加一些對有統計價值的關鍵詞。這里假設我們想統計有哪些模型招致客戶的不滿以致留言評價，但是我們想只保留模型的名稱，而不是類似“model XX- 閱讀全文