Azure Search 索引内容管理

Azure Search Service REST

  在使用AzureSearch服务中portal无法对某indexer中的某个document的内容进行CRUD。感觉非常不方便,portal只提供到indexer级别的CRUD。
  在实际的项目开发过程中需要对indexer中的document内容即时CRUD。 在MSDN中翻了很久,其实AzureSearch已经提供了REST API和封装好的Net SDK供开发者使用。 在Visio studio中通过NuGet获取MicrosoftAzureSearch动态库来获取支持。
  重写了一部分内容使用起来更轻松。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
public class PortalKBSearch    
{    
        /// <summary>  
        ///     The action link index client  
        /// </summary>  
        private readonly ISearchIndexClient actionLinkIndexClient;    

        /// <summary>  
        /// The allkb index client  
        /// </summary>  
        private readonly ISearchIndexClient allkbIndexClient;    

        /// <summary>  
        ///     The bot telemetry  
        /// </summary>  
        private readonly IBotTelemetry botTelemetry;    

        /// <summary>  
        ///     The _search client  
        /// </summary>  
        private readonly ISearchServiceClient searchClient;    

        /// <summary>  
        /// Initializes a new instance of the <see cref=”PortalKBSearch”/> class   
        /// Initializes a new instance of the <see cref=”PortalKBSearch”/>  
        ///     class  
        /// </summary>  
        /// <param name=”searchServiceName”>  
        /// The search Service Name  
        /// </param>  
        /// <param name=”apiKey”>  
        /// The api Key  
        /// </param>  
        /// <param name=”allKnowledgeBaseIndexName”>  
        /// The all Knowledge Base Index Name  
        /// </param>  
        /// <param name=”actionLinkIndexName”>  
        /// The action Link Index Name  
        /// </param>  
        /// <exception cref=”SystemException”>  
        /// <see langword=”throw”/> exception  
        /// </exception>  
        public PortalKBSearch(    
            string searchServiceName,    
            string apiKey,    
            string allKnowledgeBaseIndexName,    
            string actionLinkIndexName)    
        {    
            try
            {    
                botTelemetry = KnowledgeBotTelemetryCreateDefault();    

                // Create an HTTP reference to the catalog index  
                searchClient = new SearchServiceClient(searchServiceName, new SearchCredentials(apiKey));    

                allkbIndexClient = searchClientIndexesGetClient(allKnowledgeBaseIndexName);    

                actionLinkIndexClient = searchClientIndexesGetClient(actionLinkIndexName);    
            }    
            catch (Exception e)    
            {    
                throw new Exception(“Could not create PortalSearch client”, e);    
            }    
        }    

        /// <summary>  
        ///     The run indexer  
        /// </summary>  
        /// <returns>  
        ///     The <see cref=”SystemThreadingTasksTask” />   
        /// </returns>  
        public async Task RunIndexer()    
        {    
            var kbIndexers = (await searchClientIndexersListAsync())IndexersWhere(x => xNameStartsWith(“kb”))    
                ToArray();    

            for (var i = 0; i < kbIndexersLength; i++)    
            {    
                await searchClientIndexersRunAsync(kbIndexers\[i\]Name);    
            }    
        }    

        /// <summary>  
        /// 创建修改索引  
        /// </summary>  
        /// <param name=”index”></param>  
        /// <returns></returns>  
        public async Task<Indexer> CreateOrUpdateIndexer(Indexer index)    
        {    
            try
            {    
                return await searchClientIndexersCreateOrUpdateAsync(index);    
            }    
            catch (Exception ex)    
            {    
                throw new Exception(“Create indexer failed”, ex);    
            }    
        }    

        /// <summary>  
        /// 检查索引是否存在  
        /// </summary>  
        /// <param name=”indexName”></param>  
        /// <returns></returns>  
        public async Task<boolIsExistIndexer(string indexName)    
        {    
            try
            {    
                return await searchClientIndexersExistsAsync(indexName);    
            }    
            catch (Exception ex)    
            {    
                throw new Exception(“IsExist call failed”, ex);    
            }    
        }    

        /// <summary>  
        /// 删除索引  
        /// </summary>  
        /// <param name=”indexName”></param>  
        /// <returns></returns>  
        public async Task DeleteIndexer(string indexName)    
        {    
            try
            {    
                await searchClientIndexersDeleteAsync(indexName);    
            }    
            catch (Exception ex)    
            {    
                throw new Exception(“DeleteIndexer call failed”, ex);    
            }    
        }    

        /// <summary>  
        /// 创建或修改索引文档  
        /// </summary>  
        /// <param name=”model”></param>  
        public void CreateOrUpdateDocuments(List<PortalKBSearchResult> model)    
        {    
            var batch = IndexBatchMergeOrUpload(model);    
            try
            {    
                allkbIndexClientDocumentsIndex(batch);    
            }    
            catch (IndexBatchException e)    
            {    
                // Sometimes when your Search service is under load, indexing will fail for some of the documents in  
                // the batch Depending on your application, you can take compensating actions like delaying and  
                // retrying For this simple demo, we just log the failed document keys and continue  
                botTelemetryTrackException(    
                   new BotException { Message = $“Failed to index some of the documents:{StringJoin(“, “, eIndexingResultsWhere(r => !rSucceeded)Select(r => rKey))}”, Error = e });    
            }    
        }    

        /// <summary>  
        /// 创建或修改索引文档  
        /// </summary>  
        /// <param name=”model”></param>  
        public void CreateOrUpdateDocumentsDynamic(List<Document> model)    
        {    
            var batch = IndexBatchMergeOrUpload(model);    
            try
            {    
                allkbIndexClientDocumentsIndex(batch);    
            }    
            catch (IndexBatchException e)    
            {    
                // Sometimes when your Search service is under load, indexing will fail for some of the documents in  
                // the batch Depending on your application, you can take compensating actions like delaying and  
                // retrying For this simple demo, we just log the failed document keys and continue  
                botTelemetryTrackException(    
                   new BotException { Message = $“Failed to index some of the documents:{StringJoin(“, “, eIndexingResultsWhere(r => !rSucceeded)Select(r => rKey))}”, Error = e });    
            }    
        }    

        /// <summary>  
        /// 删除索引文档  
        /// </summary>  
        /// <param name=”model”></param>  
        public void DeleteDocuments(List<PortalKBSearchResult> model)    
        {    
            var batch = IndexBatchDelete(model);    
            try
            {    
                allkbIndexClientDocumentsIndex(batch);    
            }    
            catch (IndexBatchException e)    
            {    
                // Sometimes when your Search service is under load, indexing will fail for some of the documents in  
                // the batch Depending on your application, you can take compensating actions like delaying and  
                // retrying For this simple demo, we just log the failed document keys and continue  
                botTelemetryTrackException(    
                   new BotException { Message = $“Failed to delete index some of the documents:{StringJoin(“, “, eIndexingResultsWhere(r => !rSucceeded)Select(r => rKey))}”, Error = e });    
            }    
        }    

        /// <summary>  
        /// 删除索引文档  
        /// </summary>  
        /// <param name=”key”></param>  
        /// <param name=”keyValues”></param>  
        public void DeleteDocuments(string key, IEnumerable<string> keyValues)    
        {    
            var batch = IndexBatchDelete(key,keyValues);    
            try
            {    
                allkbIndexClientDocumentsIndex(batch);    
            }    
            catch (IndexBatchException e)    
            {    
                // Sometimes when your Search service is under load, indexing will fail for some of the documents in  
                // the batch Depending on your application, you can take compensating actions like delaying and  
                // retrying For this simple demo, we just log the failed document keys and continue  
                botTelemetryTrackException(    
                   new BotException { Message = $“Failed to delete index some of the documents:{StringJoin(“, “, eIndexingResultsWhere(r => !rSucceeded)Select(r => rKey))}”, Error = e });    
            }    
        }    
}

Unit Tester:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
public class PortalKBSearchTests    
{    
        [TestMethod()]    
        public void DeleteDocumentsTest()    
        {    
            var searchServiceName = “{AzureSearchName}”;    
            var apiKey = “{AzureSearchApiKey}”;    
            var IndexName = “{AzureSearchIndexName}”;    
            var actionLinkIndexName = “{AzureSearchActionLinkInxerName}”;    
            var search = new PortalKBSearch(searchServiceName, apiKey, IndexName, actionLinkIndexName);    
            string\[\] array = ArrayConvertAll(EnumerableRange(11000)ToArray(), delegate (int s) { return ConvertToString(s); });//每次只能批量删除1000条  
            searchDeleteDocuments(“QuestionId”, array);//第一个参数为筛选匹配字段  
        }    

        [TestMethod()]    
        public void CreateOrUpdateDocuments()    
        {    
           var searchServiceName = “{AzureSearchName}”;    
            var apiKey = “{AzureSearchApiKey}”;    
            var IndexName = “{AzureSearchIndexName}”;    
            var actionLinkIndexName = “{AzureSearchActionLinkInxerName}”;    
            var search = new PortalKBSearch(searchServiceName, apiKey, allknowledgeBaseIndexName, actionLinkIndexName);    
            var item = new Document(); //使用Document继承Dictionary  
            itemAdd(“{Key}”, “{object value}”);    
            searchCreateOrUpdateDocuments(new List<Document>()Add(item)); //SDK中同时提供List<T>入参          
        }    
}