이 쿼리의 속도를 어떻게 높이나요?
다음 쿼리 를 실행하는 범위 내에 약 100 명의 소비자가1-2 minutes 있습니다. 이 러한 각 실행은 1 회 실행 기능을 나타냅니다.
TableQuery<T> treanslationsQuery = new TableQuery<T>()
.Where(
TableQuery.CombineFilters(
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, sourceDestinationPartitionKey)
, TableOperators.Or,
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, anySourceDestinationPartitionKey)
)
);이 쿼리는 약 5000 개의 결과를 생성합니다.
전체 코드 :
public static async Task<IEnumerable<T>> ExecuteQueryAsync<T>(this CloudTable table, TableQuery<T> query) where T : ITableEntity, new()
{
var items = new List<T>();
TableContinuationToken token = null;
do
{
TableQuerySegment<T> seg = await table.ExecuteQuerySegmentedAsync(query, token);
token = seg.ContinuationToken;
items.AddRange(seg);
} while (token != null);
return items;
}
public static IEnumerable<Translation> Get<T>(string sourceParty, string destinationParty, string wildcardSourceParty, string tableName) where T : ITableEntity, new()
{
var acc = CloudStorageAccount.Parse(Environment.GetEnvironmentVariable("conn"));
var tableClient = acc.CreateCloudTableClient();
var table = tableClient.GetTableReference(Environment.GetEnvironmentVariable("TableCache"));
var sourceDestinationPartitionKey = $"{sourceParty.ToLowerTrim()}-{destinationParty.ToLowerTrim()}";
var anySourceDestinationPartitionKey = $"{wildcardSourceParty}-{destinationParty.ToLowerTrim()}";
TableQuery<T> treanslationsQuery = new TableQuery<T>()
.Where(
TableQuery.CombineFilters(
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, sourceDestinationPartitionKey)
, TableOperators.Or,
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, anySourceDestinationPartitionKey)
)
);
var over1000Results = table.ExecuteQueryAsync(treanslationsQuery).Result.Cast<Translation>();
return over1000Results.Where(x => x.expireAt > DateTime.Now)
.Where(x => x.effectiveAt < DateTime.Now);
}이러한 실행 중에 소비자가 100 명인 경우 요청이 클러스터되어 스파이크가 형성되는 것을 볼 수 있습니다.
이러한 스파이크 동안 요청은 종종 1 분 이상이 소요됩니다.
이 쿼리의 속도를 어떻게 높이나요?
쿼리에서 거의 필터링하지 않은 5000 개의 결과가 나타납니다. 5000 개의 결과를 코드로 전송하는 데는 상당한 네트워크 시간이 소요됩니다. 이후에도 필터링을 계속 수행 할 것이라는 점에 유의하지 마십시오. | 항상 쿼리에서 처리하는만큼 많은 파일을 작성하십시오. 인덱스를 얻거나 계산 된 뷰의 결과 행에 이상적입니다.
—
Christopher
"번역"개체가 큰가요? 왜 전체 DB와 같이 gettin` 대신 일부 매개 변수를 얻는 것이 좋지 않습니까?
—
히라사와 유이
@HirasawaYui 아니 그들은 작습니다
—
l --''''''--------- '' '' '' '' '' '' ''11
더 많은 필터링을 수행해야합니다. 5000 개의 결과를 가져 오는 것은 의미가없는 것 같습니다. 데이터를 모른 채 말할 수는 없지만 더 의미있는 방식으로 데이터를 분할하거나 쿼리에 일종의 필터링을 도입하는 방법을 찾아야한다고 말하고 싶습니다.
—
4c74356b41
몇 개의 다른 파티션이 있습니까?
—
Peter Bons