常规数据处理 - Azure DW中的大数据速度缓慢。寻找想法以及如何解决它
我进入了一家拥有此设置的公司： 我们每天通过sFTP服务器下载6000万条记录（存储在几百个csv文件中）并存储它们在blob存储中。 然后我们将下载移动到数据湖存储并使用U-SQL和Azure数据湖分析来分离这些数据并将它们存储在外部表中（我看到它们）来自Azure SQL DW）。 我通常使用大约20个分析单位，并且能够在大约5-10分钟内通过这些6000万美元压缩 - 很好。
..
AzureSQLDataWarehouse相关内容
通过polybase加载时的镶木地板文件问题
嗨， 我们在使用生成的镶木地板文件加载数据时遇到问题ADF，我们将Oracle数据（在UTF-8中有nls_characterset）复制到azure blob上的镶木地板文件中，当我们创建外部表并尝试使用select 语句访问时，我们得到了以下错误 " HdfsBridge :: recordReaderFillBuffer - 填写记录阅读器缓冲区遇到意外错误：ClassCast
..
Azure SQL数据仓库中的事实表设计
哪个是相对较小的事实表的最佳索引和分布设计（平均每个表3000万行）。每个表的结构类似于以下内容： CREATE TABLE FactTable（ TimeDimensionID INT NOT NULL， DimensionID1 VARCHAR（10）NOT NULL， DimensionID2 VARCHAR（10）NOT NULL， ; D
..
搜索整个dw
嗨！我们最近从Cassandra迁移到Azure SQL数据仓库，有一个我们无法弄清楚的特定功能：有没有办法索引整个dw并集成搜索引擎？我们有ElassAndra（Cassandra上的ElasticSearch）和 它很好地服务于我们的用例。 谢谢！ Terry 解决方案 嗨， 我认为没有办法索引整个数据仓库，但这完全取决于大小。 你可以参考 这个文档，用于一
..
为了跟踪SQL Server，您必须是sysadmin固定服务器角色的成员
我试图学习如何使用SQL Server Profiler，并在使用工具和选择的SQL Server Profiler后收到以下错误消息。 为了跟踪SQL服务器，您必须是sysadmin固定服务器角色的成员或具有ALTER Trace权限。 我无法将自己添加到sysadmin固定服务器角色（现在不知道如何找到或执行此操作），所以我做了 授予史蒂夫追踪权; 我收到了以下错误
..
将社交媒体数据导入Azure SQL数据仓库的架构
大家好 我是第一次使用Azure SQL数据仓库。 我想将一些社交媒体数据从facebook，twitter，linkedin，instagram导入Azure数据仓库。 最好的方式是什么？去做这个？我需要哪些工具和架构？有没有办法连接来自twitter，facebook，...的API？ 我阅读了很多文档，但仍然不知道如何继续。 非常感谢你的帮助！ 解决方案
..
查询Azure SQL数据仓库上外部表的筛选器
嗨专家， 我们在Azure SQL数据仓库中拥有大量数据（每个TB范围从100 GB到早期TB）的表。我们的报告图层包含位于Azure SQL数据库之上的Azure Analysis Services，该数据库具有聚合数据。对于Azure数据仓库中驻留 的详细数据，我们在Azure SQL DB中创建了外部表。 Azure Analysis Services语义模型使用直接查询来使用外部表
..
如何在Azure数据仓库中查找所有堆表的行计数。
如何查找Azure数据仓库中所有堆表的行计数。 我有以下查询来查找Clustered列存储表的行计数，但这是 不适用于堆表。这些表格的原因是没有输入 sys.pdw_nodes_tables 和 sys.dm_pdw_nodes_db_column_store_row_group_physical_stats 有些人可以帮我查询Azure Datawarehouse数据库中所有堆
..
目录数据库创建失败（代码：45344）
当我尝试配置新的Azure SQL数据仓库时，我始终收到错误"目录数据库创建失败。 （代码：45344）" - 搜索后，我看不到任何关于如何继续的指导。 下面是原始错误消息 - 上的任何指针如何纠正这一点非常感谢！ { 解决方案 您是否尝试通过门户网站或ARM模板创建Azure SQL数据仓库？ 冲突代码表明操作是正在尝试不允许在资源的当前状态。 如果在之前的尝试中创建
..
Azure DW的定价？
我需要创建一个SQL Server DW Server和几个小型DB。所有数据大小都小于1TB。 添加数据库如何影响定价？ Kenny_I 解决方案 Hello Kenny， Azure SQL DataWarehouse的定价是每小时每个数据库。您可以相应地选择SKU。 估计的存储成本是 每小时每TB 0.17。 有关定价的更多详情，请
..
自动停止和启动SQL Server数据仓库
在夜晚和周末停止开发环境的最佳做法和工具是什么？有小费吗？ Kenny_I 解决方案 嗨肯尼， 您可以使用计划在特定时间运行的自动化帐户轻松完成此操作，您还可以在自动化帐户中拥有可以使用的预建解决方案的Runbook库。
..
考虑到Datawarehouse的AZURE
Hi Experts， 我们正在考虑使用Microsoft Azure来托管数据仓库解决方案。 Q1。在典型的实现中，如果我们有一个托管的OS磁盘，它就会提到存储事务。这代表了什么？当我们查看定价页面时，默认情况下它会讨论100,000个交易单位，它会在小 文本中显示10,000个交易。总共100,000 * 10,000笔交易是什么？&bbsp; b 。如果我们使用SQL数据
..
有哪些步骤可以识别Azure SQL数据仓库Infra&浆纱？ DWH数据库的大小现在是500 GB
识别Azure SQL数据仓库Infra&的步骤是什么？浆纱？ DWH数据库的大小现在是500 GB 解决方案 嗨Piyush， 我刚刚回答了一个类似的主题同一主题。如果您有其他问题，请查看此主题并告诉我们。 考虑Azure SQL数据仓库 谢谢， 迈克
..
从Azure SQL Dw中的不同行连接列的值
HI， 我需要将所有部门名称连接成一个字符串。这是拥有PIVOT但具有动态内置部门名称的更大要求的一部分。 （请参见此处： https://stackoverflow.com/questions/42292480/dynamic-pivot-query-how-to-save-it-in-sql-server 请注意，新的部门可以随时添加到表格中。 为了将名称变为字符串，
..
从ADF想知道SQL DW实例的状态
我正在使用ADF&然后想知道SQL DW实例的状态 对我来说简历&暂停工作正常。 我关注 GET https://management.azure.com/subscriptions/{subscription-id}/resourceGroups/{resource-group -name} /providers/Microsoft.Sql/servers/ {server-
..
无法使用具有JDBC连接的Databricks连接Azure SQL DW。
嗨大家好， 我正在尝试使用具有JDBC连接的数据存储库连接Azure数据仓库，此登录使用SQL Server身份验证。 我收到以下错误： SQL语句出错：SqlDWSideException：SQL DW无法执行连接器生成的JDBC查询。基础SQLException： - com.microsoft.sqlserver.jdbc.SQLServerException： 用户'
..
如何在Azure Sql数据仓库中实现SCD类型2
亲爱的所有人，我必须使用ADF将数据从源数据库提取到数据湖存储，然后最终使用polybase将数据从数据库存储器中提取出来。据我所知，即使使用标识列，Azure数据仓库也不会生成正确的代理键。此外，azure数据仓库中没有MERGE 命令支持。我将如何实现SCD类型2。我看到很多与UPSERT相关的博客和视频，但与SCD类型2无关。任何形式的帮助都将受到高度赞赏。 解决方案 嗨Sanju
..
获取错误“'HADOOP'附近的语法不正确”在创建外部数据源时
嗨， 我收到 " 'HADOOP'附近的语法不正确"在尝试为多边形数据加载创建外部数据源时。 查询： CREATE DATABASE SCOPED CREDENTIAL AzureStoragecred WITH¥b $ b   IDENTITY ='abcdblobstorage'，   SECRET ='******' ;
..
如何更改我的用户组的azure datwarehouse中的资源类
hi 我面临的主要问题是，从我的用户运行的任何查询一次只运行一个查询，而其他查询正在排队。我是另一个添加了我的id的用户列表的一部分，我看到xlargerc是资源类。我怎么能把它改成mediumrc 。我获得的1000dw单位的所有查询槽的原因是28，并且一个查询正在运行，并且我看到所有其他查询已排队。我怎么能解决这个问题？ adithya 解决方案 您好Adithya，
..
'TIMESTAMPDIFF'不是Azure SQL数据仓库中公认的内置函数名称
我从Azure SQL数据仓库收到以下错误。 'TIMESTAMPDIFF'不是公认的内置函数名称 sql如下。 从sysdatabases中选择名称，{fn TIMESTAMPDIFF（SQL_TSI_YEAR，{fn CURDATE（）}，crdate）} 此sql适用于SQL Server 2016和Azure SQL数据库。 我猜这是Azure SQL数据仓库
..