Tableau通常在input data is in "normalized" format时效果最好,而不是交叉表。这也称为从“宽格式”转换为“长格式”。
也就是说,转换自:
至:
Tableau提供了"reshaping tool" for Excel users,但如果您没有Excel,则会遇到困难。
那么如何在不使用Excel的情况下将电子表格转换为此格式?
好吧,你可以使用我制作的这个方便的Google Sheets script。
/*
normalizeCrossTab: Converts crosstab format to normalized form. Given columns abcDE, the user puts the cursor somewhere in column D.
The result is a new sheet, NormalizedResult, like this:
a b c Field Value
a1 b1 c1 D D1
a1 b1 c1 E E1
a2 b2 c2 D D2
a2 b2 c2 E E2
...
Author:
Steve Bennett
[email protected]
@stevage1
Licence: Public Domain
*/
function start() {
var html = HtmlService.createHtmlOutput(
'<style>ol { padding-left: 1.5em; }</style>' +
'<script src="//code.jquery.com/jquery-1.11.2.min.js"></script>' +
'<script>' +
'function allDone(msg) { ' +
' $("#normalizeBtn").hide();' +
' $("#datacols-output").html("<p>Your normalized data is in a sheet called NormalizedResult. If you run the normalization again, that sheet will be deleted and replaced.</p>");' +
'};' +
'function gotCols(cols) { ' +
' $("#datacols-output").html(\'<p>These will be your dependent variables:</p><ul id="datacols"></ul>\'); ' +
' $("#normalizeBtn").show();' +
' $.each(cols, function() {' +
' $("#datacols").append($("<li>").text(this)); ' +
' });' +
' $("#datacols").after("<p>If they don\'t look right, move the cursor and press <i>Continue</i>.</p>"); ' +
'}' +
'</script>' +
'<link rel="stylesheet" href="https://ssl.gstatic.com/docs/script/css/add-ons.css">' +
'<h2>Convert cross-tab</h2>'+
'<p>This macro converts <i>cross-tab</i> data which has multiple dependent variables (eg, observations, sales figures) per row into a <i>normalized</i> format with one dependent variable per row.</p>' +
'<p>The name of each dependent variable becomes the value of a new column called <code>Field</code> and its value goes in a column called <code>Value</code>.</p>' +
'<ol><li>Move <b>all independent variable columns to the left</b></li>' +
' <li>Place the <b>cursor in the first dependent variable column</li></ol>'+
'<p><button onClick="google.script.run.withSuccessHandler(gotCols).getDataColumns();">Continue</button></p>' +
'<p id="datacols-output"></p>' +
'<p><button id="normalizeBtn" class="create" style="display:none;" onClick="google.script.run.withSuccessHandler(allDone).normalizeCrosstab(true);">Normalize</button></p>' +
'<br/><p><a target="_blank" href="http://kb.tableausoftware.com/articles/knowledgebase/denormalize-data">More information</a></p>')
.setSandboxMode(HtmlService.SandboxMode.IFRAME)
.setTitle('Normalize cross-tab')
.setWidth(300);
SpreadsheetApp.getUi() // Or DocumentApp or FormApp.
.showSidebar(html);
}
function onOpen() {
var ss = SpreadsheetApp.getActive();
var items = [
{name: 'Normalize Crosstab', functionName: 'start'},
];
ss.addMenu('Normalize', items);
}
function normalizeCrosstab(really) {
if (!really) {
return start();
}
var sheet = SpreadsheetApp.getActiveSheet();
var rows = sheet.getDataRange();
var numRows = rows.getNumRows();
var values = rows.getValues();
var firstDataCol = SpreadsheetApp.getActiveRange().getColumn();
var dataCols = values[0].slice(firstDataCol-1);
var resultssheet = SpreadsheetApp.getActiveSpreadsheet().getSheetByName("NormalizedResult");
if (resultssheet != null) {
SpreadsheetApp.getActive().deleteSheet(resultssheet);
}
var header = values[0].slice(0, firstDataCol - 1);
var newRows = [];
header.push("Field");
header.push("Value");
newRows.push(header);
for (var i = 1; i <= numRows - 1; i++) {
var row = values[i];
for (var datacol = 0; datacol < dataCols.length; datacol ++) {
newRow = row.slice(0, firstDataCol - 1); // copy repeating portion of each row
newRow.push(values[0][firstDataCol - 1 + datacol]); // field name
newRow.push(values[i][firstDataCol - 1 + datacol]); // field value
newRows.push(newRow);
}
}
var newSheet = SpreadsheetApp.getActiveSpreadsheet().insertSheet("NormalizedResult");
var r = newSheet.getRange(1,1,newRows.length, header.length);
r.setValues(newRows);
};
function getDataColumns() {
var sheet = SpreadsheetApp.getActiveSheet();
var rows = sheet.getDataRange();
var values = rows.getValues();
var firstDataCol = SpreadsheetApp.getActiveRange().getColumn();
var dataCols = values[0].slice(firstDataCol-1);
return dataCols;
}
较新版本的Tableau(9.0及更高版本)允许在导入时重新整形数据。它就像选择要堆叠的列一样简单。 Here's a useful tutorial。
在2018年,Tableau发布了Tableau Prep,用于重塑和争论数据以进行分析。
一些用于重塑和清理值得研究的数据的商业工具是:
Trifacta是由一些参与过前学术DataWrangler项目的人创建的。我被告知,Alteryx对地理空间相关数据的一些准备工作很有帮助,并且遇到了一些热情的Paxata用户。
我对他们的经验太少,他们提供的不仅仅是对他们网站的引用,而是倾向于使用Python脚本来代替他们。
如果要“折叠”要合并到单个列的列。 Tableau写了一个有用的tutorial here。 Tableau 9介绍了一些有用的重塑功能,用于取消对表和分割列的拆分。
如果您熟悉命令行和使用管道组合小工具的Unix风格,请查看开源csvkit工具套件。
您可以通过多种方式组合这些实用程序以获得不同的效果,因此步骤的确切顺序取决于您的数据集(毕竟这是工具的重点)。
但是对于重塑任务,你可以使用csvcut来提取感兴趣的列,csvgrep来提取感兴趣的行和cvsstack以将多个csv文件组合成一个更长的文件,以及-g和-n选项来添加分组字段。
还有其他一些有用的命令,如果你熟悉Unix或linux,你可以从命令名中快速找出它们的作用。