69 lines
2.4 KiB
Bash
69 lines
2.4 KiB
Bash
#!/bin/sh
|
|
# ============================================================
|
|
# fetch-data.sh — trae la data del leak desde un link compartido
|
|
# (OneDrive / Google Drive / URL directa) usando una variable de entorno.
|
|
#
|
|
# Uso:
|
|
# export TIBIA_DATA_URL="https://..." # link compartido
|
|
# export TIBIA_DATA_TOKEN="" # opcional: token para OneDrive con password / gdrive confirm
|
|
# ./scripts/fetch-data.sh [destino] # default: ./data
|
|
#
|
|
# El destino NO se commitea: está en .gitignore (regla de oro).
|
|
# ============================================================
|
|
set -e
|
|
|
|
URL="${TIBIA_DATA_URL:?Debes exportar TIBIA_DATA_URL con el link de la data}"
|
|
TOKEN="${TIBIA_DATA_TOKEN:-}"
|
|
DEST="${1:-./data}"
|
|
|
|
# --- Detecta el tipo de link y lo convierte a descarga directa ---
|
|
|
|
case "$URL" in
|
|
*drive.google.com*drive/d/*|*drive.google.com*file/d/*)
|
|
# Google Drive: id del archivo -> descarga directa (con confirm para archivos grandes)
|
|
FILE_ID=$(printf '%s' "$URL" | sed -E 's#.*file/d/([A-Za-z0-9_-]+).*#\1#;s#.*drive/d/([A-Za-z0-9_-]+).*#\1#')
|
|
DL_URL="https://drive.google.com/uc?export=download&id=${FILE_ID}&confirm=t"
|
|
;;
|
|
*1drv.ms*|*onedrive.live.com*|*sharepoint.com*)
|
|
# OneDrive: el link corto redirige al archivo; dejar que curl siga el redirect.
|
|
# "download=1" fuerza descarga en vez de preview HTML.
|
|
case "$URL" in
|
|
*\?*) DL_URL="${URL}&download=1" ;;
|
|
*) DL_URL="${URL}?download=1" ;;
|
|
esac
|
|
;;
|
|
*)
|
|
DL_URL="$URL"
|
|
;;
|
|
esac
|
|
|
|
mkdir -p "$DEST.tmp"
|
|
echo "[fetch-data] descargando a $DEST.tmp/data.tar.gz ..."
|
|
curl -fL --retry 3 ${TOKEN:+-H "Authorization: Bearer $TOKEN"} \
|
|
-o "$DEST.tmp/data.tar.gz" "$DL_URL"
|
|
|
|
echo "[fetch-data] verificando que es un tarball válido..."
|
|
tar -tzf "$DEST.tmp/data.tar.gz" >/dev/null || {
|
|
echo "[fetch-data] ERROR: el contenido no es un tar.gz válido."
|
|
echo " Verifica que el link sea de descarga directa y no de vista previa."
|
|
exit 1
|
|
}
|
|
|
|
echo "[fetch-data] extrayendo..."
|
|
tar -xzf "$DEST.tmp/data.tar.gz" -C "$DEST.tmp"
|
|
|
|
# Si el tarball trae una carpeta raíz única, aplánala
|
|
if [ -d "$DEST.tmp/data" ]; then
|
|
mv "$DEST.tmp/data" "$DEST.new"
|
|
else
|
|
mv "$DEST.tmp" "$DEST.new"
|
|
fi
|
|
|
|
if [ -d "$DEST" ]; then
|
|
echo "[fetch-data] ya existe $DEST — moviendo el anterior a $DEST.old"
|
|
mv "$DEST" "$DEST.old"
|
|
fi
|
|
mv "$DEST.new" "$DEST"
|
|
rm -rf "$DEST.tmp" "$DEST.old"
|
|
|
|
echo "[fetch-data] listo: data en $DEST (recordar ./qm-db también)"
|