[Mini Tutorial] Extraer precios desde web con Power Bi
- Autor del tema Morello
- Fecha de inicio
VaoS
ODUM
- Desde
- 26 Jul 2019
- Mensajes
- 72
Está rebueno no cachaba estas cosas, probé con paris y funciona rebien, ahora seguí esta pagina que explica como hacer consultas con paginación https://www.myonlinetraininghub.com/scrape-data-multiple-web-pages-power-query y luego de leciar un poco me funciono, ahora ya se podría recorrer categorías completas
luisrobles
ODUM
- Desde
- 27 Jul 2019
- Mensajes
- 1.002
No me tomaba bien los sitios, decía que estaba habilitada la compatibilidad de sitio con internet Explorer...DavidRios' pid='15381' dateline='1569670549 dijo:Alguien lo terminó ? Le funciona? Me dolió la cabeza solo con leerlo
Enviado desde mi SM-G9650 mediante Tapatalk
Enviado desde mi MI MAX 3 mediante Tapatalk
pablomagno1982
ODUM
- Desde
- 28 Jul 2019
- Mensajes
- 97
Qué buena! yo estoy viendo comprar un departamento, y esto me vendría súper.
Me tomó bien la web de portal inmobiliario, pero no me resultó actualizar más que la primera página.
Lamentablemente no me tomó la página toc-toc, que tiene indicadores más interesantes que portalinmobiliario.
Sólo puedo conectar la info al ver un proyecto en específico, pero la idea sería poder tener una base con todos los proyectos (al intentar esto me figura un error de activar los scripts para internet explorer).
En caso que me resulte de ahí comparto el archivo.
Me tomó bien la web de portal inmobiliario, pero no me resultó actualizar más que la primera página.
Lamentablemente no me tomó la página toc-toc, que tiene indicadores más interesantes que portalinmobiliario.
Sólo puedo conectar la info al ver un proyecto en específico, pero la idea sería poder tener una base con todos los proyectos (al intentar esto me figura un error de activar los scripts para internet explorer).
En caso que me resulte de ahí comparto el archivo.
VaoS
ODUM
- Desde
- 26 Jul 2019
- Mensajes
- 72
Para el que le sirva, dejo para crear listado en Paris (revisa las siguientes paginas) el ejemplo es con audifonos (listado de como 400)
En Edit Queries -> Van a New Source y seleccionan Blank Query, crean una con el nombre fnAudifonos y agregan el código de mas abajo despues crean otra con cualquier nombre y agregan el otro código de mas mas abajo.
fnAudifonos
Audifonos
En Edit Queries -> Van a New Source y seleccionan Blank Query, crean una con el nombre fnAudifonos y agregan el código de mas abajo despues crean otra con cualquier nombre y agregan el otro código de mas mas abajo.
fnAudifonos
Código:
(PageStart as text) =>
let
Source = Web.BrowserContents('https://www.paris.cl/electro/audio/audifonos/?sz=40&start='&PageStart),
Tabla1 = Html.Table(Source, {{'Column1', '.ellipsis_text'}, {'Precio', '.price > .item-price'}, {'Descuento', '.discount-badge'}}, [RowSelector='.flex-item-products'])
in
Tabla1
Código:
let
Source = {1..21610},
#'Converted to Table' = Table.FromList(Source, Splitter.SplitByNothing(), null, null, ExtraValues.Error),
#'Inserted Modulo' = Table.AddColumn(#'Converted to Table', 'Modulo', each Number.Mod([Column1], 40), type number),
#'Filtered Rows' = Table.SelectRows(#'Inserted Modulo', each true),
#'Inserted Addition' = Table.AddColumn(#'Filtered Rows', 'Addition', each [Modulo] + 1, type number),
#'Removed Columns' = Table.RemoveColumns(#'Inserted Addition',{'Addition'}),
#'Inserted Subtraction' = Table.AddColumn(#'Removed Columns', 'Subtraction', each [Modulo] - 1, type number),
#'Removed Columns1' = Table.RemoveColumns(#'Inserted Subtraction',{'Subtraction'}),
#'Inserted Subtraction1' = Table.AddColumn(#'Removed Columns1', 'Subtraction', each [Column1] - 1, type number),
#'Filtered Rows1' = Table.SelectRows(#'Inserted Subtraction1', each ([Modulo] = 1)),
#'Removed Columns2' = Table.RemoveColumns(#'Filtered Rows1',{'Modulo'}),
#'Reordered Columns' = Table.ReorderColumns(#'Removed Columns2',{'Subtraction', 'Column1'}),
#'Renamed Columns' = Table.RenameColumns(#'Reordered Columns',{{'Subtraction', 'PageStartNumbers'}}),
#'Filtered Rows2' = Table.SelectRows(#'Renamed Columns', each [PageStartNumbers] < 400),
#'Changed Type' = Table.TransformColumnTypes(#'Filtered Rows2',{{'PageStartNumbers', type text}}),
#'Invoked Custom Function' = Table.AddColumn(#'Changed Type', 'fnAudifonos', each fnAudifonos([PageStartNumbers])),
#'Expanded fnAudifonos' = Table.ExpandTableColumn(#'Invoked Custom Function', 'fnAudifonos', {'Column1', 'Precio', 'Descuento'}, {'Column1.1', 'Precio', 'Descuento'}),
#'Changed Type1' = Table.TransformColumnTypes(#'Expanded fnAudifonos',{{'Precio', Currency.Type}, {'Descuento', Percentage.Type}}),
#'Renamed Columns1' = Table.RenameColumns(#'Changed Type1',{{'Column1.1', 'Nombre'}})
in
#'Renamed Columns1'
pero lo fui
- Desde
- 29 Jul 2019
- Mensajes
- 771
Cuando hacía consultas en Ripley sólo me agarraba la página que veía, al final hice página por página y después uní todas las consultas de la misma categoría en una sola página del Power Bi con las opciones.
- Desde
- 29 Jul 2019
- Mensajes
- 771
No llevo registro de los cambios, sólo ordeno por porcentaje de descuento y reviso y hay alguna oferta de verdad buena cada vez que actualizo.Epiglo' pid='15967' dateline='1569900463 dijo:
Si la oferta es buena voy a notar el cambio, si no es oferta simplemente pasa desapercibido, así lo he hecho.
Morello
ODUM
- Desde
- 24 Jul 2019
- Mensajes
- 2.345
te da la opción de guardar en cvs, eso lo gráfico en otra planilla. queda algo como knasta como dijeron mas arriba.Epiglo' pid='15967' dateline='1569900463 dijo:
https://www.odumeros.cl/showthread.php?tid=1247
Morello
ODUM
- Desde
- 24 Jul 2019
- Mensajes
- 2.345
suponiendo que tienes una tabla por cada pagina => https://youtu.be/jcHqWNAGV1w min 1.25DeLarge' pid='34171' dateline='1578486087 dijo:
en mi caso creo una 'tabla general' con la opción de 'enter data' y creo solo la 1ra fila, a esa les agrego las demás como en el video.
- Desde
- 24 Jul 2019
- Mensajes
- 7.264
Buena idea esto de compartirlo en OneDriveluisrobles' pid='14985' dateline='1569516222 dijo:
Lo otro es que estoy teniendo problemas con Falabella, al parecer conexión en modo incognito esta webeado, ustedes utilizan su usuario y clave para evitar ese drama ?
