Hola. Hermano, muchas gracias, recientemente estoy en un curso de BigData y posterior el de Data Scientist lo estaré cursando, tu video de instalación me ayudo mucho y lo logre con la ultima versión Spark en windows 8 y todavia arranca jejeje, me suscribiré a tu canal. Saludos desde México.
@manuelcoaguila584
7 ай бұрын
Literal, TE AMO. Eres el unico que explica de la manera correcta. Gracias. :)
@gaietital
2 жыл бұрын
Hola! Muchas gracias por tu video. A mí me salía el error siguiente justo al intentar abrir el jupyter notebook: "'jupyter' no se reconoce como un comando interno o externo, programa operable o archivo por lotes.", para arreglarlo, tuve que poner en el cmd lo siguiente "python -m pip install jupyter" a partir de ahí ya puedes abrir el jupyter.
@LaHuevaDeDani
11 ай бұрын
Grande!! Maquina !! Crack!! Idolo!! Bestia!!! Gracias a tu video pude instalar finalmente spark te lo agradezco un monton
@santiagogamarragarro8731
2 жыл бұрын
Gracias, me ha ayudado bastante tu video. Estuve tratando de instalar pyspark en Windows y siempre me botaba error por no instalas el findspark, cosa que nunca lo explicaban en otros videos.
@MegaLobo000
3 жыл бұрын
Excelente explicación, muy cortito pero muy bien explicado. Saludos ya me suscribí. Un abrazo
@Sank3r92
Жыл бұрын
Que grande, llevaba horas intentando hacer que me funcionara y nada, ahora me sirve perfecto la conexión con PySpark. Muchas gracias.
@jalorda6316
Жыл бұрын
que version de hadoop usaste? parece que para este tiempo ya no hay soporte de winutils para hadoop 3.00
@estefaniagarciajimenez1202
Жыл бұрын
Muchísimas gracias!! Después de muchos intentos, esto me ha ayudado muchísimo :)
@josemata8865
2 жыл бұрын
No sabes cuanto me has ayudado, sigue así
@jasonaraosfuentes2130
3 жыл бұрын
Excelente Video. De lo mejor que he visto sobre como ayudar a preparar el ambiente para Pyspark (y Spark en general). Eres un crack, Muchas gracias!
@errodringer
3 жыл бұрын
Muchas gracias por el comentario Jason, muy motivador. Seguimos!
@ligiamurilloescobar5617
4 ай бұрын
Funciono perfecto, mil gracias :)
@brendapaolaquintanasilva7948
3 жыл бұрын
Muchas Gracias!!!! estaba sufriendo instalándolo hasta que vi tu video :'D.
@romanguijosavargas4635
Жыл бұрын
Que grande, me funciono al 100 todo, muchas gracias!
@javiertolin73
Жыл бұрын
buen video pero ademas de lo que dice que hay q instalar, tambien es necesario instalar python y para instalar las librerias tienen q usar el comando python -m pip install pyspark findspark jupyter. Saludos
@nicolasrosso3800
Жыл бұрын
muy bueno, preciso y claro. Gracias, va mi like!
@fvelez78
7 ай бұрын
Excelente... sin rodeos ... al grano
@renatobraga1794
2 жыл бұрын
Excelente! Muchas gracias!
@jrobledo25
2 жыл бұрын
Una consulta ¿Qué diferencias notables hay entre las builds 2.7 y 3.3 de hadoop a día de hoy?
@rafafallo1
3 жыл бұрын
Excelente tutorial Errodringer, he logrado levantar las herramientas y he realizado pruebas de concepto con grandes ficheros usando spark, pyspark y jupyter. pero tengo una duda, al crear un archivo nuevo py3, escribo codigo abundante para una solucion etl, y al ejecutar por primera vez el archivo, solo la primera vez demora 6 segundos en procesar 2 millones de lineas de un archivo, posterior a esa ejecucion, lee otros archivos con las misma cantidad de informacion y algunos con mas pero los procesos los ejecuta en menos de 1 segundo. dandome resultados muy favorables, tendras algun conocimiento del porque solo la primera vez demora mas ? te voy a agradecer infinitamente. Saludos!!!
@slacex
Жыл бұрын
muchas gracias funciono a la perfeccion!
@bezant1971
3 жыл бұрын
Muchas gracias Maestro. Mi anterior Version de Spark ya no funcionaba . Ya pude de nuevo usar Spark
@errodringer
3 жыл бұрын
Gracias a ti por comentar! saludos.
@DineshKrishnanG-wx9ez
3 ай бұрын
Great explanation. Thank you!
@DidaKusAlex
9 ай бұрын
maravilloso! gracias!
@albazuniga5257
Жыл бұрын
Hola! Una pregunta! Cuando haces winutils chmod 777 dices que es para cambiar los permisos ¿a efectos prácticos qué nos proporciona? Gracias de antemano! :)
@joseluisllumiquinga9092
Жыл бұрын
Hola yo también quisiera saber, para que se da permisos a ese directorio?
@ivan1997wwe
10 ай бұрын
me sumo a la consulta
@xenitaalvarez925
3 жыл бұрын
Te pasaste! muchas gracias, excelente explicacion!
@nidhogg29
3 жыл бұрын
Ufff curso de Big data, nice
@JavierHernandez-xo5nb
Жыл бұрын
Bendito tu video........
@Erick-vq6xk
Жыл бұрын
Deseo manejar data limpiar y arreglar para que pueda ser visualizado. Generar EtL, es posible hacerlo aquí? Conectarme a la BD y enviar la data limpia? Gracias
@ricardoveloso9163
3 ай бұрын
Muchas gracias
@melinaballario2649
2 жыл бұрын
gracias genio!!! excelente explicacion!
@Pensamiento-Estoico
7 ай бұрын
Gracias MAQUINA!!!!!
@useriuzethical-z1r
2 жыл бұрын
Gracias mano! Love U
@ocam159
Жыл бұрын
pip install pyspark findspark --- cuando coloco ese comando me dice "pip" no se reconoce como un comando interno o externo, programa o archivo por lotes ejecutable. nose por que sucede ayuda porfa
@sebastianperalta5139
2 жыл бұрын
Gracias, buen video
@GianMartinHuillcasSulca
10 ай бұрын
gracias, me ayudo mucho...
@delforhuum
Жыл бұрын
hola bro, antes que nada gracias por tu dedicación. Me tira error en jupiter notebook : ModuleNotFoundError: No module named 'findspark' , gracias (ayuda por favor)
@codingjhames
2 жыл бұрын
tiene que ser obligatoriamente el SD 8 de java?, acabo de revisar el enlace que dejaste y oracle removió todo como era al momento en que grabaste el video y ahora aparece la versión 17 del SDK
@diegobernales9247
2 жыл бұрын
hola probaste con esa versión ?
@ker141990
2 жыл бұрын
Hola que tal me salio este error AttributeError: module 'findspark' has no attribute 'ini' no se que puede ser
@romerotorrezd.fernando9770
2 жыл бұрын
Felicidades!!! Genial el video amigo, pero tengo una consulta, al ejecutar el comando C:\winutils\bin>winutils chmod 777 C:\tmp\hive, me sale el error: La ejecución del código no puede continuar porque no se encontró MSVCR100.dll. Este problema se puede solucionar reinstalando el programa. Se trata de un error en la instalación de windows 10? Muchas gracias por tu valiosa ayuda.
@gastonfranco421
2 жыл бұрын
tenia el mismo problema y pude solucionar. El error MSVCR120. DLL se debe a una carencia de librerías VISUAL C++, y se soluciona instalando los paquetes Visual C++ End User Runtime
@susejking1
2 жыл бұрын
Hola, estoy teniendo un problema a la hora de ejecutar el comando "winutils chmod 777 C:\tmp\hive", pues al dar enter me aparece el error 'winutils.exe - Error de la aplicacion, La aplicación no se pudo iniciar correctamente (0xc000007b). Cabe mencionar que el enlace para descargar el JDK de Java ya no funciona, así que tuve que buscar la versión mas reciente desde la pagina de Oracle. Alguien mas tiene este problema?
@juanfranciscolago4027
3 жыл бұрын
Muy bueno el tema! "Winutils" es para emular la terminal de Linux en Windows? Yo uso Linux, para ver que me hace falta para adaptar esto a lo que uso yo. Saludos!
@errodringer
3 жыл бұрын
Gracias por comentar Juan Francisco! Voy a hacer también el vídeo correspondiente para Ubuntu, que es lo suyo, lo que pasa que a veces por circunstancias de la vida pues tienes que instalar spark en Windows. En cuento a Winutils no es una emulación de Linux en Windows, es más bien los binarios de Hadoop, que es lo que permite almacenar y procesar los datos en paralelo.
@juanfranciscolago4027
3 жыл бұрын
@@errodringer que bueno que también vayas a hacer para Linux en Ubuntu! Esta bueno que hagas los dos. Muchas gracias por la dedicación!
@lucianocasacci2
7 ай бұрын
Hola, cuando ejecuto el comando spark = SparkSession.builder.getOrCreate() no termina mas de ejecutar esa linea, no se como solucionarlo ya reinstale todo de nuevo y sigue tardando muchisimo y nunca termina
@miguelurgiles8393
3 жыл бұрын
Muy buen curso 😃
@errodringer
3 жыл бұрын
Gracias Miguel, saludos!
@JuanMunoz-we1ep
3 жыл бұрын
Estimado Instructor: vuestro video no es bueno, es ¡¡¡ES MUY BUENO!!!. Hiciste muy fácil la explicación y en un tiempo corto, que no me di cuenta cuando habías terminado. Felicitaciones. Como tú estás trabajando con Jupiter y Python ¿primero instalaste Python y luego Anaconda? ¿Me sugieres algún libro o tutorías para estudiar Spark bajo Windows? Muy agradecido, muy agradecido, muy agradecido. Que Dios te multiplique en tus proyectos de vida.
@errodringer
3 жыл бұрын
Muchísimas gracias por el comentario, Juan! Es muy motivador. En cuanto a la instalación, no me gusta Anaconda, primero instalé Python y luego Jupyter Notebook, todo por separado y sin problemas, tenemos vídeo de esto en el canal. En cuanto a libros... la verdad que no soy muy de libros, si quieres aprender, creo que con un poco de voluntad (que ya se ve que la tienes) y Google + KZitem tienes de sobra! ;) Saludos y nos vemos en los próximos manuales.
@jeffersonbracamonte8066
Жыл бұрын
AYUDAME HICE TODOS LOS PASOS PERO AL FINAL EN PIP INSTALAR ME SALE QUE PIP NO SE RECONOCE COMO UN COMANDO INTERNO
@danielalfonso5175
2 жыл бұрын
Buenas me, esta saliendo este error : ModuleNotFoundError Traceback (most recent call last) Input In [3], in () ----> 1 import findsparks 2 findspark.init() ModuleNotFoundError: No module named 'findsparks' Si alguien me puede ayudar se lo agradezco
@cristobalvergara666
Жыл бұрын
Estoy igual :c
@taramilojkovic1807
Ай бұрын
Thank you so much!
@sebastianpaez2505
2 жыл бұрын
Gracias por el video. Seguí paso a paso cada detalle, pero me sale error, no se encuentra winutils.exe, alguna idea??
@johnlopez5799
2 жыл бұрын
Excelente video. Mira tengo este erro, podrías ayudarme. Al ejecutar el pip install pyspark findspark, me arroja esto. "pip" no se reconoce como un comando interno o externo, programa o archivo por lotes ejecutable. Gracias
@errodringer
2 жыл бұрын
en este vídeo puede encontrar la solución: kzitem.info/news/bejne/s46LqJanpqGqo6g
@karinapino1917
3 жыл бұрын
Todo me instalo correctamente, lo único que cuando ingreso import findspark no me acepta, me bota error: ModuleNotFoundError Traceback (most recent call last) in ----> 1 import findspark 2 findspark.init() ModuleNotFoundError: No module named 'findspark Ayuda, por favor.
@mauriciorostagno3276
2 жыл бұрын
Hola Karina a mi me sucede lo mismo. Pudiste solucionar ese problema? Ayuda!
@ignacioloyola2585
2 жыл бұрын
@@mauriciorostagno3276 pudieron solucionarlo? me sucede lo mismo
@ker141990
2 жыл бұрын
@@ignacioloyola2585 Hola, tengo el mismo problema lograron solucionarlo
@ramimashalfontenla1312
2 жыл бұрын
Hola, en primer lugar felicidades por este vídeo y el canal en general, me encanta. Llevo días intentando instalar esto y tu vídeo me ha solucionado todo. Pero, después de seguir todos los pasos, me sigue dando este error: RuntimeError: Java gateway process exited before sending its port number Este error ya me salía antes de seguir tus pasos. Por más que investigo en stackover no consigo encontrar la solución. Alguna idea, a alguien más le sucede?? Muchas gracias por adelantado.
@mauriciorostagno3276
2 жыл бұрын
Buenas, esta confiado en que ya estaba todo en orden pero ahora cuando quise empezar a utilizar Apache Spark me salta este error: ModuleNotFoundError Traceback (most recent call last) in ----> 1 import findspark 2 findspark.init() ModuleNotFoundError: No module named 'findspark' Por favor ayuda!
@anghelosmithvegapoma3361
Жыл бұрын
Hola, disculpa encontraste una solución?
@ExtraRuRo
3 жыл бұрын
Hola, hermano tengo dos discos duros, el principal se esta llenando, entonces quiero instalar los programas en el segundo. Hay algún problema en poner el development kit en otra carpeta que no sea java? Y otra duda, si hago toda la instalación de pyspark en el disco vacío, tendré problemas con los paths? gracias
@errodringer
3 жыл бұрын
Nunca hay problemas con la ruta de instalación, lo único q debes tener en cuenta es que en el PATH tienes que guardar las rutas donde tú has instalado las diferentes herramientas. Saludos!
@ExtraRuRo
3 жыл бұрын
@@errodringer Muchas gracias!
@diegobernales9247
2 жыл бұрын
Es necesario tener instalado hadoop para esto?
@jamesmiths72
2 жыл бұрын
Hola muchas gracias por el video. Cando ejecuto el notebook con este comando spark = SparkSession.builder.getOrCreate() me sale este error al final Exception: Java gateway process exited before sending its port number Como puedo resolverlo he hecho todo al pie de la letra y no he podido solucinarlo, Gracias.
@sebastianpaez2505
2 жыл бұрын
me ha pasado lo mismo! has podido solucionarlo James?
@jamesmiths72
2 жыл бұрын
@@sebastianpaez2505 Hola Sebastian. Lastimosamente no pude encontrar solucion en ningun foro.
@sebastianpaez2505
2 жыл бұрын
@@jamesmiths72 estoy en la misma. Gracias por contestar.
@sebastianpaez2505
2 жыл бұрын
@@jamesmiths72 Logré instalarlo! Me funcionó simplemente instalar la última version de Java (no desistale la anterior) en C cree una carpeta java2 y le puse el path correspondiente, como por arte de magia funcionó. Ojala te sirva también. Saludos
@mauriciorostagno3276
3 жыл бұрын
Una consulta, en el minuto 7:15 cuando ejecuto el comando pip install pyspark findspark no comienza la instalación, si no que me dice lo siguiente -"pip" no se reconoce como un comando interno o externo, programa o archivo por lotes ejecutable. Alguien sabe como solucionar esto por favor? Muchisimas gracias desde ya. Esta genial el video!
@errodringer
3 жыл бұрын
En el canal tenemos un vídeo dedicado a eso
@mauriciorostagno3276
3 жыл бұрын
@@errodringer Muchas gracias!
@mauriciorostagno3276
3 жыл бұрын
@@errodringer Me acabo de suscribir, sos un genius
@MrMadmaggot
2 жыл бұрын
8:24 me da error el builder.getorcreate
@carlosmamani4697
3 жыл бұрын
es necesario que sea Windows 10, tengo Windows 8.1
@JuanRamirezV
3 жыл бұрын
Saludos, gracias por el video. He buscado en variar partes porque me sale este error pero no lo encuentro Exception: Unable to find py4j, your SPARK_HOME may not be configured correctly Y en mis variables de entorno lo tengo configurado asi SPARK_HOME = D:\Spark\spark-2.4.7-bin-hadoop2.7
@errodringer
3 жыл бұрын
Muy extraño, has seguido todos los pasos del vídeo? y, has usado findspark? prueba con: findspark.init('D:/Spark/spark-2.4.7-bin-hadoop2.7')
@bobbypepetrueno3431
Жыл бұрын
"La ejecución de código no puede continuar porque no se encontró MSVCR100.dll. Este problema se puede solucionar reinstalando el programa." ¿Alguien más ha visto una ventana con ese mensaje? ¿Cómo lo habéis solucionado?
@bobbypepetrueno3431
Жыл бұрын
Me aparece en el minuto 06:51
@JorgeHernandez-nh2ry
3 жыл бұрын
No me deja instalar las librerías :( ayuda!
@errodringer
3 жыл бұрын
Buenas Jorge! que error te sale?
@jhonatanwalterarizaquispe8933
Жыл бұрын
Me Ayudas con esto porfa Incorrect command line arguments. Usage: chmod [OPTION] OCTAL-MODE [FILE] or: chmod [OPTION] MODE [FILE] Change the mode of the FILE to MODE. -R: change files and directories recursively Each MODE is of the form '[ugoa]*([-+=]([rwxX]*|[ugo]))+'.
@luligod
5 ай бұрын
Hola lo pudiste solucionar me pasa exactamente lo mismo
@carlosdac55
2 жыл бұрын
Tengo el siguiente error, alguien me puedar dar un consejo para resolverlo: C:\Program Files\winutils\bin>winutils chmod 777 C:\Program Files\tmp\hive Incorrect command line arguments. Usage: chmod [OPTION] OCTAL-MODE [FILE] or: chmod [OPTION] MODE [FILE] Change the mode of the FILE to MODE. -R: change files and directories recursively Each MODE is of the form '[ugoa]*([-+=]([rwxX]*|[ugo]))+'.
Пікірлер: 103