¿Cuál es el contenido de la entrevista al ingeniero de big data de 2021?

Introducción En los últimos años, el desarrollo de big data ha estado en pleno apogeo. Muchas personas optan por estudiar big data o cambiar de carrera a big data implica mucho trabajo. Por lo tanto, al tomar decisiones laborales, aún es necesario tomar decisiones razonables. Para ayudar a todos a ingresar mejor a la industria de big data, a continuación se presenta una introducción detallada al contenido de la entrevista a ingenieros de big data de 2021.

1. Autopresentación

En general, es para presentarse y hablar sobre su experiencia laboral y de proyectos. El entrevistador realizará una entrevista técnica con usted en función de su experiencia en el proyecto. Al presentarse, asegúrese de centrarse en lo central, no hable demasiado, intente amplificar su valor y deje que el entrevistador sienta su pasión por el trabajo y su capacidad para contribuir a la empresa en el futuro.

2. Varios conocimientos y habilidades de desarrollo de almacenes

(1) Java es necesario, pero no lo suficientemente profundo, lo cual es suficiente para las entrevistas de Java.

(2)Ecología de Hadoop, Yarn, Zookeeper, HDFS, estos principios subyacentes deben comprenderse y, a menudo, se preguntan en las entrevistas.

(3) Proceso de barajado de Mapreduce Esta también es una pregunta que se hace a menudo en las entrevistas.

(4) Hbase y HIve, realmente no tiene sentido hacer big data.

(5) Se deben devolver las operaciones de bases de datos Mysql, Oracle y Postgres y se debe escribir SQL.

(6) Sistema operativo Linux, debe comprender este comando simple, lo mejor es escribir un script de shell.

(7) Debe existir al menos una herramienta de procesamiento de datos como 7) Kettle o Sqoop. 8. Modelado de almacenes de datos y cuestiones de modelos de datos.

3. Conocimientos y habilidades técnicas

(1) SparkSql y SparkStreaming, principios subyacentes, kernel, proceso de envío de tareas, etc. , Intente profundizar en la historia interna y, a menudo, compárela con MapReduce. Por supuesto, también debes saber sobre Storm y Flink. Flink es una sugerencia que debes aprender y que será cada vez más útil en el futuro.

(2) Redis, Kafka y ElasticSearch deben comprender los principios, tener un conocimiento profundo y poder usarlos, operarlos y ajustarlos.

(3) Impala y Kirin deben entenderse y utilizarse tanto como sea posible.

(4) Python, si tengo la habilidad y la energía, recomiendo aprenderlo en profundidad. Actualmente estoy estudiando por mi cuenta.

(5) Los problemas del clúster incluyen algunos conocimientos simples de operación y mantenimiento.

(6) Problema de sesgo de datos de big data, incluido el ajuste de memoria de Spark JVM, etc.

Esta es la introducción al contenido de la entrevista al ingeniero de big data de 2021. Espero que esto ayude. Por supuesto, ingresar a la industria del big data requiere que usted mejore continuamente sus habilidades para poder tener un lugar mejor.