Articles of aprendizaje automático

El trazado de la línea de tendencia no funciona con bigdataset

Tengo un gran conjunto de datos con 52166 puntos de datos y que se ve así: bc_conc 2010-04-09 10:00:00 609.542000 2010-04-09 11:00:00 663.500000 2010-04-09 12:00:00 524.661667 2010-04-09 13:00:00 228.706667 2010-04-09 14:00:00 279.721667 Es un dataframe de pandas y el índice está en la fecha y hora. Ahora me gusta trazar los datos de bc_conc contra […]

¿Cómo obtener resultados de la función de pérdida personalizada en Keras?

Quiero implementar una función de pérdida personalizada en Python y debería funcionar como este pseudocódigo: aux = | Real – Prediction | / Prediction errors = [] if aux 0.1 & 0.15 & <= 0.2: errors.append(5) else: errors.append(2000) return sum(errors) Comencé a definir la métrica así: def custom_metric(y_true,y_pred): # y_true: res = K.abs((y_true-y_pred) / y_pred, […]

Reinicializar variables en Tensorflow

Estoy usando un Tensorflow tf.Saver . tf.Saver para cargar un modelo pre-entrenado y quiero volver a entrenar algunas de sus capas borrando (reinicializando al azar) sus pesos y sesgos apropiados, luego entrenando esas capas y salvando a los entrenados. modelo. No puedo encontrar un método que reinicialice las variables. Intenté tf.initialize_variables(fine_tune_vars) pero no funcionó (asumiría […]

Diferencia entre Keras model.fit usando solo batch_size y usando solo steps_per_epoch

Cuando ejecuto model.fit utilizando los parámetros batch_size y steps_per_epoch, recibo el siguiente error: ValueError: If steps_per_epoch is set, the `batch_size` must be None. Entonces, a partir de este error y de la siguiente pieza de documentación de keras Model (API funcional) batch_size: Integer o None. Número de muestras por actualización de gradiente. Si no se […]

¿Cómo usar los pesos evento por evento en Tensorflow?

En mi conjunto de datos tengo para cada entrada (evento) un peso. Este peso consta de varias cantidades, pero básicamente representa la importancia de este evento para los datos y debe tenerse en cuenta. ¿Cómo puedo usar estos pesos cuando entreno en Tensorflow? No quiero simplemente usar esto como otra característica. Gracias

implementando un clasificador de perceptron

Hola, soy bastante nuevo en Python y en la PNL. Necesito implementar un clasificador de perceptron. Busqué en algunos sitios web pero no encontré suficiente información. Por ahora tengo varios documentos que agrupé según la categoría (deportes, entretenimiento, etc.). También tengo una lista de las palabras más utilizadas en estos documentos junto con sus frecuencias. […]

Tren clasificador de imágenes multi-clase en Keras

Estaba siguiendo un tutorial para aprender a entrenar un clasificador usando Keras https://blog.keras.io/building-powerful-image-classification-models-using-very-little-data.html Específicamente, a partir del segundo guión dado por el autor, quise transformar el guión en uno que pueda entrenar un clasificador de clases múltiples (era un binario para perros y gatos). Tengo 5 clases en la carpeta de mi tren, así que […]

Conversión de dataframe pandas a marco h2o de manera eficiente

Tengo un dataframe de Pandas que tiene Encoding: latin-1 y está delimitado por ; . El dataframe es muy grande casi del size: 350000 x 3800 . Quería usar Sklearn inicialmente, pero mi dataframe tiene valores faltantes ( NAN values ), por lo que no podría usar los bosques aleatorios de Sklearn o GBM. Así […]

¿Cómo predecir la imagen de entrada usando un modelo entrenado en Keras?

Estoy empezando solo con keras y aprendizaje automático en general. Entrené un modelo para clasificar imágenes de 2 clases y lo model.save() utilizando model.save() . Aquí está el código que utilicé: from keras.preprocessing.image import ImageDataGenerator from keras.models import Sequential from keras.layers import Conv2D, MaxPooling2D from keras.layers import Activation, Dropout, Flatten, Dense from keras import backend […]

¿Cuáles son las buenas características para clasificar fotos de ropa?

Quiero construir un clasificador de ropa que tome una foto de una prenda de ropa y la clasifique como ‘jeans’, ‘vestido’, ‘entrenadores’, etc. Algunos ejemplos: Estas imágenes provienen de sitios web de minoristas, por lo que normalmente se toman desde el mismo ángulo, generalmente en un fondo blanco o pálido, tienden a ser muy similares. […]